Как убрать?

Это метка shortcut, ее не заменишь

Самый простой способ - скачать с офф сайта Майкрософт специальную утилиту. .
Зовется она TweakUiPowertoySetup
Прямую ссылку не дам, гугл в помощь. .
Среди прочих настрое в этой утилите есть пункт, отображения значков у ярлыков, где можно выбрать nonе (нет) .

Можно еще с реестром поиграться. . Заменив стандартную иконку пустой (прозрачными пикселями). .
Но это долго. . И нужен ребут. .

Так что TweakUiPowertoySetup....