Klicken Sie mit der rechten Maustaste auf einen leeren Bereich in der Taskleiste am unteren Bildschirmrand und wählen Sie: Symbolleisten -> Neue Symbolleiste…
Geben Sie in der Adresszeile folgenden Pfad ein:
%USERPROFILE%\AppData\Roaming\Microsoft\Internet Explorer\Quick Launch
und bestätigen Sie den Ordner mit Ordner auswählen.
Entfernen Sie danach noch die beiden Häkchen bei Text anzeigen und Titel anzeigen (via Rechtsklick auf die Symbolleiste im dann sich öffnenden Kontext-Menü).