Plusieurs pistes :
Click droit sur la barre des tâches, et vérifier dans les propriétés qu'elle n'est pas vérrouillée.
Amener la souris sur le trait du haut de cette barre, pour faire apparaitre une flèche "haut - bas" et redimensionner la barre des tâches sur plusieurs lignes pour voir ce qui s'y passe.
Aller dans le répertoire "quick launch" qui contient ces choses (sous XP, c'est dans :
C:\Documents and Settings\NomUtilisateur\Application Data\Microsoft\Internet Explorer\Quick Launch)
(sous 98, c'est plus simple, mais je ne me rappelle plus)
et regarder ce qui s'y trouve : a mon avis éviter les dossiers, et voir les propriétés des raccourcis (fichier caché ...)