Ok, ik heb het semi opgelost.
Het blijkt dus aan mijn E51 te liggen.
Na de downgrade naar de standaard firmware en daarna direct de HTC gepaired, werkt alles weer prima. Daarna de Nokia gepaired en ook deze werkt prima.
Ik heb toen naar de voorlaatste versie firmware geupgrade en daarna direct mijn Nokia gepaired, weer hetzlefde probleem. Terug naar de originele firmware en mijn Nokia gepaired en weer hetzelfde probleem.
Toen geupgrade naar de nieuwste firmware en HTC als eerste gepaired en alles werkt weer als een zonnetje.
Ik ga dus nu mijn Nokia niet meer pairen, want om een vreemde manier gaat dat steeds fout. Geen idee hoe het kan.