Et bien en fait... non. La principale chose qui change entre un système 32 bits et un 64 bits c'est la taille des adresses mémoires. Bon, ok, c'est un peu plus compliqué que ça, mais grosso modo ce qui va changer c'est la mémoire que le système va pouvoir allouer à un programme, si ce programme est lui aussi en 64 bits. Si le programme est 32 bits, la limite est de 2Go de ram. S'il est en 64 bits il peut allouer toute la mémoire du système.
En fait t'a pas tout à fait tort, il y a des optimisations en 64 bits qui peuvent augmenter certains aspects de la vitesse de certains programmes. mais c'est très très négligeable. En pratique, tu ne peux pas sentir la différence.