Je comprends pas bien ton code, mais tu envois les positions X,Y,Z et rotation X,Y,Z une par une ou toutes dans le même paquet parceque déjà je pense qu'il y a matière à réfléchir à se niveau là.
Ensuite la latence est un problème bien connu dans les jeux réseaux, regarde du côté des algos de dead reckoning pour les déplacements anticipés.