Script pour décaler image dans une zone SVG

Bonjour à tous,

Je souhaite déplacer une image SVG dans un cadre... Je m'explique je voudrais reprendre le principe de googleMap mais avec des images.
Pour cela je récupère les coordonnées de la souris sur l'image pour gérer mon déplacement à deux moments: Lors du premier "click" (mousedown) et enfin lors du relâchement du "click" (mouseup). Je fais la différence et l'ajoute à mon attribut viewbox.
J'arrive a décaler l'image dans les 2 diagonales (et dans les deux sens) cependant je n'arrive pas a enchainer deux diagonales "différentes"...
Si quelqu'un a une idée d'où ça peut venir =)

Je vous glisse mon code