gluUnProject ? Picking - Drag

Version imprimable

Bonjour a tous,

J'essaye de faire du drag'n'drop de points opengl. (Je me suis mis a opengl depuis qq semaines seulement : je rame!)
Pour l'instant j'arrive a récupérer mon point grâce a gluPickMatrix.
Le problème, c'est le déplacement. Pour ca, il faut que je retrouve les coordonnées opengl a partir des coordonnes de la souris dans la fenêtre.
Et c'est la qu'est mon problème!

J'ai essaye avec gluUnProject (avec et sans glReadPixel), mais sans succes. Voici comment j'utilise glUnProject :
gluUnProject( sourisX, sourisY, lePointQueJeDeplaceZ, modelview, projection, viewport, &posX, &posY, &posZ);

J'aimerais avoir en retour un point qui a conserve sa valeur z, mais qui s'est juste deplacer selon x et y.
Seulement, actuellement cela me retourne un Z different.

Voila, je ne sais pas si je suis bien clair, mais j'ai fait de mon mieux.

Voici mon code :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 Point3D* Toto::GetOGLPos(int x, int y, float z) { GLint viewport[4]; GLdouble modelview[16]; GLdouble projection[16]; GLfloat winX, winY, winZ; GLdouble posX, posY, posZ; glGetDoublev( GL_MODELVIEW_MATRIX, modelview ); glGetDoublev( GL_PROJECTION_MATRIX, projection ); glGetIntegerv( GL_VIEWPORT, viewport ); winX = (float)x; winY = (float)viewport[3] - (float)y; // NOTE : Je pensais a un probleme de perspective, j'ai donc ajoute mon gluPerspective ici, mais sans succes. Idem pour gluLookAt. //glReadPixels( x, int(winY), 1, 1, GL_DEPTH_COMPONENT, GL_FLOAT, &winZ ); gluUnProject( winX, winY, z, modelview, projection, viewport, &posX, &posY, &posZ); return new Point3D(posX, posY, posZ); }
Je m'y prends mal visiblement : Pourquoi?

10/06/2008, 04h00
nuranto

En fait, je vais poser une question plus simple :

Code:

gluUnProject( winX, winY, z, modelview, projection, viewport, &posX, &posY, &posZ);

=> posZ ne devrait-il pas avoir la valeur de z ????

Code:

gluUnProject( winX, winY, 0, modelview, projection, viewport, &posX, &posY, &posZ);

devrait retourner les coordonnees openGL a profondeur minimale et

Code:

gluUnProject( winX, winY, 1, modelview, projection, viewport, &posX, &posY, &posZ);

devrait retourner les coordonnees openGL a profondeur maximale.

Right ?
10/06/2008, 10h22
ShevchenKik

Salut,

je vais laisser à d'autres le soin de répondre à tes questions sur gluProject / UnProject, que j'ai jusque là assez peu utilisées, mais je voulais te demander:

pourquoi ne pas passer par le gestionnaire d'évênement associé à ton programme? Je veux dire, que ce soit avec glut, MFC, QT, etc... tu as des fonctions appelées quand tu presses une touche, clique, bouge la souris....et par exemple dans ce dernier cas tu recupères très facilement la position X-Y de ta souris.

Pour moi c'est la manière "standard" de faire bouger ta scene ou tes objets, pas en passant par gluUnproject, qui à priori sert à d'autres choses (MAIS je peux bien sûr me tromper....)
11/06/2008, 07h40
nuranto

Salut ShevchenKik,

Merci pour ta réponse! J'utilise GLUT, et j'utilise les fonctions de callback pour clavier, souris.

Le problème n'est pas d'avoir les coordonnées de la souris sur la fenêtre, mais les coordonnées openGL qui sont derrière.

En gros, si je clique en 100x100, et que je veux mettre un point a cet endroit, je ne peux pas faire un glVertex3f(100,100,0)...

Et c'est a ca que sert la fonction gluUnProject. Tu lui donne en paramètre les matrices et les coordonnées de la souris, et normalement la fonction te renvoie les coordonnées openGL a la profondeur que tu souhaites.
Sauf que pour moi, beh ça ne marche pas :(
11/06/2008, 09h27
ShevchenKik

Re,

ok, désolé j'avais pas tout a fait compris ton problème comme ca, je ne voyais pas où tu avais besoin d'utiliser gluunproject.

Bref, regarde là (déjà posté par plein de gens sur le forum, les questions sur gluunproject reviennent très souvent)
http://students.iiit.ac.in/~vkrishna/data/unproj.html

si je compare ca et ton code, je vois que tu as commenté le glReadPixels, alors que c'est précisément ca qui te permet de recuperer ton z....

Ou je me suis mal explique plutôt :p

Sinon, oui j'ai déjà vu ce lien, et tant d'autres.

glReadPixel me retourne la valeur du DepthBuffer a un point donné. Ce n'est pas ce que je veux.

En regardant la scène de face, cad Window(x,y) => OpenGL(x,y) ; si je déplace un objet il doit se déplacer selon x et y, et z ne doit pas bouger! Hors avec glReadPixel la valeur de z bouge.
Si je spécifie moi même un z, (la valeur de z de l'objet que je bouge), la valeur z retournée est modifiée (pourquoi ???). Cela dit ça marche, si j'ignore la valeur retournée et que j'utilise la valeur de z de départ.
(Tu me suis ?? :p)
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 Point3D* FrontFaceRepresentation::GetOGLPos(Viewport *viewport, int x, int y, float z) { GLdouble modelview[16]; GLdouble projection[16]; GLfloat winX, winY, winZ; GLdouble posX, posY, posZ; glMatrixMode( GL_MODELVIEW ); setTransformations(this->currentViewport); glMatrixMode(GL_PROJECTION); glPushMatrix(); glLoadIdentity(); setPerspective(); glGetDoublev( GL_MODELVIEW_MATRIX, modelview ); glGetDoublev( GL_PROJECTION_MATRIX, projection ); winX = (float)x; winY = (float)height - (float)y; gluUnProject( winX, winY, z, modelview, projection, viewport->toArray, &posX, &posY, &posZ); glPopMatrix(); glFlush(); glMatrixMode(GL_MODELVIEW); return new Point3D(posX, posY, posZ); // posZ != z !!!!!! } void FrontFaceRepresentation::myMotion(int x,int y) { if(this->currentPoint==NULL) return; Point3D* p3d = this->GetOGLPos(mythis->getCurrentViewport(), x, y, mythis->currentPoint->z ); this->currentPoint->x = p3d->x; this->currentPoint->y = p3d->y ; //this->currentPoint->z = p3d->z ; return; }
Donc ok ca marche. Mais si je tourne l'objet de 90 degrés (Window(x,y) => OpenGL(z,y) ), ça ne marche plus, forcement. Et il est crucial pour mon appli que cela marche.... :s

Je sais pas si c'est tres clair tout ca... ?

13/06/2008, 10h05
ShevchenKik

Re,

OK je te suis "à peu près" ;)

Tu voudrais que ton objet, quelle que soit l'orientation de la scène, se déplace en suivant ta souris selon un plan parallèle à l'écran, c'est ca?

Dans le cas où le plan x-Y de ta scène est orienté face à ton écran, c'est facile oui, comme tu l'as dis.

Dans les autres cas, il va falloir projeter les axes de ta scène sur le plan X-Y de ton écran....

Par exemple si ta scène tourne d'un angle alpha autour de l'axe Y, tu auras, pour un déplacement Xecran à l'écran, les déplacements suivants dans ta scène:

Xscene = Xecran*cos(alpha)
Zscene = Xecran*sin(alpha)
YScene = Yecran (car on a tourné autour de Y)

Si tu rajoutes une rotation autour de X ca se complique un peu mais avec un peu de trigo tu t'en sortiras :)
13/06/2008, 16h14
TanEk

Attention ! le z est le z stocké dans le z-buffer. et le posZ est le z au niveau de la scène. Donc c'est normal que posZ soit différent de z...

Pour faire un déplacement de ton objet selon le plan xy de la caméra il te faut plusieurs données. Tout d'abord imaginons que le repère de ton objet (la position en somme) soit de coordonnées O(Ox,Oy,Oz,Ow) avec Ow = 1 car c'est un point dans le repère scène. Il faut que tu fasses une transformation de cette position dans le repère caméra. Donc si t'as la matrice de modelview Mv et la matrice de projection Mp, tu dois faire :
Oc = MpxMvxO

Oc étant le point dans le repère caméra de ton objet. Divise toutes valeurs par Ocw :

Ocx = Ocx / Ocw;
Ocy = Ocy / Ocw;
Ocz = Ocz / Ocw;
Ocw = Ocw / Ocw;

Si ton calcul est bon tu dois avoir Ocx,Ocy,Ocz dans l'intervalle [-1,1] et Ocw=1. Ce sont les coordonnées normalisées dans le repère caméra.

Ensuite tu appliques à Ocz un changement d'intervalle : de [-1,1] à [0,1] :

Ocz = (Ocz +1)/2;

Et ce Ocz est la coordonnée de ton objet dans les coordonnées viewport (coordonnées données à gluUnProject...). Il y a une grosse différence entre le repère caméra et le repère viewport. gluUnProject te fait passer du repère viewport au repère scène. Le Z-buffer stocke les profondeurs en repère viewport et non en repère caméra.

Donc pour positionner ton objet sous la souris à la même profondeur il ne te reste plus qu'a appeler gluUnproject avec les coordonnées de la souris dans les coordonnées viewport (ce que tu fais déjà) et le z que tu veux (le Ocz...) et il te donnera la bonne position dans le repère scène.

Le tour est joué :).
16/06/2008, 08h58
nuranto

Mercii enormement.... Depuis le temps que je suis dessus.. Il semblerait que je ne cherchait pas assez loin! J'avais zappe tout ca....

Merci, ca marche, pour faire ca je fait un simple gluProject pour recuperer mon Ocz, et ca marche impecable!

谢谢

Salut,
je fais remonter ce sujet car je suis confronté plus ou moins au même problème.
Dans mon cas j'utilise le z de la caméra et le zFar du plan de clipping.
Code:

1 2 3 4 5 6 this.glu.gluUnProject((double) x, (double) realY, 1, modelViewMatrix, 0, projectionMatrix, 0, viewport, 0, farWorldCoords, 0); float zFar = 5000; coords.setXY((float)((this.currentCamera.getZ() * farWorldCoords[0] / zFar)), (float)(this.currentCamera.getZ() * farWorldCoords[1] / zFar));
Avec ce code, ça marche nickel pour n'importe quelle position en z de la caméra mais uniquement si les coordonnées x et y de la caméra sont (0,0).
Dès que je modifie le x de la cam, par exemple, il y a un décalage qui croit en fonction de x. J'ai l'impression que je pourrais calculer dynamiquement le facteur pour compenser sans passer par les opérations de matrices proposées par TanEk mais je sèche un peu là...
Est-ce que quelqu'un aurait une idée sur la question ?
Merci d'avance.

Citation:
Envoyé par Djakisback
Salut,
je fais remonter ce sujet car je suis confronté plus ou moins au même problème.
Dans mon cas j'utilise le z de la caméra et le zFar du plan de clipping.
Code:

1 2 3 4 5 6 this.glu.gluUnProject((double) x, (double) realY, 1, modelViewMatrix, 0, projectionMatrix, 0, viewport, 0, farWorldCoords, 0); float zFar = 5000; coords.setXY((float)((this.currentCamera.getZ() * farWorldCoords[0] / zFar)), (float)(this.currentCamera.getZ() * farWorldCoords[1] / zFar));
Avec ce code, ça marche nickel pour n'importe quelle position en z de la caméra mais uniquement si les coordonnées x et y de la caméra sont (0,0).
Dès que je modifie le x de la cam, par exemple, il y a un décalage qui croit en fonction de x. J'ai l'impression que je pourrais calculer dynamiquement le facteur pour compenser sans passer par les opérations de matrices proposées par TanEk mais je sèche un peu là...
Est-ce que quelqu'un aurait une idée sur la question ?
Merci d'avance.
Est-ce qu'on pourrait avoir la signature de gluUnProject ? Parce chez moi c'est :

Code:

GLint gluUnProject ( GLdouble winX , GLdouble winY , GLdouble winZ , const GLdouble *model , const GLdouble *proj , const GLint *view , GLdouble* objX , GLdouble* objY , GLdouble* objZ );

et ce n'est pas la même que celle que tu utilises (11 paramètres au lieu de 9).

29/09/2008, 18h17
Djakisback

Ah oui j'ai oublié de préciser, désolé ^^

Code:

boolean gluUnProject(double winX, double winY, double winZ, double[] model, int model_offset, double[] proj, int proj_offset, int[] view, int view_offset, double[] objPos, int objPos_offset)

C'est le binding Java de celle que tu cites :

Code:

GLint gluUnProject(GLdouble winX, GLdouble winY, GLdouble winZ, const GLdouble * model, const GLdouble * proj, const GLint * view, GLdouble * objX, GLdouble * objY, GLdouble * objZ)

Je ne sais pas à quoi servent les offsets...

Je déclare : double farWorldCoords[] = new double[3];
farWorldCoords[0] donne donc x, farWorldCoords[1] y, etc.
29/09/2008, 19h27
TanEk

Ok revenons maintenant à nos moutons : que cherches-tu dans coords ? Je veux dire tu voudrais que ça représente quoi ? Le point sous la souris à la distance maximale de la caméra ? Tu t'en sers comment après ?

Au fait, un lien qui pourrait t'intéresser :

http://www.java-tips.org/other-api-t...t-in-jogl.html
29/09/2008, 20h00
Djakisback

Merci pour le lien, en fait c'est de ce code que je me suis inspiré.

Mon but est la sélection de sprites en testant si le point des coordonnées de la souris (scène), se trouve à l'intérieur d'un sprite sur un plan 2d (x,y) dans une scène 3d (une espère de Ray Casting sans se soucier de la perspective). Les sprites sont des polygone 2d et peuvent avoir des z différents. Une fois que j'ai mes coordonnées souris transformées en coordonnées scène (la structure coords dans mon code), je teste si x et y sont à l'intérieur d'un sprite (polygone 2d) en parcourant tous les sprites de la scène.

Pour tester la conversion des coordonnées écran => scène je dessine un carré aux coordonnées scène (x,y) de la souris.
Si la caméra est en (0, 0, z), peu importe le z, le carré reste bien sous le curseur (le vrai) de la souris. Mais si je translate la caméra sur x, le carré se décale du vrai curseur souris.

Je ne sais pas si je suis très clair...

[edit] Pour simplifier je voudrais simplement dessiner un objet, un carré par exemple, qui soit toujours sous le curseur de la souris (le vrai) quelques soient le nFar, le zFar ou les coordonnées de la caméra, dans ma scène Opengl.
29/09/2008, 20h23
TanEk

Je ne vais peut-être pas résoudre ce problème mais j'aimerai te faire une remarque :

Si tu veux savoir si un sprite est sélectionné il te suffit simplement de passer les coordonnées du sprite en coordonnées viewport grâce à la commande gluProject. Une fois ces coordonnées écrans obtenues il t'est très facile de savoir si la souris est "dans" le sprite vu que tu connais la position du sprite à l'écran et celle de la souris.

En gros ce que je veux dire c'est que tu as l'air de prendre le problème à l'envers ce qui complique les choses.
29/09/2008, 20h25
Djakisback

Arf, je n'y avais pas pensé, merci pour ta réponse, je vais tenter cela tout de suite :D

Ah oui mais en fait il y a un problème qui se pose. JOGL ne permet pas le partage du contexte OGL entre les threads. Et la gestion des événements souris se fait évidemment dans un autre thread. Avec la soluce que j'utilise actuellement, j'ai une référence dans le MouseListener vers le moteur graphique auquel est lié le contexte OGL. A chaque mouvement de la souris, je transmets les coordonnées écran au moteur graphique, qui se chargera de les convertir en coordonnées scène lors de son prochain cycle. Je ne peux pas convertir les coordonnées de tous les sprites en coordonnées écran à chaque cycle du moteur et les stocker pour les récupérer dans le MouseListener, ce sera évidemment trop lourd.

J'en reviens donc à mon édit du message précédent. Je voudrais simplement dessiner un objet dans ma scène Opengl, un carré par exemple, qui soit toujours sous le curseur de la souris (le vrai) quelques soient le zNear, le zFar ou les coordonnées de la caméra.
Merci d'avance ^^

Bon bin voilà c'est résolu, finalement avec la même méthode que nuranto je pense :

Code:

1
2
3
4
5
6
7
8
		this.glu.gluProject(this.currentCamera.getX(), this.currentCamera.getY(), 0,
				modelViewMatrix, 0, projectionMatrix, 0, viewport, 0, projectedCoords, 0 );
 
 
		this.glu.gluUnProject((double) x, (double) realY, projectedCoords[2],
				modelViewMatrix, 0, projectionMatrix, 0, viewport, 0, unprojectedCoords, 0);
 
coords.setXY((float)unprojectedCoords[0], (float) unprojectedCoords[1]);

Et celle que tu citais d'ailleurs TanEk.
Bye, merci d'avoir lu :)