recuperation data sur une query complexe

Version imprimable

Bonjour a tous,
J'ai encore un peu de mal a comprendre comment fonctionne Doctrine.

j'ai une requete quelque peu complexe:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
$q=$this->createQuery('s')
                ->select('s.id,u.id,  c.id, f.id, f1.name as formation, f1.periodicite,
                    MAX(fu.date) as datemax,
                    IF(
                       (CURRENT_DATE() <= TIMESTAMPADD(MONTH, f1.periodicite, max(fu.date)))
                       ||
                       (f1.periodicite=0 && MAX(fu.date) IS NOT NULL),
                       0,
                       1
                       ) as result')
                ->leftJoin('s.classifications u')
                ->leftJoin('u.class c')
                ->leftJoin('c.list_formation f')
                ->leftJoin('f.formation f1')
                ->leftJoin('s.formations fu ON s.id=fu.user_id AND fu.formation_id=f1.id')
                ->where('s.id=?',$user_id)
                ->groupBy('s.id, u.id,  c.id, f.id, f1.name')              
                ;
$data=$q->execute()

je voudrait récuperer dans un foreach
quelque chose du type:

Code:

1
2
3
4
5
 
foreach($data as $line)
{
  echo $line->getFormation().' '.$line->getDatemax().' '.$line->getResult().'<br>';
}

pour le moment ce code ne m'affiche que la premiere ligne.
Hors le code SQL m'affiche bien la totalité de mes enregistrements.

bon en modifiant mon code :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
 
$q=$this->createQuery('s')
                ->select('s.id,u.id,  c.id, f.id, f1.name as forma, f1.periodicite,                    
                    IF(
                       (CURRENT_DATE() <= TIMESTAMPADD(MONTH, f1.periodicite, max(fu.date)))
                       ||
                       (f1.periodicite=0 && MAX(fu.date) IS NOT NULL),
                       0,
                       1
                       ) as result,
                       MAX(fu.date) as maximum')
                ->leftJoin('s.classifications u')
                ->leftJoin('u.class c')
                ->leftJoin('c.list_formation f')
                ->leftJoin('f.formation f1')
                ->leftJoin('s.formations fu ON s.id=fu.user_id AND fu.formation_id=f1.id')
                ->having('s.id=?',$user_id)
                ->groupBy('s.id, u.id,  c.id, f.id, f1.name')
                ->execute(array(), Doctrine::HYDRATE_ARRAY)
                ;
        $data=$q;

et avec cette boucle :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
foreach($data as $classifications)
        {                        
            foreach($classifications['classifications'] as $classification )
            {                
                foreach($classification['class'] as $formations)
                {
 
                   if(is_array($formations))
                   {
                       foreach($formations as $formation)
                       {
                           var_dump($formation['formation']);
                       }
                   }                   
                }
            }
        }

j'obtient ceci

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
array
  'id' => string '16' (length=2)
  'periodicite' => string '0' (length=1)
  'forma' => string 'gestes et postures charges lourdes' (length=34)
  'result' => string '0' (length=1)
 
--------------------------------------------------------------------------------
 
--------------------------------------------------------------------------------
 
array
  'id' => string '5' (length=1)
  'periodicite' => string '12' (length=2)
  'forma' => string 'ESHEM-121' (length=9)
  'result' => string '0' (length=1)
array
  'id' => string '6' (length=1)
  'periodicite' => string '0' (length=1)
  'forma' => string 'PWT Préparation au Quizz P.L.A.T.O.' (length=36)
  'result' => string '1' (length=1)
array
  'id' => string '7' (length=1)
  'periodicite' => string '0' (length=1)
  'forma' => string 'Quizz P.L.A.T.O.' (length=16)
  'result' => string '1' (length=1)
array
  'id' => string '8' (length=1)
  'periodicite' => string '12' (length=2)
  'forma' => string 'check list home office' (length=22)
  'result' => string '1' (length=1)

comme vous pouvez le voir, si j'ai bien mon champ result impossible d'obtenir mon champ maximum.
Si quelqu'un a une idée ?

17/09/2011, 14h16
Michel Rotta

Du mal avec doctrine ? Mais non ! :mrgreen:

Fais un var_dump des données de ton premier query et tu devrais comprendre ce qui cloche.

Accessoirement, il existe plusieurs méthode d'hydratation qui, si elles retournent les mêmes données, ne les retournent pas dans la même structure. Quelques essais avec quelques print_r ou apparenté devraient te permettre de bien visualiser les choses. Et de trouver la meilleur méthode pour ton cas.
20/09/2011, 19h27
erictomcat

un var_dump du query initial me donne bien mon champ mais seulement pour le premier enregistrement
25/09/2011, 15h50
Michel Rotta

Essaye avec les différents type hydratation a mon avis tu devrais récupérer les données.
05/10/2011, 16h50
erictomcat

bon apparemment la seul manière de récupérer des données d'une query un peu complexe c'est avec un Hydrate_NONE.

vois pas trop la puissance de doctrine la :(
13/10/2011, 12h49
Michel Rotta

Ça doit dépendre de ce que tu veux récupérer et tu query.

Perso, celui-là, je n'ai jamais utilisé.
13/10/2011, 13h59
erictomcat

bein au moins j'aurais voulu récuperer les noms de champs (HYDRATE_ARRAY),
la c'est un vulgaire tableau indexés, j'aime pas trop.
18/10/2011, 09h53
Michel Rotta

Et tu obtiens quoi avec un array_hydrate ?
18/10/2011, 11h36
erictomcat

un tableau a une ligne avec tout mes champs.
Les autres lignes ne possédent que les champs existants dans le schema.
30/12/2011, 17h20
kenny.kev

Je ne sais pas si tu as résolu ton problème, mais je vais te répondre ^^.

Pour la première question pour avoir une réponse en objet avec doctrine il te faut juste faire :

Code:

$q = .... ->execute();

Ça va te retourner un tableau d'objet, si je ne me trompe pas ça te donne même un objet Doctrine_collection.
pour obtenir un tableau tu as celle que tu as récrite mais aussi avec le

Code:

$q = .... ->fetchArray()
02/01/2012, 11h23
erictomcat

le ..->execute() ne me renvoie mes champs perso que pour le premier enregistrement.
Pour le fetchArray, pas tester encore
03/01/2012, 11h17
kenny.kev
test comme cela :
http://www.doctrine-project.org/docu...having-clauses

Tu par avec le

Code:

$q = ... ->select (count(id) as number) ->execute()

ensuite tu fais comme ceci :
Code:

1 2 3 foreach ($q as $value) { echo $value->number; }
Ça devrait fonctionner.

Pour infos doctrine est basé sur les fonctions magique de PHP5 donc il ce peux que tu ne vois pas la méthode en faisant un var_dump.

recupercation champ custom

j'ai une requet DQL qui me donne un SQL correcte:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
$q=$this->createQuery('a')
                ->select('a.*,sf.*,se.*,ga.id,a1.*,hi1.*')
                ->addSelect('hi2.total as prevtotal')
                ->leftJoin('a.users sf')
                ->leftJoin('sf.Costcenter se')
                ->leftJoin('sf.groupassets ga')
                ->leftJoin('ga.listGroupAsset a1 ON a1.groupasset_id=ga.id AND a1.type="email"')
                ->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')
                ->leftJoin('a1.historic hi2 ON hi2.asset_id=a1.id AND hi2.datestate="'.$predate.'"')
                ->where('a.id=?',$site->getId())
                ->andWhere('sf.is_active=true')                
                ->orderBy('se.business, se.name, sf.last_name, sf.first_name')

le souci est comment recuperer mon champ prevTotal ?

24/01/2012, 20h26
kenny.kev

ton prevTotal est ton total, alors tu fais un getTotal() et tu l'as.

bein non, getTotal me donne le total de

Code:

->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')

comment recuperer le total de

Code:

->leftJoin('a1.historic hi2 ON hi2.asset_id=a1.id AND hi2.datestate="'.$predate.'"')

je rempli un tableau donc j'ai un ensemble de boucle imbriqués:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
 
foreach($data as $site)
{
   foreach($site->getUsers() as $user)
   {
       tbl[$user->getCostcenter][$user->getId()]['user']=$user;
       foreach($user->getGroupasset() as $groupeAsset)
       {
           foreach($groupasset as $asset)
           {
               foreach($asset->gethistoric() as $historic)
               {
                    tbl[$user->getCostcenter][$user->getId()] ['total']=$historic->getTotal() // celui de hi1
                    tbl[$user->getCostcenter]['total']+=$historic->getTotal() ;
 
                }
            }
        }
    }
}

comment avoir tbl[$user->getCostcenter][$user->getId()] ['prevtotal'] ?

bon pour le moment j'ai réduit ma requete

Code:

1
2
3
4
5
6
7
8
9
$q=$this->createQuery('a')               
                ->leftJoin('a.users sf')
                ->leftJoin('sf.Costcenter se')
                ->leftJoin('sf.groupassets ga')
                ->leftJoin('ga.listGroupAsset a1 ON a1.groupasset_id=ga.id AND a1.type="email"')
                ->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')                
                ->where('a.id=?',$site->getId())
                ->andWhere('sf.is_active=true')                
                ->orderBy('se.business, se.name, sf.last_name, sf.first_name')

et j'ai modifié ma boucle:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
 
 
foreach($data as $site)
{
   foreach($site->getUsers() as $user)
   {
       tbl[$user->getCostcenter][$user->getId()]['user']=$user;
       foreach($user->getGroupasset() as $groupeAsset)
       {
           foreach($groupasset as $asset)
           {
               foreach($asset->gethistoric() as $historic)
               {
                    tbl[$user->getCostcenter][$user->getId()] ['total']=$historic->getTotal() // celui de hi1
                    tbl[$user->getCostcenter]['total']+=$historic->getTotal() ;
                    $prevTotal=Doctrine_core::getTable('email_diskspace')->findOneByAssetIdAndDatestate($asset->getId(), $prevDate);
                    tbl[$user->getCostcenter][$user->getId()] ['prevtotal']=$prevTotal;
 
                }
            }
        }
    }
}

Mais bon je trouve pas ça trés optimisé :?

26/01/2012, 10h33
kenny.kev

Contrairement à ce que tu penses une requête avec 10 jointures n'est pas plus optimisé que 2 requêtes séparé pour obtenir le meme résultat.

Tu peux meme faire des tests je suis presque sur que tes 2 requêtes sont plus performante que ta première requête.

Fais aussi un explain dessus et tu verras.
26/01/2012, 13h41
erictomcat

le souci c'est que ma requête initiale je l’exécute une fois.

La seconde je l’exécute 400 fois (1*par user) :aie:
26/01/2012, 14h13
kenny.kev

Rien ne t'empêche de regrouper ces appels pour retourner tous les résultat en une fois.

Aussi tu as un problème quelque part, en re-regardant ce que tu avais posté 24/01/2012 17h59 et ce que tu as posté Aujourd'hui 09h27 tu as même pas la même requête.

Analyse bien ta requête car la c'est pas la même chose.
26/01/2012, 14h47
erictomcat

si si, j'ai juste supprimé la référence à la table supplémentaire et le addSelect qui y était lié.

si tu vois dans ça :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
$q=$this->createQuery('a')
                ->select('a.*,sf.*,se.*,ga.id,a1.*,hi1.*')
                ->addSelect('hi2.total as prevtotal')
                ->leftJoin('a.users sf')
                ->leftJoin('sf.Costcenter se')
                ->leftJoin('sf.groupassets ga')
                ->leftJoin('ga.listGroupAsset a1 ON a1.groupasset_id=ga.id AND a1.type="email"')
                ->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')
                ->leftJoin('a1.historic hi2 ON hi2.asset_id=a1.id AND hi2.datestate="'.$predate.'"')
                ->where('a.id=?',$site->getId())
                ->andWhere('sf.is_active=true')                
                ->orderBy('se.business, se.name, sf.last_name, sf.first_name')

ce que tu as écrit ici :

Code:

Doctrine_core::getTable('email_diskspace')->findOneByAssetIdAndDatestate($asset->getId(), $prevDate);

Je veux bien que tu me le montre.
En plus la tu as exactement les meme jointure :

Code:

1
2
->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')
->leftJoin('a1.historic hi2 ON hi2.asset_id=a1.id AND hi2.datestate="'.$predate.'"')

Pour une écriture plus lisible tu devrais mettre les and dans le where.

la relation a1.historic hi2 correspond a la relation entre la table asset et la table email_diskspace:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
 
asset:
  tableName: asset
  actAs: [Timestampable]
  columns:
    type: string(50)
    value: string(255)
    groupasset_id: integer
    etat: string(50)
    action: string(50)
    chargebycsc: boolean
    in_use: boolean
    lastview: date
  indexes:
    unique1:
      fields: [type,value,groupasset_id]
      type: unique
    valueindex:
      fields: [value]
    lastview:
      fields:
        lastview:
          sorting: DESC
  relations:
    group:
      class: groupasset
      local: groupasset_id
      foreign: id
      foreignAlias: listGroupAsset
      onDelete: SET NULL
 
email_diskspace:
  columns:
    datestate: date
    asset_id: integer
    specialaccount: string(50)
    total: integer
    billable_euro: float(5,2)
    billable_act: float(5,2)
    snapshot_annual_act: float(7,2)
    billable_adj: float(5,2)
    snapshot_annual_adj: float(7,2)
  indexes:
    unique:
      fields: [datestate, asset_id]
      type: unique
  relations:
    asset:
      class: asset
      local: asset_id
      foreign: id
      foreignAlias: historic

et pour:

Code:

1
2
3
 
->innerJoin('a1.historic hi1 ON hi1.asset_id=a1.id AND hi1.datestate="'.$datelimit.'"')
->leftJoin('a1.historic hi2 ON hi2.asset_id=a1.id AND hi2.datestate="'.$predate.'"')

ce n'est pas la même jointure puisque $datelimit (=mois en cours) et $predate(mois précédent) ne sont pas les même :)
Et si je met le critere dans le leftjoin et non dans le where c'est que j'ai besoin d'avoir la ligne même si pas de données dans cette table.

bon je me permet de relancer cette discussion vu que ce n'est toujours pas résolue et que je traine ce problème sur pas mal de requête.
J'ai une nouvelle requete pas franchement compliqué:
Code:

1 2 3 4 5 6 7 8 $q=Doctrine_Core::getTable('sfGuardUser')->createQuery('sf') ->select('cc.business as activite, a.special as special, count(a.id) as count') ->leftJoin('sf.Costcenter cc') ->leftJoin('sf.groupassets g') ->leftJoin('g.listGroupAsset a ON a.groupasset_id=g.id AND a.type="RAS MP" AND a.in_use=true') ->where('sf.is_active=true AND sf.site_id=12') ->groupBy('cc.business, a.special') ;
qui me donne cet SQL:

Code:

SELECT c.business AS c__0, a.special AS a__1, COUNT(a.id) AS a__2 FROM sf_guard_user s LEFT JOIN costcenter c ON s.costcenter_id = c.id LEFT JOIN groupasset g ON s.id = g.user_id LEFT JOIN asset a ON ((a.groupasset_id = g.id AND a.type = "RAS MP" AND a.in_use = 1)) WHERE (s.is_active = 1 AND s.site_id = 12) GROUP BY c.business, a.special

la pas de souci tout fonctionne.
ce que je désire est pas compliqué, puisque que au minimum je veut un truc du style:
Code:

1 2 3 4 5 foreach ($data as $line) { echo $line['business'].' '.$line['special'].' '.$line['count'].'<br>'; }
quelqu'un a t il une idée de l'hydratation que je doit faire pour l'obtenir

J'avoue que ta question me laisse perplexe car chez moi, avec Doctrine 1.2 + sf 1.4, une requête similaire ne fonctionnera pas : la requête est créé sur la table sfGuardUser mais aucun champ de cette table ne figure dans le select et ça contrarie Doctrine qui lance une exception. Comment fais-tu pour que ta requête soit acceptée ???? 8O

J'ai aussi peut-être raté une étape dans ta problématique mais... si tu rédiges tes requêtes à la main sans passer par les câblages de Doctrine, pourquoi ne pas le faire jusqu'au bout en attaquant directement la couche PDO qui est sous Doctrine ? Par exemple (requête bidon, je te laisse adapter à ton cas) :
Code:

1 2 3 4 5 6 7 $statement = Doctrine_Manager::getInstance()->connection(); $results = $statement->execute("SELECT sf.*, cc.* FROM sf_guard_user sf LEFT JOIN sf_guard_user_profile cc ON cc.user_id = sf.id"); $coll = $results->fetchAll(Doctrine_Core::FETCH_ASSOC); foreach($coll as $row) { $profile = $row['phone_number']; }

01/03/2012, 18h14
Michel Rotta

Il est possible que la différence de réponse entre vous deux soit liée à une différence dans la structure du schéma de la base...
02/03/2012, 13h48
erictomcat

effectivement concernant ma requete j'aurai pu ne pas partir de sfGuardUser mais plutot de ma table asset, ce qui m'aurait permis de ne pas surcharger ma relation

Code:

->leftJoin('g.listGroupAsset a ON a.groupasset_id=g.id AND a.type="RAS MP" AND a.in_use=true')

et faire un leftJoin inversé.
Mais le souci de l'hydratation reste entier