Discussion :

[MamsT]

Bonjour,
Je sollicite votre aide. Je galère depuis un moment pour optimiser le programme ci dessous. Pourriez vous m'apporter votre aide svp?
En fait j'ai plusieurs union all (plus de 50 tables) à faire et j'aimerai faire en une fois voir peu (avec une boucle ou autres etc...). Je pense que tout repose sur Base1, Base2 etc... mais comme je suis très débutant j'en sais pas trop. Merci beaucoup

Liste Base
Base1
Base2
Base3
Base4
Etc---

programme:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
proc sql;
create Table Complete as (
select    A.DATABASE,
       A.name as Nom_TBL,
                A.attname as COLONNE    
from      Base1.._v_relation A
where  A.type = 'TABLE'
union all
select    A.DATABASE,
       A.name as Nom_TBL,
                A.attname as COLONNE    
from      Base2.._v_relation A
where  A.type = 'TABLE'
union all
select    A.DATABASE,
       A.name as Nom_TBL,
                A.attname as COLONNE    
from      Base3.._v_relation A
where  A.type = 'TABLE'
union all
select    A.DATABASE,
       A.name as Nom_TBL,
                A.attname as COLONNE    
from      Base4.._v_relation A
where  A.type = 'TABLE'
union all
select    A.DATABASE,
       A.name as Nom_TBL,
                A.attname as COLONNE    
from      Base4.._v_relation A
where  A.type = 'TABLE'
union all
...
...
);
quit;

je reste dispo. Merci vraiment.

Cordialement,
MamsT

[JQuem]

Bonjour,

Avez-vous des doublons entre vos tables?


(J'imagine que non ou du moins que vous souhaitez les conserver vu l'usage d'un UNION ALL).


Une solution simple à votre cas :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
 
/* on met la liste des tables en macro-variable */
%let liste_table = 
base1
base2
base...;
 
 
data complete;
set &liste_table.;
run;

[MamsT]

Bonjour,

Avez-vous des doublons entre vos tables?

Bonjour,
Oui dans la liste des bases, il peut y avoir des doublons (genre base1, base1,..) mais je veux la récupèrer une seule fois. mais concernant les select, je fais pas de distinct.
je sais pas si je suis assez clair?

CDT,
MamsT

[MamsT]

Bonjour,

Avez-vous des doublons entre vos tables?


(J'imagine que non ou du moins que vous souhaitez les conserver vu l'usage d'un UNION ALL).


Une solution simple à votre cas :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
 
/* on met la liste des tables en macro-variable */
%let liste_table = 
base1
base2
base...;
 
 
data complete;
set &liste_table.;
run;

En fait la liste des bases se trouvent dans un tableau, je dois faire appel à cette liste pour utiliser à chaque fois une ligne (sans doublons côté base) dans mon premier select et ensuite 2ème select dans mon deuxième select avec un union all etc.... Je dois également optimiser le union all pour éviter d'écrire plus de 50 fois. Du coup ce set ne marchera.
Parcequ'en fait les bases sont reliées a une table system où je récupère la structure de mes bases, il faut bien analyser le select pour comprendre en fait. Merci pour ton aide.

[JQuem]

En fait la liste des bases se trouvent dans un tableau, je dois faire appel à cette liste pour utiliser à chaque fois une ligne (sans doublons côté base) dans mon premier select et ensuite 2ème select

jusque là je vous suis

dans mon deuxième select avec un union all etc.... Du coup ce set ne marchera.
Parcequ'en fait les bases sont reliées a une table system où je récupère la structure de mes bases, il faut bien analyser le select pour comprendre en fait.

Là mystère, je n'ai rien compris. Pouvez expliquer plus clairement ?

[MamsT]

jusque là je vous suis



Là mystère, je n'ai rien compris. Pouvez expliquer plus clairement ?

En fait, chaque select correspond à une ligne référencée dans la liste base, et je les relie grace à un union all. De ce fait j'aimerai faire en un bloc ces differents select afin d'optimiser mon programme.
Si vous voulez les bases sont des BDD (où j'ai plusieurs tables, chaque table contient plusieurs colonnes), donc pour récupérer la structure de la BDD (liste base), je fais appel à la table système où j'ai le nom de la BDD, nom des tables, nom des colonnes (je prends que les 3 dans mon select). pour info, la table system ici est _V_relation.

[JQuem]

Ok.

Donc si je vous suis bien, on pourrait extraire la liste des tables depuis votre base systeme.

Puis se servir de cette liste pour agréger l'ensemble des tables de cette liste (étant entendu que ces tables sont dans des bases (ou plutôt librairies) différentes).

[MamsT]

Ok.

Donc si je vous suis bien, on pourrait extraire la liste des tables depuis votre base systeme.

Puis se servir de cette liste pour agréger l'ensemble des tables de cette liste (étant entendu que ces tables sont dans des bases (ou plutôt librairies) différentes).

Oui voilà c'est bien cela.

[JQuem]

Ok.

Imaginons que votre base systeme se nomme INFO_SYSTEME.
Que cette base contienne les colonnes LIBRARY et TABLE. La colonne LIBRARY désigne la librairie dans la laquelle se trouve la table et TABLE le nom de la table.

On veut obtenir une liste de ce genre :

LIBRARY1.TABLE1 LIBRARY2.TABLE2 etc...

Car si l'on met cette liste dans l'instruction SET d'un datastep, SAS va tout simplement agréger l'ensemble des tables de cette liste.

Pour cela :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
data _null_;
set INFO_SYSTEM;
call symputx('liste_table',symget('liste_table')||' '||LIBRARY||'.'||TABLE);
run;

Dans ce code, on a créer une macro-variable nommée 'liste_table' qui contient la liste des tables que l'on veut agréger.


Il n'y a plus qu'à appeler cette liste dans une instruction SET :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
data complete;
   set &liste_table.;
run;

[MamsT]

Ok.

Imaginons que votre base systeme se nomme INFO_SYSTEME.
Que cette base contienne les colonnes LIBRARY et TABLE. La colonne LIBRARY désigne la librairie dans la laquelle se trouve la table et TABLE le nom de la table.

On veut obtenir une liste de ce genre :

LIBRARY1.TABLE1 LIBRARY2.TABLE2 etc...

Car si l'on met cette liste dans l'instruction SET d'un datastep, SAS va tout simplement agréger l'ensemble des tables de cette liste.

Pour cela :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
data _null_;
set INFO_SYSTEM;
call symputx('liste_table',symget('liste_table')||' '||LIBRARY||'.'||TABLE);
run;

Dans ce code, on a créer une macro-variable nommée 'liste_table' qui contient la liste des tables que l'on veut agréger.


Il n'y a plus qu'à appeler cette liste dans une instruction SET :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
data complete;
   set &liste_table.;
run;

Ok je vais essayer la solution et je vous tiens au courant.
Merci beaucoup

[JQuem]

Bon courage !