Discussion :

[Cora98]

Bonjour,

J'ai effectué un certain nombre de contrôles de fichiers via des scripts batchs.

Il y a un dernier contrôle sur lequel je bute.

Pour résumer, j'ai deux fichiers "base.bdd" et "exploit"

- Exemple de contenu dans le fichier "base.bdd" :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
"REF;"MODIF";"15000001";78600001";" ";" "
"REF";"MODIF";"1980031";78600002";" ";" "
"REF";"MODIF";"4480078";78600003";" ";" "
"REF";"MODIF";"4480078";78600128";" ";" "

- Exemple de contenu dans le fichier "exploit" :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
10|249|128|DUPONT|JEAN|03101961|
20|249|128|383929829|39,01|
40|249|128|362090909|49,00|
40|249|128|362090909|49,00|
80|58|128|41|
80|58|128|41|

1) Fichier base : en colonne 4 est indiqué le matricule
=> Je dois récupérer ce matricule sur les 5 derniers chiffres en otant les zéros. Par exemple, 78600001 deviendra 1 ! 78600128 deviendra 128 etc..

2) Fichier exploit : seules les lignes qui commencent par 10 et 40 nous intéressent.
Il faut que je verifie que ces lignes 10 et 40 existent bien pour les matricules tronqués du point1.
Soit : 10|249|<matricule tronqué>
40|249|<matricule tronqué>

Cela fait plusieurs jours que je bute, les bonnes idées sont bienvenues :-/
Merci

[N_BaH]

Bonjour,

on va d'abord élaborer un algorithme.

comment ferais-tu ça "à la main" ?

[Cora98]

En fait, c'est dés le debut que je bloquais pour "modifier le matricule à 5 caractères en otant les éventuels zéro à gauche".

Je pensais à un awk dans ce genre là :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F ';|";|[|]' '/REF/ {t[substr($4, 4)+0]=1} /^10|^40/ && t[$3] {print $1 "|" $2 "|" $3}' base.bdd exploit

[N_BaH]

mais, c'est pas du bash !

[Cora98]

ben je pensais que awk etait une commande issue de la programmation unix (bash, ksh..) non ?

P.S: je ne suis pas attachée à awk mais en lisant un cours sur la programmation shell, je me suis dit que cette commande etait bien pratique

[N_BaH]

oui, c'est bien pratique, et c'est bien plus rapide que bash, mais c'est un langage distinct, à part entière.

[ctac_]

Bonjour,
Après correction des petits bugs dans les exemples...
Le départ étant avec awk

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F'";"' 'NR==FNR{a[substr($4,6)]}NR!=FNR&&!b{FS="|";b=1;$0=$0}NR!=FNR&&/10|40/{if($3 in a)print}' base.bdd exploit

Analyser et revenir s'il y a des questions.
Cordialement.

[Cora98]

Merci Ctaq pour ton aide précieuse.
Pour info, j'ai lancé la commande, seules les lignes 40 apparaissent ainsi que deux lignes 100.
Je vais essayer de chercher ou ca buggue

[BufferBob]

salut,

on va d'abord élaborer un algorithme.

comment ferais-tu ça "à la main" ?

meilleure suggestion

[ctac_]

Salut,
Je suis bien d'accord.

on va d'abord élaborer un algorithme.

quoi que, si tous le monde faisaient ça, il n'y aurait quasi plus de questions.
De plus, j'avais glissé une petite coquille intentionnelle pour permettre d'étudier l'algorithme.
Cordialement.

[Cora98]

lol Coquinou ctac!
Je suis en train de décortiquer ton awk avec un tuto trouvé sur le net.

Si cette commande a l'air vraiment puissante, je commence à comprendre ce que disait "N_Bah" : c'est vraiment un langage à part!:p

[Cora98]

bon ben je ne vois pas

A la main,

1) Sur Fichier "Base.bdd" en 4ème colonne -> Je formaterais le matricule sur 5 caractères max (en supprimant les zéros à gauche)
2) Sur le fichier "Exploit" en 3ème colonne, je cherche la correspondance mais uniquement sur les lignes commencant par 10 et 40.
3) S'il n'existe pas les lignes 10 et 40 pour un agent, les tracer en fichier log.


=> Pour le point 2, on peut tenter un egrep je suppose (^10 et ^40) mais c sur le point 1...je ne vois pas comment tronquer les 0...

[BufferBob]

je ne vois pas comment tronquer les 0...

avec un truc comme ça par exemple echo "78600128" | grep -Po "^.{5}0*\K.+" ou son équivalent coté awk gsub(/^.{5}0*/,"",$0)

[Cora98]

ce awk fonctionne :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F ';|";"|[|]' '/REF/ {t[substr($4, 4)+0]=1} /^10[|]|^40[|]/ && t[$3] {print $1 "|" $2 "|" $3}' base.bdd exploit

il me manque plus que le 3eme point (tracage du log d'erreur) mais ca devrait etre plus facile

[ctac_]

Oui, ça marche presque.
Si tu rajoute une ligne correspondant aux critères comme :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

10|249|002|DUPONT|MICHEL|03101961|

Elle ne resort pas, ça vient du tableau t qui ne contient pas les bonnes valeurs.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1 2 3 et 128 au lieu de 001 002 003 et 128

la construction t[substr($4, 4)+0]=1 n'est pas bonne et ça ne sert a rien de lui affecter la valeur 1 car elle n'est jamais utilisée.
Voilà une solution certainement perfectible.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
awk -F'";"' '
NR==FNR{c=substr($4,6);a[c];d[c"_10"];d[c"_40"];next}
!b{FS="|";b=1;$0=$0}
($3 in a)&&(($1==10)||($1==40)){d[$3"_"$1]++;print}
END{for (i in d) if (!d[i]){split(i,e,"_");print "la ligne "e[2]" est absente pour l'"'"'utilisateur "e[1]>>"fichier.log"}}
' base.bdd exploit

Cordialement.

[disedorgue]

Bonjour,

Pour ne pas faire comme tout le monde :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed 's/^\([^;]*;\)\{3\}"[0-9]*\([0-9]\{5\}\).*/\2/;s/^0*\(.*\)/\/^\\(10\\|40\\)|[^|]*|\1|\/p/' base.bdd | sed -n -f - exploit

[Cora98]

:o Trop fort ctac! Merci
C'est bizarre qu'il ressort les users ds le désordre

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
la ligne 10 est absente pour l'utilisateur 389
la ligne 40 est absente pour l'utilisateur 703
la ligne 40 est absente pour l'utilisateur 590
la ligne 40 est absente pour l'utilisateur 468
la ligne 10 est absente pour l'utilisateur 173
la ligne 40 est absente pour l'utilisateur 519
la ligne 10 est absente pour l'utilisateur 224
la ligne 40 est absente pour l'utilisateur 190
la ligne 40 est absente pour l'utilisateur 241
etc

Merci aussi à Dise

Moi qui était réticente à sed et awk, ca me donne envie de m'y mettre!

[ctac_]

Bien vu
mais même punition pour une ligne 10|249|002|DUPONT|MICHEL|03101961|

Pour ne pas faire comme tout le monde :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed 's/^\([^;]*;\)\{3\}"[0-9]*\([0-9]\{5\}\).*/\2/;s/^0*\(.*\)/\/^\\(10\\|40\\)|[^|]*|\1|\/p/' base.bdd | sed -n -f - exploit

Je propose cette mineure correction qui en plus simplifie la commande.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed 's/^\([^;]*;\)\{3\}"[0-9]*\([0-9]\{3\}\).*/\2/;s/\(.*\)/\/^\\(10\\|40\\)|[^|]*|\1|\/p/' base.bdd | sed -n -f - exploit

Cordialement.

[disedorgue]

Non, pas d'accord pour la punition, je respecte la demande faite au post #1:

1) Fichier base : en colonne 4 est indiqué le matricule
=> Je dois récupérer ce matricule sur les 5 derniers chiffres en otant les zéros. Par exemple, 78600001 deviendra 1 ! 78600128 deviendra 128 etc..

Et sauf erreur de ma part, il n'y a pas eu de contre-ordre explicite

[Cora98]

:o Trop fort ctac! Merci
C'est bizarre qu'il ressort les users ds le désordre

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
la ligne 10 est absente pour l'utilisateur 389
la ligne 40 est absente pour l'utilisateur 703
la ligne 40 est absente pour l'utilisateur 590
la ligne 40 est absente pour l'utilisateur 468
la ligne 10 est absente pour l'utilisateur 173
la ligne 40 est absente pour l'utilisateur 519
la ligne 10 est absente pour l'utilisateur 224
la ligne 40 est absente pour l'utilisateur 190
la ligne 40 est absente pour l'utilisateur 241
etc

Merci aussi à Dise

Moi qui était réticente à sed et awk, ca me donne envie de m'y mettre!

Rectif : le awk de ctaq ressort uniquement que les lignes 40 (pas les dix).
Dans le "sed" initial de Dise', les 10 et 40 sont affichées. Par contre, dans le sed rectifié par ctaq, seules les 40 sont indiquées à l'écran => Ctaq est "anti-10"