Discussion :

[cpalperou]

Bonjour,
voici mon problème.
J'ai grossomodo 1 millions de fichiers disséminés une arborescence de dossier du type ./yyyy/mm/dd (année mois jour).
La 3ème ligne du header de chacun de ces fichiers doit se terminer par la lettre K. Or, il est possible que pour certains d'entre eux (peu pour moi serait le mieux) la 3ème ligne ne se termine pas par cette lettre.
Je voudrais donc écrire un script permettant de scanner l'intégralité des fichiers, de repérer ceux n'ayant pas la bonne 3ème ligne et de les copier dans un répertoire temporaire.
Pouvez vous SVP m'aiguiller?
Merci beaucoup

[N_BaH]

Bonjour,

tu rediriges la sortie de find vers le read d'une boucle while, dans laquelle tu extrais le dernier caractère de la troisième ligne du fichier en cours avec sed pour tester s'il vaut "K".

[frp31]

Bonjour,
Je voudrais donc écrire un script permettant de scanner l'intégralité des fichiers, de repérer ceux n'ayant pas la bonne 3ème ligne et de les copier dans un répertoire temporaire.
Pouvez vous SVP m'aiguiller?
Merci beaucoup

si c'est temporaire il est inutile de copier les fichiers tu fais une liste des fichiers dans /tmp/

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec grep -l ".*..K$" {} \; > /tmp/toto

ça donne une liste sous la forme :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
./l
./k

exemple

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
 
sh-4.2$ touch {a,b,c,d,e,f,g,h,i,j}
sh-4.2$ ls
a  b  c  d  e  f  g  h  i  j
sh-4.2$ echo "cvK" >k
sh-4.2$ echo "cvK" >l
sh-4.2$ find . -type f -exec grep -l ".*..K$" {} \; 
./l
./k
sh-4.2$ rm [a-l]

après il te reste plus qu'à relire ton fichier temporaire pour lancer un éventuel traitement

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
while read
do 
#traitement de $REPLY
done < /tmp/tonfichier_de_liste

donc en une seule passe ça devient :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
while read
do 
#traitement de $REPLY
done < $( find /chemin/de/depart -type f -exec grep -l ".*..K$" {} \; 2> /dev/null )

[jack-ft]

si c'est temporaire il est inutile de copier les fichiers tu fais une liste des fichiers dans /tmp/

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec grep -l ".*..K$" {} \; > /tmp/toto

ça marche, ça, pour tester si la 3ème ligne finit par K?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec sh -c "head -3 {} | tail -1 | egrep -q -v 'K$' && echo {}" \; > /tmp/liste_fichiers.txt

y a probablement plus rapide...

Sinon, on peut aussi copier directement:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec sh -c "head -3 {} | tail -1 | egrep -q -v 'K$' && cp {} /le/repertoire" \;

BUG: ça rend un faux-positif pour un fichier de moins de 3 lignes (donc 1 ou 2) dont la dernière ne se termine pas par K.

[zipe31]

Sinon, on peut aussi copier directement:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec sh -c "head -3 {} | tail -1 | egrep -q -v 'K$' && cp {} /le/repertoire" \;

BUG: ça rend un faux-positif pour un fichier de moins de 3 lignes (donc 1 ou 2) dont la dernière ne se termine pas par K.

Changer head -3 {} | tail -1 | par sed -n '3p' {} |

[jack-ft]

Changer head -3 {} | tail -1 | par sed -n '3p' {} |

Ah ben ouais!
Va vraiment falloir que je mette à sed...

[zipe31]

Ah ben ouais!
Va vraiment falloir que je mette à sed...

Et à awk

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

find /chemin/de/base -type f -exec  awk 'NR==3 && $NF =! /K$/ { print FILENAME }' {} \;

PS. Je laisse le soin aux fortiches en awk de rajouter la commande qui va bien pour copier directement les fichiers dans /tmp... merci