Discussion :

[top007]

Bonjour,
Je suis en train de faire un script shell, j'aimerais faire quelque chose si quelqu'un pouvait m'aider.
J'ai un fichier csv et je veux récupérer que les lignes qui respectent mon critère de filtre (ou de supprimer les lignes qui ne respectent pas mon critère de filtre).
Voici un extraire de mon fichier csv.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
AZERTYUIOPQSDF               02  20110921014732000000000111111111111111                4444444444444               AAAAAAA             AAAAAAA
       QSDFGHJ               03  20110923014553741244444444444444444444                1111111111111                                   ZZZZZZZ
AAAAAAA                      06  20110921014524000000000000000000000000                000000000                   ZZZZZZZ

Critère de filtre : date_csv doit être entre date_début et date_fin.
date_csv : commence à partir de la position 34 jusqu'à la position 42 sous forme AAAAMMJJ.
date_début : sous forme AAAAMMJJ.
date_fin : sous forme AAAAMMJJ.
J'ai développé un script :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
 
#!/bin/ksh
rep_f="echantillon_fichier"
rep_f_R="echantillon_fichier_R"
date_d=20110921
date_f=20110921
echo "1"
ls $rep_f | while read nom_f
do
echo "2"
	nb_ligne=0
	cat -v $rep_f/$nom_f | while read ligne_f
	do
	echo "3"
		date_l=`echo $ligne_f | awk -F" " '{print $3}'|cut -c1-8`
		if [ $date_d -ge $date_l ] && [ $date_l -ge $date_f ] 
		then
			echo $ligne_f>>"${rep_f_R}/${nom_f}.temp"
			 nb_ligne=`expr $nb_ligne + 1 `
		fi
 
	done
	if [ $nb_ligne != 0 ]
	then
		echo "nb: ${nb_ligne}">>"${rep_f_R}/${nom_f}.temp"
 
	fi
done

problème la commande cat transforme les lignes résultat :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
AZERTYUIOPQSDF 02 20110921014732000000000111111111111111 4444444444444 AAAAAAA AAAAAAA
AAAAAAA 06 20110921014524000000000000000000000000 000000000 ZZZZZZZ

merci d'avance

[ok.Idriss]

Bonsoir.

Plutôt que ls |*while read tu peux utiliser la wildcard qui est directement interprété par bash comme la liste des fichiers du répertoire courant :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
for file in *; do #for file in *quelque chose, for file in chemin/* etc c'est assez souple ;)
    # traitements sur $file
done

Plutôt que d'utiliser cat $fichier |*while read tu peux utiliser les rédirection de la façon suivante (ça économise un processus) :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
while read ligne; do
done < $fichier

Et ça devrait aussi régler ton problème de tabulation/espace (à tester).

Cordialement,
Idriss

[top007]

Merci infiniment pour votre réponse et les consignes, mais les espace blanche au début et à la fin ils ont été supprimé, même quand j’ajout les guillemets.

Bonsoir.

Plutôt que ls |*while read tu peux utiliser la wildcard qui est directement interprété par bash comme la liste des fichiers du répertoire courant :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
for file in *; do #for file in *quelque chose, for file in chemin/* etc c'est assez souple ;)
    # traitements sur $file
done

Plutôt que d'utiliser cat $fichier |*while read tu peux utiliser les rédirection de la façon suivante (ça économise un processus) :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
while read ligne; do
done < $fichier

Et ça devrait aussi régler ton problème de tabulation/espace (à tester).

Cordialement,
Idriss

[top007]

je viens de trouver la solution:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
#vider l'IFS pour read
while IFS='' read line...

merci à tous

[jack-ft]

Je ne pense pas que ce soit un problème d'IFS, mais plutôt lié à 'echo' et aux guillemets.

Compare, avec et sans guillemets:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
$ echo 'a   b' | { read line ; echo "${line}" ; }
a   b
 
$ echo 'a   b' | { read line ; echo ${line} ; }   
a b

C'est très souvent une sage habitude que d'entourer toutes les variables de guillemets (sauf raison valable! (genre variable entière)).

Dans ton cas, c'est "$ligne_f" aux lignes 15 et 18 de ton post initial.