Discussion :

[Slein]

Bonjour,

J'ai un petit souci, j'ai fait un petit script qui retire les N dernieres colonnes d'un fichier csv. Ce fichier ce compose d'un header et d'un footer qui comporte moins de colonnes que les données du fichier.

Le hic c'est que quand je fais un

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cat $FIC | cut -d";" -f1-$NB

sur mes données réeles bah ca me vire le footer.

J'examine mes données réeles et remarque qu'il n'y a pas de retour à la ligne à la fin du fichier, j'en rajoute une et comme par enchantement ca marche.

Maiiiis pourtant quand je crée un fichier de test sous vi, tout bete sans retour à la ligne ca marche ...

Est ce que quelqu'un sait pourquoi ? et comment contourner ce probleme ?

[MarcG]

deja pourquoi utiliser cat et | pour un cut ???? reflexe conditionner au | ? nous ne sommes pas au stade de foot de Berlin

sinon avec les commande head et tail tu devrait pouvoir virer la 1ere et la derniere ligne avant le cut ....
(et la ok un bon pipe )

[Slein]

deja pourquoi utiliser cat et | pour un cut ???? reflexe conditionner au | ? nous ne sommes pas au stade de foot de Berlin

bah le truc que je ne comprends pas en fait c'est que j'ai un fichier comme ca :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
h;toto;titi
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
f;footer;fifi

le fichier ne se termine pas par un saut de ligne.

je fais un cut ou je recupere les 3 premieres colonnes (donc en fait virer le footer et header pour les remettres aprés ca ne m'interesse pas vu qu'ils n'ont que 3 colonnes) et là ... il me sors :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
h;toto;titi
d;arbre;maison;chat
d;arbre;maison;chat
d;arbre;maison;chat
d;arbre;maison;chat

je ne sais pas pourquoi il me vire le footer... ce fichier de données est généré il me semble par un script perl. Quand je crée à la mano un fichier semblable, le cut me sors bien le footer.

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ? Y a t'il un moyen pour que le cut prenne en compte cette derniere ligne ?

[vosaray]

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ?

vim monfichier
:se list

Ca va t'afficher tous les caracteres speciaux, y compris les rc.

Sinon, pour traiter des fichiers csv je pense que tu vas moins galerer en utlisant perl .

[2Eurocents]

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

od -cx mon_fichier

En l'occurence, les dernières lignes du "dump" devraient nous renseigner, puisque ton problème porte sur la fin du fichier.

[Slein]

merci

quand je fais un

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
vim monfichier
:se list

les deux fichiers ont des $ à chaque fin de ligne

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

od -c monfichier

me montre la difference entre les 2 fichiers, la derniere ligne de celui qui ne marche pas ne contient pas de "\n"

mais en faisant un

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep "$" monfichier | cut -d";" -f1

ca marche

[herzleid]

As-tu essayé la solution de MarcG ('lutilisation de tail et de head) ?

[laurentschneider]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

(cat $FIC;echo) | cut -d";" -f1-$NB

[laurentschneider]

note que sur AIX, le cut fonctionne bien

le "sed" par contre ne fonctionne qu'à partir de la 5.2. C'est un des rares "bugs" de sed qui ait été fixé ce siècle
--> AIX5.1

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 
$ echo 'hello\nworld\c' | cut -f1         
hello
world
$ echo 'hello\nworld\c' | sed 's/o/@/'
hell@

--> AIX5.2

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
$ echo 'hello\nworld\c' | sed 's/o/@/'
hell@
w@rld

[Slein]

As-tu essayé la solution de MarcG ('lutilisation de tail et de head) ?

Nop, en fait dans mon fichier final je veux garder le header et le footer ... donc ca vaut pas le coup à mon avis de les enlever pour les remettre juste aprés.

merci pour votre aide

[herzleid]

moi j'aurai mis le header dans une variable et le footer dans une autre.

Tu as ainsi un code modulable, et la récupération de ces infos, comme tu veux. Pratique éventuellement pour les futurs besoins. Mais là tu es seul juge.
Sinon tu peux toujours récupérer le nombre de lignes total (commande wc) puis faire une boucle de 2 à nb de linge -1. Tu applique ton cut à ta boucle boucle .
genre:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
nb=`wc -l fichier| cut -c-1`
nb=$nb-1
compteur=2
for i in for i in `seq $compteur $nb`
do
ton_cut
done

Attention c'est en gros, à adapter en plus propre et par rapport à ton shell.

[Slein]

Petite question subsidiaire

Est ce normal ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
#>echo "toto\ntiti\c" | tail -1
toto
titi#>

en gros ca me fait ca avec toutes les commandes pour une ligne de la forme suivante :

"toto\ntiti\c"

pour un
"toto\ntiti\n" ca marche niquel

[laurentschneider]

quel est ton os?

[Slein]

HP-UX
version B11-10 U je crois

[herzleid]

Etrange je viens d'essayer sur un HP_UX B.11.11 U 9000 et j'obtiens :

toto
titi

[laurentschneider]

je tente une astuce :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
$ CMD="tail -1"
$ echo "toto\ntiti" > fichier                                                       
$ [ -z "$(tail -1c fichier)" ]&&cat fichier|$CMD||(cat fichier;echo)|$CMD
titi
$ echo "toto\ntiti\c" > fichier                                                     
$ [ -z "$(tail -1c fichier)" ]&&cat fichier|$CMD||(cat fichier;echo)|$CMD
titi

[Slein]

en fait on est en version
B.11.11 U 9000/800

[ripat]

Pourquoi ne pas demander simplement l'affichage des x premières colonnes plutôt que de supprimer les y dernières?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -v FS=";" '{print $1,$2,$3}' fichier.a.traiter

[Slein]

Pourquoi ne pas demander simplement l'affichage des x premières colonnes plutôt que de supprimer les y dernières?

Bah c'est ce que je fais mais avec un cut

Merci pour vos solutions