Cut et retour à la ligne [Résolu]

[Slein]

Bonjour,

J'ai un petit souci, j'ai fait un petit script qui retire les N dernieres colonnes d'un fichier csv. Ce fichier ce compose d'un header et d'un footer qui comporte moins de colonnes que les données du fichier.

Le hic c'est que quand je fais un

Code :

cat $FIC | cut -d";" -f1-$NB

sur mes données réeles bah ca me vire le footer.

J'examine mes données réeles et remarque qu'il n'y a pas de retour à la ligne à la fin du fichier, j'en rajoute une et comme par enchantement ca marche.

Maiiiis pourtant quand je crée un fichier de test sous vi, tout bete sans retour à la ligne ca marche ...

Est ce que quelqu'un sait pourquoi ? et comment contourner ce probleme ?

[MarcG]

deja pourquoi utiliser cat et | pour un cut ???? reflexe conditionner au | ? nous ne sommes pas au stade de foot de Berlin

sinon avec les commande head et tail tu devrait pouvoir virer la 1ere et la derniere ligne avant le cut ....
(et la ok un bon pipe )

[Slein]

Envoyé par MarcG

deja pourquoi utiliser cat et | pour un cut ???? reflexe conditionner au | ? nous ne sommes pas au stade de foot de Berlin

bah le truc que je ne comprends pas en fait c'est que j'ai un fichier comme ca :

Code :

1
2
3
4
5
6
h;toto;titi
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
d;arbre;maison;chat;lapin
f;footer;fifi

le fichier ne se termine pas par un saut de ligne.

je fais un cut ou je recupere les 3 premieres colonnes (donc en fait virer le footer et header pour les remettres aprés ca ne m'interesse pas vu qu'ils n'ont que 3 colonnes) et là ... il me sors :

Code :

1
2
3
4
5
h;toto;titi
d;arbre;maison;chat
d;arbre;maison;chat
d;arbre;maison;chat
d;arbre;maison;chat

je ne sais pas pourquoi il me vire le footer... ce fichier de données est généré il me semble par un script perl. Quand je crée à la mano un fichier semblable, le cut me sors bien le footer.

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ? Y a t'il un moyen pour que le cut prenne en compte cette derniere ligne ?

[vosaray]

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ?

vim monfichier
:se list

Ca va t'afficher tous les caracteres speciaux, y compris les rc.

Sinon, pour traiter des fichiers csv je pense que tu vas moins galerer en utlisant perl .

[2Eurocents]

Envoyé par Slein

Y a t'il un moyen de visualiser les caracteres speciaux present dans les fichiers ?

Code :

od -cx mon_fichier

En l'occurence, les dernières lignes du "dump" devraient nous renseigner, puisque ton problème porte sur la fin du fichier.

[Slein]

merci

quand je fais un

Code :

1
2
vim monfichier
:se list

les deux fichiers ont des $ à chaque fin de ligne

Code :

od -c monfichier

me montre la difference entre les 2 fichiers, la derniere ligne de celui qui ne marche pas ne contient pas de "\n"

mais en faisant un

Code :

grep "$" monfichier | cut -d";" -f1

ca marche

[herzleid]

As-tu essayé la solution de MarcG ('lutilisation de tail et de head) ?

[laurentschneider]

Code :

(cat $FIC;echo) | cut -d";" -f1-$NB

[laurentschneider]

note que sur AIX, le cut fonctionne bien

le "sed" par contre ne fonctionne qu'à partir de la 5.2. C'est un des rares "bugs" de sed qui ait été fixé ce siècle
--> AIX5.1

Code :

1
2
3
4
5
6
 
$ echo 'hello\nworld\c' | cut -f1         
hello
world
$ echo 'hello\nworld\c' | sed 's/o/@/'
hell@

--> AIX5.2

Code :

1
2
3
$ echo 'hello\nworld\c' | sed 's/o/@/'
hell@
w@rld

[Slein]

Envoyé par herzleid

As-tu essayé la solution de MarcG ('lutilisation de tail et de head) ?

Nop, en fait dans mon fichier final je veux garder le header et le footer ... donc ca vaut pas le coup à mon avis de les enlever pour les remettre juste aprés.

merci pour votre aide

[herzleid]

moi j'aurai mis le header dans une variable et le footer dans une autre.

Tu as ainsi un code modulable, et la récupération de ces infos, comme tu veux. Pratique éventuellement pour les futurs besoins. Mais là tu es seul juge.
Sinon tu peux toujours récupérer le nombre de lignes total (commande wc) puis faire une boucle de 2 à nb de linge -1. Tu applique ton cut à ta boucle boucle .
genre:

Code :

1
2
3
4
5
6
7
8
 
nb=`wc -l fichier| cut -c-1`
nb=$nb-1
compteur=2
for i in for i in `seq $compteur $nb`
do
ton_cut
done

Attention c'est en gros, à adapter en plus propre et par rapport à ton shell.

[Slein]

Petite question subsidiaire

Est ce normal ?

Code :

1
2
3
#>echo "toto\ntiti\c" | tail -1
toto
titi#>

en gros ca me fait ca avec toutes les commandes pour une ligne de la forme suivante :

"toto\ntiti\c"

pour un
"toto\ntiti\n" ca marche niquel

[laurentschneider]

quel est ton os?

[Slein]

HP-UX
version B11-10 U je crois

[herzleid]

Etrange je viens d'essayer sur un HP_UX B.11.11 U 9000 et j'obtiens :

toto
titi

[laurentschneider]

je tente une astuce :

Code :

1
2
3
4
5
6
7
8
 
$ CMD="tail -1"
$ echo "toto\ntiti" > fichier                                                       
$ [ -z "$(tail -1c fichier)" ]&&cat fichier|$CMD||(cat fichier;echo)|$CMD
titi
$ echo "toto\ntiti\c" > fichier                                                     
$ [ -z "$(tail -1c fichier)" ]&&cat fichier|$CMD||(cat fichier;echo)|$CMD
titi

[Slein]

en fait on est en version
B.11.11 U 9000/800

[ripat]

Pourquoi ne pas demander simplement l'affichage des x premières colonnes plutôt que de supprimer les y dernières?

Code :

awk -v FS=";" '{print $1,$2,$3}' fichier.a.traiter

[Slein]

Envoyé par ripat

Pourquoi ne pas demander simplement l'affichage des x premières colonnes plutôt que de supprimer les y dernières?

Bah c'est ce que je fais mais avec un cut

Merci pour vos solutions