Discussion :

[Suntory]

Bonjour,

Voici le format de mon fichier :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
"1.1,2,3,4,5,64,3,9",,,,,1,aine
"2,3,4,5.4",,,,,3,bb
"3,4.3,5,6,6,2",,,,,2,ff

et j'aimerais pour chaque lignes transpose en colonne deux par deux les valeurs stocker entre "" dans un fichier dont le nom du fichier correspond par exemple pour la 1er ligne 1aine.

par exemple :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
$ls
1aine 3bb 2ff
$cat 1aine
1.1 2
3 4
5 64
3 9

Voici mon premier code :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
#!/bin/bash
while IFS= read -r line; do
    echo  $line | cut -d'"' -f2 > temp
    cat temp
    name=$(cut -d'"' -s -f3 (echo $line) | sed 's/,/ /g' | sed 's/ //g')
    echo $name
    awk -F, '{for(i=1;i<=NF;i++)printf "%s%s",$i,(i%2&&i!=NF?OFS:ORS)}' temp > $name
done < "$1"

Mais j'obtiens ceci en erreur :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
1.1,2,3,4,5,64,3,9
./code: command substitution: ligne 6: erreur de syntaxe près du symbole inattendu « ( »
./code: command substitution: ligne 6: `cut -d'"' -s -f3 (echo $line) | sed 's/,/ /g' | sed 's/ //g')'

Je ne suis pas un champion en shell, c'est toujours pour moi un peu obscure.
Je vous en remercie
Votre plus grand admirateur

[N_BaH]

Bonjour,

tu n'as aucun contrôle sur la génération du fichier pour améliorer son format ! ?

les champs intermédiaires ne sont pas toujours vides ?!

je ne traiterais pas ça en shell. j'utiliserais directement awk...

[CosmoKnacki]

Oui, à défaut d'avoir quelque chose d'approprié pour lire un fichier csv (sans devoir utiliser un module Python ou Perl, ou encore un couteau suisse de derrière les fagots comme Miller qu'on installe puis qu'on oublie aussitôt):

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F\" '{while (index($2,",")) { sub(",", " ", $2); sub(",", "\n", $2) }; gsub(",", "", $3); printf("%s",$2)>$3}' file

C'est quand même dingue, qu'il n'y ait pas un petit utilitaire csv de trois lettres sans deux tonnes de python cachées derrière pour faire ça (histoire de pas avoir à se tartiner la gestions des séparateurs protégés).

Sinon je pense, sans être expert en bash, qu'il ne s'attend pas à un sous-shell à cet endroit là, par contre, si tu fais un redirection, ça devrait marcher:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cut -d'"' -s -f3 <(echo $line)

ou plutôt:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cut -d'"' -s -f3 <<<"$line"

[N_BaH]

j'envisageais des split() sur les deux champs (séparés par un ")

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F '"' '{nbCont=split($2,contenu,",") ; for(i=1;i<=nbCont;i++){ printf("%s ", contenu[i]); if(i%2)print ""}}' fichier.csv

il faut améliorer la sortie : il y a un espace en trop en fin de ligne.

la constitution du nom du fichier cible est trivial.

[disedorgue]

Ou juste en (gnu) sed:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed -Ez 's/"([^"]*)"[^\n]*\n/\1,/g;s/([^,]*,[^,]*),/\1\n/g;s/,/ /g' fichier

[Suntory]

Mon code update ;

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
#!/bin/bash
while IFS= read -r line; do
    echo  $line | cut -d'"' -f2 > temp
    cat temp
    name=$(cut -d'"' -s -f3 <<<"$line" | sed 's/,/ /g' | sed 's/ //g')
    echo $name
    touch $name
    awk -F, '{for(i=1;i<=NF;i++)printf "%s%s",$i,(i%2&&i!=NF?OFS:ORS)}' temp > $name
done < "$1"

Resultat :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
1.1,2,3,4,5,64,3,9
1aine
2,3,4,5.4
3bb
3,4.3,5,6,6,2
2ff

J'ai bien mes fichiers de sortie avec les bons noms de fichiers et les bonnes valeurs.
Merci !

Sinon concernant plusieurs de vos commandes :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
awk -F\" '{while (index($2,",")) { sub(",", " ", $2); sub(",", "\n", $2) }; gsub(",", "", $3); printf("%s",$2)>$3}' aa > alors
awk: ligne de commande:1: (FILENAME=aa FNR=4) fatal*: l'expression dans la redirection «*>*» donne une chaîne n

ulle


cette commande marche presque mais ne comprends pas les floats :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
awk -F '"' '{nbCont=split($2,contenu,",") ; for(i=1;i<=nbCont;i++){ printf("%s ", contenu[i]); if(i%2)print ""}}' aa
1.1 
2 3 
4 5 
64 3 
9 2 
3 4 
5.4 3 
4.3 5 
6 6 
2

et la derniere elle fonctionne bien :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
sed -Ez 's/"([^"]*)"[^\n]*\n/\1,/g;s/([^,]*,[^,]*),/\1\n/g;s/,/ /g' aa
1.1 2
3 4
5 64
3 9
2 3
4 5.4
3 4.3
5 6
6 2

[N_BaH]

je soupçonne une différence de format entre l'exemple donné et le fichier traité sur ta machine.

EDIT : ou la version de awk...

ce n'est pas un problème de float, c'est moi qui ait interverti la condition : if (i%2 == 0) print ""

[disedorgue]

Sinon concernant plusieurs de vos commandes :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
awk -F\" '{while (index($2,",")) { sub(",", " ", $2); sub(",", "\n", $2) }; gsub(",", "", $3); printf("%s",$2)>$3}' aa > alors
awk: ligne de commande:1: (FILENAME=aa FNR=4) fatal*: l'expression dans la redirection «*>*» donne une chaîne n

ulle

La blague: cette ligne de awk fait tout le boulot de ton script, si tu la lançais comme indiqué par son créateur...(sans redirection)