Discussion :

[GorMsoN]

Bonjour, ou bonsoir plutôt

J'ai un soucis d'encodage des caractère.
J'utilise un script de récupération de donnée qui formate les informations qu'il recupère en UTF8, conséquence, les accents sautent, certains caractères sont remplacés etc...

Mes Locales sont en fr_FR.UTF-8, donc pas de soucis pour gérer les accents.

Vu que ce qui est généré par le script (sur lequel je n'ai pas la main je précise), doit être comparé avec un environnement fr_FR.UTF-8 (avec accent), je voulais savoir s'il existait un moyen de remplacer les chaines genre "Septi\xc3\xa8me" par un joli "Septième" bien de chez nous ?

J'ai essayé avec iconv en testant iso8859-1, iso8859-15, latin1, mais sans succès.

Quelqu'un aurait il une idée?

D'avance merci de votre aide

[BufferBob]

Bonjour, ou bonsoir plutôt

salut

je voulais savoir s'il existait un moyen de remplacer les chaines genre "Septi\xc3\xa8me" par un joli "Septième" bien de chez nous ?

il suffit - à priori - d'interpréter les caractères échappés, à travers echo -e typiquement :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
$ echo "Septi\xc3\xa8me"
Septi\xc3\xa8me
$ echo -e "Septi\xc3\xa8me"
Septième

[jlliagre]

Attention avec la solution utilisant la commande echo qui n'est pas standardisée et risque de ne pas fonctionner suivant le shell utilisé :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
[ bash ] $ echo -e "Septi\xc3\xa8me"
Septième
 
[ zsh ] $ echo -e "Septi\xc3\xa8me"
Septième
 
[ mksh ] $ echo -e "Septi\xc3\xa8me"
Septième

Mais:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
[ dash ] $ echo -e "Septi\xc3\xa8me"
-e Septi\xc3\xa8me
 
[ ksh93 ] $ echo -e "Septi\xc3\xa8me"
Septi\xc3\xa8me

Mieux vaut utiliser printf qui est portable et donc fonctionnera quel que soit le shell :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
$ printf "Septi\xc3\xa8me\n"
Septième

[GorMsoN]

Helloooooo

tout d'abord merci pour le retour, la simplicité de la commande me fait peut vis à vis du temps que j'ai passé à rechercher une solution sur le net...

Bref,

Mais du coup, il y a quelque chose que je ne pige pas.

Lorsque je lance la commande avec une chaine de caractère

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

printf "une chaine de caractère avec des caractères genre \xc3\xa8 \n"

j'obtiens bien

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

une chaine de caractère avec des caractères genre è

Maintenant, j'ai un fichier avec un grand nombre de lignes contenant pour certaines des caractère comme ci dessus.
du coup j'avais écris ce script

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
#!/bin/sh
 
rm $1.new
 
for i in $1
do
 
   echo "$i"
   printf "$i\n" >> $1.new
 
done

le script me revois simplement le nom du fichier que je passe en paramètre...
et dans le fichier créé en .new j'ai aussi 1 ligne avec unique le non du fichier passé en paramètre.

Je précise que le fichier que je passe en paramètre comporte beaucoup de lignes...

Du coup je comprends rien... l'est pourtant pas compliqué ce script

D'avance merci de votre aide.

[jlliagre]

Il faut lire chaque ligne du fichier, ton script fait une boucle (et une seule) qui traite le nom du fichier, pas son contenu..

Voici comment on peut faire :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
#!/bin/bash
 
while IFS="" read -r i || [[ -n "$i" ]]; do
   printf "$i\n" 
done < "$1" > "$1.new"

[BufferBob]

le script me revois simplement le nom du fichier que je passe en paramètre...

oui, for i in $1 revient en gros à écrire for i in "fichier", ce qui est différent de for i in $(cat fichier)

et puis on préfèrera une boucle while dans ce cas :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
while read -r line
do
   printf "$line\n" >> ${fichier}.new
done < $fichier

• on utilise read -r de manière à conserver les backslashes pour printf ensuite (help read)
• ${fichier} est la même chose que $fichier, simplement les accolades permettent de protéger le nom de variable et le dissocier de l'extension qu'on lui concatène, une bonne habitude juste

[GorMsoN]

OLAAAAAA

Bon après quelques essais ça ne fonctionnait toujours pas...
du coup au lieu de prendre /bin/sh j'ai pris /bin/bash
et là ooooh miracle ça fonctionne.
Etrange si j'en crois un des commentaires plus haut qui annonçait que printf fonctionnait quelque soit le shell.

Merci beaucoup à vous tous pour l'aide précieuse, malgré la simplicité de la solution, j'aurai pu chercher encore un bon moment.

Mieux vaut 1 qui sait que 10 qui cherchent

Du coup voici le code qui fonctionne pour replacer les caractères spéciaux à leur place :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
#!/bin/bash
 
rm $1.new
 
while read -r line
do
        printf "$line\n" >> ${1}.new
done < $1

[Flodelarab]

Bonjour

Si le shebang n'est pas sur la première ligne il ne sert à rien.

[GorMsoN]

C'était juste lorsque j'ai copier-coller le code, j'ai corrigé ci dessus au cas où.

Et je passe en résolu, j'avais oublié

[jlliagre]

Il y a deux petits problèmes avec la solution que tu as retenue:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

while read -r line

- enlève les espaces éventuellement présent en debut ou en fin de ligne

- ignore la dernière ligne si elle n'est pas terminée par un retour à la ligne (linefeed)

D'autre part, il est inutile d'effacer le fichier de sortie puis de faire une redirection pour chaque ligne lue, une seule redirection en fin de boucle suffit.

Je remet la solution que j'avais proposée qui ne présente pas ces limitations :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
#!/bin/bash
 
while IFS="" read -r i || [[ -n "$i" ]]; do
   printf "$i\n" 
done < "$1" > "$1.new"

Etrange si j'en crois un des commentaires plus haut qui annonçait que printf fonctionnait quelque soit le shell.

Tu es sous quel Linux ?

[BufferBob]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

while read -r line

- enlève les espaces éventuellement présent en debut ou en fin de ligne
- ignore la dernière ligne si elle n'est pas terminée par un retour à la ligne (linefeed)

ah ben j'aurais appris un truc (deux en fait), effectivement vaut mieux utiliser ta solution pour le coup (la précédente c'est surtout qu'on s'est télescopé à 10min près )

[jack-ft]

Je remet la solution que j'avais proposée qui ne présente pas ces limitations :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
#!/bin/bash
 
while IFS="" read -r i || [[ -n "$i" ]]; do
   printf "$i\n" 
done < "$1" > "$1.new"

Magnifique solution! Merci!

Maintenant, si je puis me permettre une très très légère amélioration:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
#!/bin/bash
 
while IFS="" read -r line || [[ -n "${line}" ]]; do
   printf "${line}\n" 
done < "$1" > "$1.new"

PS: les variables nommées a b c d e f g h i j k l m n o p q r s t u v w x y z sont à éviter, voire interdites dans certaines conventions...

[GorMsoN]

Bonsoir,

Je viens de voir le flot de réponse additionnel, je rajouterai la subtilité proposé avec l'IFS, quand c'est mieux ben c'est mieux

Par contre au passage dans le genre cas à la con, parmi la liste des fichiers que je traite un petit matin a mis un "%" dans le titre
si je résume le comportement

Le fichier que je traite contient les deux lignes suivantes

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
/home/user/other/bla 200% sdfds sdfsfd
/home/user/other/un_nom_de_dossier_normal

avec la boucle dont on parlait j'arrive à ce résultat

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
./user_report.sh: ligne 21 : printf: « H » : caractère de format non permis
/home/user/other/bla 200/home/user/other/un_nom_de_dossier_normal

en gros le % fait planter le bazar.... en perdant la fin de la ligne et en faisant sauter le "\n"
au cas où... si quelqu'un a une idée propre plutôt que de faire un gros sed bourrin...

[jlliagre]

Aie! Je n'avais pas pensé au "%". Tu as trouvé la faille de "printf" ...

Pas de problème vu que tu fixes le shell avec "#!/bin/bash", tu peux utiliser "echo -e "...

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
#!/bin/bash
 
while IFS= read -r line || [[ -n "$line" ]]; do
   echo -e "${line}\n" 
done < "$1" > "$1.new"

[disedorgue]

Bonjour,

Toujours sous bash, on peut aussi utiliser printf en utilisant le formateur "%b", voici un exemple qui regroupe tous les cas:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
$ echo -n '    /home/user/other/bla 200% sdfds sdfsfd Septi\xc3\xa8me' | while read -r || [[ -n $REPLY ]]; do printf "%b\n" "$REPLY" ; done
    /home/user/other/bla 200% sdfds sdfsfd Septième

En complément, ici j'utilise la variable par défaut de read (donc $REPLY) qui conserve aussi les espaces en début de ligne.

PS: merci jlliagre pour le cas de la ligne incomplète.

[GorMsoN]

Bonjour,

Merci pour les compléments de réponses apportées, et désolé pour mon temps de réponse, je suis papa depuis 1 semaine... et bizarrement j'ai moins de temps qu'avant lol.

J'ai donc utilisé

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

printf "%b\n" "$variable"

je n'ai juste pas utilisé $REPLY vu que cela générait des résultats bizarres.

Merci encore pour toute l'aide apportée.

A+

[disedorgue]

Donc, Bienvenu au Nouveau PAPA et Bonnes nuits blanche à venir