IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Unix Discussion :

concaténation de fichier avec awk qui rajoute un "line feed" faisant planter iconv


Sujet :

Unix

  1. #1
    Futur Membre du Club
    Profil pro
    Inscrit en
    Décembre 2009
    Messages
    9
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Décembre 2009
    Messages : 9
    Points : 7
    Points
    7
    Par défaut concaténation de fichier avec awk qui rajoute un "line feed" faisant planter iconv
    'jour tt le monde et au secours...

    je ne fais pas "d'unix" par contre je suis obligé de l'administrer.

    J'ai un plantage amusant.

    Mon algo fait :
    - concaténation de l'ensemble des fichiers présents dans un répertoire donnée avec awk
    - puis une conversion UTF-8 vers ISO8859-1 avec iconv.

    et là je plante dans iconv pour un caractère parasite qui se trouverai être un Line Feed (0A en hexa) en plein milieu d'un contenu XML avec des caractères spéciaux qui l'encadre
    ==> é mon line feed se trouve en plein milieu
    ==> C3 83 0A C2 A9 en hexa.

    Etat des lieux
    1- d'autres Line feed sont présent en amont du plantage et n'ont pas posé le problème.
    2- d'autres é sans line feed à l'intérieur ont bien été transformés en '?' sans problème.
    3- ce Line Feed est rajouté par la commande de concaténation

    Conclusion : mauvaise ?
    j'en conclu que c'est cette combinaison de caractères qui provoque le plantage de iconv.

    Mais pourquoi la concaténation me rajoute ce line feed en plein milieu de mes é

    1 semaine que je sêche...

    concaténation

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
     
    do
    	if [ -f ${i} ]
    	then
    		cat ${i} | awk '{ if ( NF > 0 ) { print $0 } }' >> ${FICHIER_RESULTAT}
    		ret=${?}
    		if [ ${ret} -ne 0 ]	
    		then
    			retour=6
    			logError "| Erreur ${retour} en concatenation du fichier ${i} dans ${FICHIER_RESULTAT} : retour ${ret}" >> ${LOG}
    			exit ${retour}
    		fi
    	fi
    done
    ma conversion du fichier concaténé ci-dessus

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
     
    iconv -f UTF-8 -t ISO8859-1 ${temp}/$fic.abc > ${temp}/$fic.abc.iso

  2. #2
    Membre actif

    Profil pro
    Inscrit en
    Août 2009
    Messages
    156
    Détails du profil
    Informations personnelles :
    Âge : 41
    Localisation : France

    Informations forums :
    Inscription : Août 2009
    Messages : 156
    Points : 211
    Points
    211
    Par défaut
    Le message est vieux, je suppose que c'est résolu de ton coté, mais si tu es toujours bloqué, envoie par MP un tar avec juste un fichier d'une ligne avec les caractères en question, je regarderais.

Discussions similaires

  1. parcourir 2 fichiers avec awk, et comparer 2 champs
    Par morphdown dans le forum Shell et commandes GNU
    Réponses: 4
    Dernier message: 09/07/2013, 11h03
  2. traiter 2 fichier avec awk
    Par zcoul dans le forum Shell et commandes GNU
    Réponses: 1
    Dernier message: 11/03/2008, 18h28
  3. Lire un fichier avec awk
    Par lili2704 dans le forum Linux
    Réponses: 4
    Dernier message: 18/01/2007, 15h53
  4. problème formatage de fichier avec awk
    Par nenekes dans le forum Shell et commandes GNU
    Réponses: 16
    Dernier message: 02/11/2006, 12h53
  5. Formatage de fichier avec awk
    Par sam56 dans le forum Shell et commandes GNU
    Réponses: 1
    Dernier message: 12/10/2006, 11h04

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo