IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Shell et commandes GNU Discussion :

Suppressions colonnes avec AWK


Sujet :

Shell et commandes GNU

Vue hybride

Message précédent Message précédent   Message suivant Message suivant
  1. #1
    Membre régulier
    Homme Profil pro
    Traitement de données statistiques
    Inscrit en
    Octobre 2014
    Messages
    10
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Traitement de données statistiques

    Informations forums :
    Inscription : Octobre 2014
    Messages : 10
    Par défaut Suppressions colonnes avec AWK
    Bonsoir,

    J'aurai besoin d'une aide avec AWK, des personnes habitués à ces commandes (ce n'est pas du tout mon cas) devraient pouvoir m'aider facilement.

    Je dispose d'un fichier de données avec 20000 colonnes renseignées.
    Je voudrais supprimer les colonnes 5000 à 14999 et recréer un nouveau fichier de 10000 colonnes (les 4999 premières ne changent pas, les colonnes 5000 à 10000 correspondent aux 15000 à 20000 du fichier source).

    Quelle syntaxe AWK dois-je utiliser ?

    Merci d'avance pour votre aide.

  2. #2
    Membre prolifique
    Avatar de Sve@r
    Homme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Février 2006
    Messages
    12 832
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Oise (Picardie)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : Aéronautique - Marine - Espace - Armement

    Informations forums :
    Inscription : Février 2006
    Messages : 12 832
    Billets dans le blog
    1
    Par défaut
    Bonjour

    Déjà avant d'utiliser awk t'as cut qui est spécifiquement fait pour ça: cut -f1-4999,15000- -dx fichier >fichier2, le caractère "x" étant le séparateur de tes colonnes.

    Si maintenant tu veux vraiment utiliser awk (qui est fait pour d'autres travaux bien plus difficiles mais qui, bien évidemment, est lui-aussi capable de faire ça): awk -Fx -vsep=x '{for i=1; i <= NF; i++) { if (i >= 5000 && i <= 14999) continue; printf("%s%s", $i, sep)} printf("\n")}' fichier >fichier2 avec toujours "x" (ici écrit deux fois) à remplacer par ton séparateur...
    Mon Tutoriel sur la programmation «Python»
    Mon Tutoriel sur la programmation «Shell»
    Sinon il y en a pleins d'autres. N'oubliez pas non plus les différentes faq disponibles sur ce site
    Et on poste ses codes entre balises [code] et [/code]

  3. #3
    Membre régulier
    Homme Profil pro
    Traitement de données statistiques
    Inscrit en
    Octobre 2014
    Messages
    10
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Traitement de données statistiques

    Informations forums :
    Inscription : Octobre 2014
    Messages : 10
    Par défaut
    Merci beaucoup Sve@r !
    Grand moment de solitude de mon côté ... :o)


    Donc si j'ai bien suivi (je ne pourrais tester que demain) ...

    Imaginons que j'ai un fichier XXX.txt avec 1 ligne du genre "abcdefgh".
    Si je fais "cut -f1-4,6- XXX.txt > YYY.txt", est-ce que je vais avoir dans YYY.txt "abcfgh" ?
    (j'ai un vrai doute avec l'option du séparateur, en fait il n'y a pas de séparateur dans mon fichier).

    Est-ce que dans mon cas :
    "cut -c 1-3 XXX.txt > YYY.txt"
    "cut -c 6-8 XXX.txt >> YYY.txt"
    ne fonctionnerait pas mieux ?

    Encore merci !

  4. #4
    Modérateur
    Avatar de jlliagre
    Homme Profil pro
    Ingénieur support avancé & développement
    Inscrit en
    Juin 2007
    Messages
    2 695
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Essonne (Île de France)

    Informations professionnelles :
    Activité : Ingénieur support avancé & développement
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Juin 2007
    Messages : 2 695
    Par défaut
    Citation Envoyé par chavi Voir le message
    (j'ai un vrai doute avec l'option du séparateur, en fait il n'y a pas de séparateur dans mon fichier).
    Il faillait le préciser, quand on parle de colonnes et d'awk, il s'agit normalement de champs séparés par quelque chose.

    Dans ton cas, ceci devrait le faire:

  5. #5
    Membre régulier
    Homme Profil pro
    Traitement de données statistiques
    Inscrit en
    Octobre 2014
    Messages
    10
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Traitement de données statistiques

    Informations forums :
    Inscription : Octobre 2014
    Messages : 10
    Par défaut
    Oui Sve@r, tu as raison, la bonne solution c'est ce que Jlliagre a écrit.
    Je parle de colonnes car j'exploite des fichiers à champ fixe, et donc sans séparateurs (quand je regarde les commentaires, j'ai l'impression d'être un martien avec ce genre de format). Il n'y a pas vraiment de "champ" dans les fichiers que j'exploite.

    Encore merci à vous.

  6. #6
    Membre prolifique
    Avatar de Sve@r
    Homme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Février 2006
    Messages
    12 832
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Oise (Picardie)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : Aéronautique - Marine - Espace - Armement

    Informations forums :
    Inscription : Février 2006
    Messages : 12 832
    Billets dans le blog
    1
    Par défaut
    Citation Envoyé par chavi Voir le message
    Je parle de colonnes car j'exploite des fichiers à champ fixe, et donc sans séparateurs (quand je regarde les commentaires, j'ai l'impression d'être un martien avec ce genre de format).
    On dirait des fichiers COBOL. Ca fait au-moins 15 ans qu'on ne les utilise plus (sauf peut-être dans les banques qui fonctionnent encore au COBOL mais même là j'en doute avec les possibilités de connexions COBOL/bdd comme DB2...)
    Mon Tutoriel sur la programmation «Python»
    Mon Tutoriel sur la programmation «Shell»
    Sinon il y en a pleins d'autres. N'oubliez pas non plus les différentes faq disponibles sur ce site
    Et on poste ses codes entre balises [code] et [/code]

  7. #7
    Modérateur
    Avatar de jlliagre
    Homme Profil pro
    Ingénieur support avancé & développement
    Inscrit en
    Juin 2007
    Messages
    2 695
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Essonne (Île de France)

    Informations professionnelles :
    Activité : Ingénieur support avancé & développement
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Juin 2007
    Messages : 2 695
    Par défaut
    Citation Envoyé par chavi Voir le message
    quand je regarde les commentaires, j'ai l'impression d'être un martien avec ce genre de format.
    Non non, pas du tout, mais 20000 colonnes, ça doit faire un sacré tas de cartes perforées ...

  8. #8
    Expert confirmé

    Profil pro
    Inscrit en
    Janvier 2011
    Messages
    1 946
    Détails du profil
    Informations personnelles :
    Localisation : France, Haute Garonne (Midi Pyrénées)

    Informations forums :
    Inscription : Janvier 2011
    Messages : 1 946
    Par défaut
    Salut,

    Citation Envoyé par chavi Voir le message
    Imaginons que j'ai un fichier XXX.txt avec 1 ligne du genre "abcdefgh".
    En lisant ça, j'ai de sérieux doutes sur l'existence réelle de colonnes

    Ne parlerait-on pas simplement de lignes ???

  9. #9
    Membre prolifique
    Avatar de Sve@r
    Homme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Février 2006
    Messages
    12 832
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Oise (Picardie)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : Aéronautique - Marine - Espace - Armement

    Informations forums :
    Inscription : Février 2006
    Messages : 12 832
    Billets dans le blog
    1
    Par défaut
    Citation Envoyé par chavi Voir le message
    (j'ai un vrai doute avec l'option du séparateur, en fait il n'y a pas de séparateur dans mon fichier).
    Alors fallait pas parler de colonnes !!!

    Citation Envoyé par chavi Voir le message
    Est-ce que dans mon cas :
    "cut -c 1-3 XXX.txt > YYY.txt"
    "cut -c 6-8 XXX.txt >> YYY.txt"
    ne fonctionnerait pas mieux ?
    Tu auras alors les 3 premiers caractères de chaque ligne... puis en dessous la suite des caractères de chaque ligne. Ce n'est pas ce que tu as demandé dans ton premier post...
    Mon Tutoriel sur la programmation «Python»
    Mon Tutoriel sur la programmation «Shell»
    Sinon il y en a pleins d'autres. N'oubliez pas non plus les différentes faq disponibles sur ce site
    Et on poste ses codes entre balises [code] et [/code]

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Suppression d'un fichier avec AWK
    Par turbo_chess dans le forum Shell et commandes GNU
    Réponses: 2
    Dernier message: 02/02/2010, 15h54
  2. prblème suppression données avec colonne "blob"
    Par casa_wc dans le forum Import/Export
    Réponses: 0
    Dernier message: 18/12/2009, 16h12
  3. Suppression de caracteres en fin de ligne avec awk ou sed
    Par julinho99 dans le forum Shell et commandes GNU
    Réponses: 5
    Dernier message: 04/11/2008, 18h03
  4. awk / cut : Comment copier des colonnes avec des tests
    Par drareg06 dans le forum Shell et commandes GNU
    Réponses: 2
    Dernier message: 16/07/2008, 11h49
  5. [VBA-E] Suppression des colonnes avec condition
    Par desdenova dans le forum Macros et VBA Excel
    Réponses: 2
    Dernier message: 27/02/2007, 13h39

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo