IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Unix Discussion :

Comparaison et modification de deux fichiers volumineux


Sujet :

Unix

  1. #1
    Membre du Club
    Inscrit en
    Juillet 2008
    Messages
    80
    Détails du profil
    Informations forums :
    Inscription : Juillet 2008
    Messages : 80
    Points : 43
    Points
    43
    Par défaut Comparaison et modification de deux fichiers volumineux
    J'ai deux fichiers très volumineux (1 000 000 de lignes)

    le fichier "A" est composé de lignes de 4 champs séparés par un ;

    Extrait du fichier "A":
    101429;137;01;0034;
    101457;137;01;0036;
    101587;137;01;0041;
    101470;137;01;0043;
    100342;137;01;0052;
    96808;137;01;0056;

    le fichier "B" est composé de lignes de 17 champs séparés par un ;

    Extrait du fichier "B":
    PA203961;APA203961;0;;;137;;;;01;0034;000099;G00257;16101995;03705;;
    PA203962;APA203962;0;;;118;;;;01;0081;0000035;+00010;01011970;;;
    PA203963;APA203963;0;;;118;;;;01;0083;0000500;G00257;16101995;03705;0029;
    PA203964;APA203964;0;;;118;;;;01;0089;000000175;W00159;26061998;03881;0038;
    PA203965;APA203965;0;;;118;;;;01;0096;000000104;F00271;23032007;;0039;
    PA203966;APA203966;0;;;118;;;;01;0097;000000088;B00297;01011989;01651;0041;
    PA203967;APA203967;2;;;118;;PAR203967;;01;0099;000000235;*00153;12122000;;0045;


    Je souhaiterai rajouter à la fin des lignes du fichier "B" le premier champ du fichier A lorsque:
    - le deuxième champ du fichier A est égal au sixième champ du fichier B
    - et que le troisième champ du fichier A est égal au dixième champ du fichier B
    - et que le quatrième champ du fichier A est égal au onzième champ du fichier B

    (Voir champs en gras dans les premières lignes)

    Comment le faire le plus rapidement possible?
    Avec deux boucles while read c'est beaucoup trop long.
    J'ai pensé à awk mais on ne peut pas mettre une boucle awk dans une autre.

    Je suis bloqué...

    Merci pour votre aide!

  2. #2
    Membre à l'essai
    Inscrit en
    Décembre 2006
    Messages
    17
    Détails du profil
    Informations forums :
    Inscription : Décembre 2006
    Messages : 17
    Points : 19
    Points
    19
    Par défaut Perl
    Bonjour,

    Je ne suis pas un crac en prog mais j'ai déjà écrit des petits programmes Perl qui traiter des fichiers d'environ 3go et c'était assez rapide.


    Peut-être peux-tu creuser de ce côté là ....

Discussions similaires

  1. Comparaison de deux fichiers volumineux
    Par shinjidragibus dans le forum Langage
    Réponses: 36
    Dernier message: 07/08/2014, 23h56
  2. [XL-2010] Comparaison de formule entre deux fichiers excel
    Par africanism95 dans le forum Macros et VBA Excel
    Réponses: 3
    Dernier message: 05/04/2013, 15h59
  3. jcl : comparaison des enregistrements de deux fichiers
    Par twisty dans le forum JCL - SORT
    Réponses: 4
    Dernier message: 30/01/2011, 14h56
  4. Réponses: 0
    Dernier message: 14/11/2010, 15h22
  5. Comparaison et modification de deux fichiers volumineux
    Par roman67 dans le forum Shell et commandes GNU
    Réponses: 7
    Dernier message: 04/10/2008, 08h51

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo