IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Programmation et administration système Perl Discussion :

Concaténation de plusieurs gros fichiers


Sujet :

Programmation et administration système Perl

  1. #1
    Membre régulier
    Inscrit en
    Mai 2006
    Messages
    330
    Détails du profil
    Informations forums :
    Inscription : Mai 2006
    Messages : 330
    Points : 85
    Points
    85
    Par défaut Concaténation de plusieurs gros fichiers
    Salut,

    Je suis sous cygwin. J'ai vu plein de façons différentes de procéder pour l'opération de concaténation de fichiers sur le net. Je voudrais savoir laquelle est la plus rapide et la moins susceptible d'être génée par des tailles de fichier importantes en entrée et en sortie.

    Merci !

  2. #2
    Responsable Perl et Outils

    Avatar de djibril
    Homme Profil pro
    Inscrit en
    Avril 2004
    Messages
    19 820
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France

    Informations forums :
    Inscription : Avril 2004
    Messages : 19 820
    Points : 498 771
    Points
    498 771
    Par défaut
    Montre nous déjà ce que toi tu fais.

  3. #3
    Membre régulier
    Inscrit en
    Mai 2006
    Messages
    330
    Détails du profil
    Informations forums :
    Inscription : Mai 2006
    Messages : 330
    Points : 85
    Points
    85
    Par défaut
    Citation Envoyé par djibril Voir le message
    Montre nous déjà ce que toi tu fais.
    Je fais quelque chose comme ça :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
     
    open(OUT, ">> $output") or die("Can't create output file: $!");
    binmode(OUT);
    foreach (@files) {
          open(IN, "< $_")
          or die("Can't open input file $_: $!");
          binmode(IN);
          {
               local $_;
               print OUT $_ while <IN>;
          }
    }

  4. #4
    Responsable Perl et Outils

    Avatar de djibril
    Homme Profil pro
    Inscrit en
    Avril 2004
    Messages
    19 820
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France

    Informations forums :
    Inscription : Avril 2004
    Messages : 19 820
    Points : 498 771
    Points
    498 771
    Par défaut
    Cette méthode est bien. Petite correction
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    open(OUT, '>' $output) or die("Can't create output file: $!");
    binmode OUT;
     
    foreach (@files) {
          open(IN, '<', $_) or die("Can't open input file $_: $!");
          binmode IN;
          print OUT $_ while (<IN>);
          close(IN);
    }
    close(OUT);

  5. #5
    Membre régulier
    Inscrit en
    Mai 2006
    Messages
    330
    Détails du profil
    Informations forums :
    Inscription : Mai 2006
    Messages : 330
    Points : 85
    Points
    85
    Par défaut
    Merci ! Et elle est plus rapide que les méthodes utilisant le shell comme un "cat" ou un "copy" ?

  6. #6
    Responsable Perl et Outils

    Avatar de djibril
    Homme Profil pro
    Inscrit en
    Avril 2004
    Messages
    19 820
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France

    Informations forums :
    Inscription : Avril 2004
    Messages : 19 820
    Points : 498 771
    Points
    498 771
    Par défaut
    copy => faire une copie, donc ne permet pas la concaténation. Ce n'est pas son but.
    cat => affiche à l'écran, donc perd en performance et son but premier n'est pas non plus la concaténation.

  7. #7
    Membre chevronné

    Homme Profil pro
    Responsable projets techniques
    Inscrit en
    Février 2003
    Messages
    980
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Ille et Vilaine (Bretagne)

    Informations professionnelles :
    Activité : Responsable projets techniques
    Secteur : Biens de consommation

    Informations forums :
    Inscription : Février 2003
    Messages : 980
    Points : 1 894
    Points
    1 894
    Par défaut
    euh, djibril, je m'insurge !

    Le but premier de la commande cat est BIEN la concaténation

    L'affichage d'un fichier est un "détournement", tout comme utiliser touch pour créer un fichier en est un.

  8. #8
    Responsable Perl et Outils

    Avatar de djibril
    Homme Profil pro
    Inscrit en
    Avril 2004
    Messages
    19 820
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France

    Informations forums :
    Inscription : Avril 2004
    Messages : 19 820
    Points : 498 771
    Points
    498 771
    Par défaut
    Citation Envoyé par Alek-C Voir le message
    euh, djibril, je m'insurge !

    Le but premier de la commande cat est BIEN la concaténation

    L'affichage d'un fichier est un "détournement", tout comme utiliser touch pour créer un fichier en est un.

Discussions similaires

  1. Concaténation de plusieurs fichiers en un seul
    Par poullodiery dans le forum Shell et commandes GNU
    Réponses: 17
    Dernier message: 18/05/2013, 22h59
  2. [XL-2003] Concaténation de plusieurs fichiers .txt
    Par n.simona dans le forum Excel
    Réponses: 2
    Dernier message: 27/05/2011, 14h49
  3. Partir d'un gros fichier pour en faire plusieurs petits
    Par Bruno13 dans le forum Débuter
    Réponses: 12
    Dernier message: 07/10/2009, 13h12
  4. concaténation de plusieurs de fichiers
    Par sam01 dans le forum z/OS
    Réponses: 3
    Dernier message: 14/09/2009, 14h02
  5. plusieurs pages pour gros fichiers (processeur js)
    Par arnobidul dans le forum XML/XSL et SOAP
    Réponses: 1
    Dernier message: 25/07/2005, 09h22

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo