IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Shell et commandes GNU Discussion :

duree pour parser un fichier avec un script awk


Sujet :

Shell et commandes GNU

  1. #1
    Membre confirmé
    Inscrit en
    Septembre 2006
    Messages
    86
    Détails du profil
    Informations forums :
    Inscription : Septembre 2006
    Messages : 86
    Par défaut duree pour parser un fichier avec un script awk
    Bonjour ,
    J'ai ecris un script awk pour parser un fichier log. Parcontre je vois que ceci prend beaucoup de temps.

    En fait pour un fichier "30294496 Mar 9 04:02 fichiertest.log" mon script a pris 41 secondes pour parser et effectuer les traitements necessaires.

    vous aurriez une idee ca devrait etre parser pour combien de temps ?

    Comment je puisse calculer le temps de lecture d'un tell fichier ?

    Merci pour votre reponse

    Kass

  2. #2
    Membre Expert
    Profil pro
    Inscrit en
    Mai 2004
    Messages
    792
    Détails du profil
    Informations personnelles :
    Localisation : Belgique

    Informations forums :
    Inscription : Mai 2004
    Messages : 792
    Par défaut
    Sans voir ton script et la structure de ton fichier à parser, on ne pourra pas grand chose pour toi. Mais 41 sec., ça me semble un peu long. Typiquement, il faut compter quelques secondes tout au plus pour un million de lignes selon la complexité du fichier à parser et le traitement à lui appliquer.

    Sinon pour chronométrer ton script:
    $ time ton-script.awk

  3. #3
    Expert confirmé
    Avatar de laurentschneider
    Homme Profil pro
    Administrateur de base de données
    Inscrit en
    Décembre 2005
    Messages
    2 944
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : Suisse

    Informations professionnelles :
    Activité : Administrateur de base de données
    Secteur : Finance

    Informations forums :
    Inscription : Décembre 2005
    Messages : 2 944
    Par défaut
    perl est souvent plus rapide que awk. tu peux convertir ton script awk en perl avec a2p

Discussions similaires

  1. script Dos pour générer un fichier avec une string
    Par yanis97 dans le forum Scripts/Batch
    Réponses: 1
    Dernier message: 16/10/2009, 16h57
  2. Script shell pour parser un fichier txt
    Par pcsystemd dans le forum Shell et commandes GNU
    Réponses: 2
    Dernier message: 30/09/2008, 09h32
  3. [DOM4J] Problème pour "parser" un fichier XML avec accents
    Par mlny84 dans le forum Format d'échange (XML, JSON...)
    Réponses: 7
    Dernier message: 26/11/2007, 19h06
  4. Réponses: 1
    Dernier message: 09/10/2007, 19h31
  5. problème pour parser un fichier xml avec XML::Simple
    Par black_code dans le forum Modules
    Réponses: 3
    Dernier message: 30/01/2006, 19h32

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo