IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Shell et commandes GNU Discussion :

alimenter une table à partir d'un fichier log


Sujet :

Shell et commandes GNU

Vue hybride

Message précédent Message précédent   Message suivant Message suivant
  1. #1
    Membre averti
    Profil pro
    Inscrit en
    Mars 2005
    Messages
    15
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Mars 2005
    Messages : 15
    Par défaut alimenter une table à partir d'un fichier log
    Bonjour

    je dois alimenter un table de suivi à partir d'un fichier log
    on m'a parlé de Awk mais je connais pas de tout la syntaxe
    pourrriez vous m'aider

    merci d'avance

  2. #2
    Modérateur
    Avatar de gangsoleil
    Homme Profil pro
    Manager / Cyber Sécurité
    Inscrit en
    Mai 2004
    Messages
    10 150
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Haute Savoie (Rhône Alpes)

    Informations professionnelles :
    Activité : Manager / Cyber Sécurité

    Informations forums :
    Inscription : Mai 2004
    Messages : 10 150
    Par défaut
    Bonjour,

    Qu'entends-tu par "Alimenter une table de suivi" ? Cela correspond-il à rentre les données dans une base de donnée via le langage SQL ?

    Si oui, il va falloir que tu donnes un exemple des données que tu lis, ainsi que le schema de ta table.
    "La route est longue, mais le chemin est libre" -- https://framasoft.org/
    Les règles du forum

  3. #3
    Membre averti
    Profil pro
    Inscrit en
    Mars 2005
    Messages
    15
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Mars 2005
    Messages : 15
    Par défaut
    merci de m'avoir repondu

    j'ai un fichier log de type texte qui contient plusieurs informations
    non de fichier source
    nom du fichier cible
    nombre de lignes lus
    nombre de lignes supprimés
    nombre de lignes rejetés
    date de traitements
    .....
    et l'ensemble de ces informations je dois les recuperer pour les mettre dans une table orcale

    CREATE TABLE SUIVI_IMPORT (
    NOM_FICHIER_SRC VARCHAR2 (50) ,
    NOM_TABLE_CIBLE VARCHAR2 (50),
    DATE_TRAITEMENT DATE,
    STATUT VARCHAR2 (20),
    NB_LU NUMBER,
    NB_SUPP NUMBER,
    TEMPS_TRAIT NUMBER

    ) ;

  4. #4
    Rédacteur
    Avatar de _Mac_
    Profil pro
    Inscrit en
    Août 2005
    Messages
    9 601
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Août 2005
    Messages : 9 601
    Par défaut
    Utilise Oracle SQL*Loader, c'est fait pour ce genre de chose.

  5. #5
    Membre averti
    Profil pro
    Inscrit en
    Mars 2005
    Messages
    15
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Mars 2005
    Messages : 15
    Par défaut
    Bonjour

    Le fichier log que je dois decharger dans la table oracle n'est pas structuré
    ci joint un exemple de fichier log
    ------------------------------------------------------------------------
    QL*Loader: Release 9.2.0.7.0 - Production on Wed Nov 14 09:02:04 2007

    Copyright (c) 1982, 2002, Oracle Corporation. All rights reserved.

    Control File: /users/dwhradm/SCRIPTS/PASSERELLES/KPIDRE/CTL/TFX_ZONE_CELL.ctl
    Data File: /users/dwhradm/LOGS/PASSERELLES/KPIDRE/ZONE.27-10-07.csv
    Bad File: /users/dwhradm/LOGS/PASSERELLES/KPIDRE/TFX_ZONE_CELL.bad
    Discard File: none specified

    (Allow all discards)

    Number to load: ALL
    Number to skip: 0
    Errors allowed: 10000
    Continuation: none specified
    Path used: Direct
    Silent options: FEEDBACK
    Table TFX_ZONE_CELL, loaded from every logical record.
    Insert option in effect for this table: TRUNCATE
    TRAILING NULLCOLS option in effect

    Column Name Position Len Term Encl Datatype
    ------------------------------ ---------- ----- ---- ---- ---------------------
    ZONE_NAME FIRST * ; CHARACTER
    CELL_ID NEXT * ; CHARACTER


    Table TFX_ZONE_CELL:
    788170 Rows successfully loaded.
    0 Rows not loaded due to data errors.
    0 Rows not loaded because all WHEN clauses were failed.
    0 Rows not loaded because all fields were null.

    Bind array size not used in direct path.
    Column array rows : 5000
    Stream buffer bytes: 256000
    Read buffer bytes: 1048576

    Total logical records skipped: 0
    Total logical records read: 788170
    Total logical records rejected: 0
    Total logical records discarded: 0
    Total stream buffers loaded by SQL*Loader main thread: 171
    Total stream buffers loaded by SQL*Loader load thread: 2

    Run began on Wed Nov 14 09:02:04 2007
    Run ended on Wed Nov 14 09:02:12 2007

    Elapsed time was: 00:00:07.96
    CPU time was: 00:00:04.84
    --------------------------------------------------------------------
    Est ce que meme avec ce type de structure je peux utiliser le sql plus pour decharger mon fichier log dans une table ou faut il que je regardre plutot vers le shell?

    merci bcp de votre aide

  6. #6
    Rédacteur
    Avatar de _Mac_
    Profil pro
    Inscrit en
    Août 2005
    Messages
    9 601
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Août 2005
    Messages : 9 601
    Par défaut
    Si le fichier n'est pas structuré, ça va être effectivement difficile de le charger, mais l'erreur que tu obtiens est peut-être tout simplement une erreur dans ton fichier de contrôle : c'est pas facile à construire, ce truc.

    A quoi ressemble ton fichier de log ? C'est quels enregistrements que tu veux charger ? Il faut commencer par là : trouver le moyen d'identifier ces enregistrements. Après, en fonction de la tête qu'ils ont, on regardera comment les charger dans la base de données.

Discussions similaires

  1. alimenter une table à partir d'un fichier EXCEL
    Par sinoun dans le forum Développement de jobs
    Réponses: 2
    Dernier message: 29/08/2012, 10h38
  2. Alimenter une table à partir de fichiers
    Par remys dans le forum kettle/PDI
    Réponses: 0
    Dernier message: 02/02/2009, 14h51
  3. Réponses: 0
    Dernier message: 07/02/2008, 16h09
  4. Réponses: 4
    Dernier message: 27/04/2007, 14h05
  5. création d'une table à partir d'un fichier texte
    Par romain.barraud dans le forum Installation
    Réponses: 5
    Dernier message: 05/04/2007, 18h40

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo