IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

SQL*Loader Oracle Discussion :

Exclusion du chargement de ligne via le fichier .ctl


Sujet :

SQL*Loader Oracle

  1. #1
    Membre du Club
    Inscrit en
    mai 2006
    Messages
    115
    Détails du profil
    Informations forums :
    Inscription : mai 2006
    Messages : 115
    Points : 59
    Points
    59
    Par défaut Exclusion du chargement de ligne via le fichier .ctl
    Bonjour,

    Je souhaite importer des données en base Oracle via l'utilitaire sqlloader et un fichier .ctl (sous Oracle 11gR2).

    J'ai toutefois un souci concernant l'exclusion de certaines lignes que je n'arrive pas à écrire pour que cela fonctionne correctement.


    J'ai plusieurs fichiers sources (toto_***.txt) dont la structure est identique et plutôt que de travailler sur chaque fichier, je suis passée par la création d'un fichier unique (toto.txt) à partir de tous mes fichiers sources.
    - Le fichier "toto.txt" a été crée via un batch qui fait appel à la commande copy C:\toto_*.txt D:\toto.txt.
    - Chaque fichier toto_*.txt contient une ligne d'entête qui est donc copiée également dans le fichier final toto.txt (que je mets en pièce jointe à ce message)

    C'est ce fichier concaténé que j'utilise pour intégrer les données via sqlloader sous Oracle, dans une table MON_SCHEMA.TOTO


    Voici le contenu de mon fichier CTL_toto.ctl
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
     OPTIONS (DIRECT=FALSE, ROWS=10000, ERRORS=100000, SKIP=1)
    LOAD DATA 
       CHARACTERSET UTF8   -- WE8MSWIN1252 --
       INFILE      'D:\toto.txt'
       BADFILE     'D:\toto.bad'
       DISCARDFILE 'D:\toto.dsc'
    TRUNCATE --APPEND
    INTO TABLE MON_SCHEMA."TOTO"
    WHEN (2:7) <> 'TOTO_'
    FIELDS terminated BY "|" OPTIONALLY ENCLOSED BY '"'
    trailing nullcols
    (CHAMP_1 INTEGER EXTERNAL(19),
     CHAMP_2 INTEGER EXTERNAL(19),
     CHAMP_3 INTEGER EXTERNAL(19),
     CHAMP_4 INTEGER EXTERNAL(19),
     CHAMP_5 INTEGER EXTERNAL(19),
     CHAMP_6 INTEGER EXTERNAL(13))
    Je m'attends à ce que les lignes commençant par "TOTO_" soient exclues de l'import mais ce n'est pas le cas.
    Elles sont traitées "en erreur" et copiées dans le fichier toto.bad

    Après analyse, j'ai compris qu'il y avait un caractère spécial qui était placé en début des lignes contenant "TOTO_0***" lors de la concaténation des fichiers toto_***.txt en toto.txt

    Sauriez-vous comment faire pour supprimer ce caractère spécial lors de la concaténation des fichiers ?
    Ou au moins comment faire pour que le .ctl permette effectivement de ne pas prendre en compte les lignes commençcant par "TOTO_0***" ?

    Merci beaucoup,
    MarieO
    Fichiers attachés Fichiers attachés

  2. #2
    Membre expérimenté
    Homme Profil pro
    Développeur Oracle
    Inscrit en
    décembre 2019
    Messages
    830
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Nord (Nord Pas de Calais)

    Informations professionnelles :
    Activité : Développeur Oracle

    Informations forums :
    Inscription : décembre 2019
    Messages : 830
    Points : 1 339
    Points
    1 339
    Par défaut
    Bonjour,

    Tu as essayé avec WHEN (1:6) <> 'TOTO_0' ?

    Sinon puisque tu es en 11g2, tu pourrais utiliser une table externe plutôt que SQL*Loader.

  3. #3
    Membre du Club
    Inscrit en
    mai 2006
    Messages
    115
    Détails du profil
    Informations forums :
    Inscription : mai 2006
    Messages : 115
    Points : 59
    Points
    59
    Par défaut
    Bonjour,

    L'exclusion WHEN (1:6) <> 'TOTO_0' ne fonctionne pas car le contenu "TOTO_0" ne se situe pas en position 1 dans les lignes à exclure. Il est en position 2 (précédé d'un caractère spécial, visible en ouvrant le fichier avec Visual Studio Code)

    Je ne connais pas les tables externes. Comment cela fonctionne-t-il ? Ou puis-je trouver de la documentation à ce sujet ?

  4. #4
    Membre expérimenté
    Homme Profil pro
    Développeur Oracle
    Inscrit en
    décembre 2019
    Messages
    830
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Nord (Nord Pas de Calais)

    Informations professionnelles :
    Activité : Développeur Oracle

    Informations forums :
    Inscription : décembre 2019
    Messages : 830
    Points : 1 339
    Points
    1 339
    Par défaut
    Une description assez succincte des tables externes ici:
    https://oracle.developpez.com/guide/...age=Chap1#L1.5

    Sinon la doc officielle:
    https://docs.oracle.com/cd/E18283_01...t_concepts.htm

  5. #5
    Membre du Club
    Inscrit en
    mai 2006
    Messages
    115
    Détails du profil
    Informations forums :
    Inscription : mai 2006
    Messages : 115
    Points : 59
    Points
    59
    Par défaut
    Bonjour,

    Je n'ai pas la possibilité d'utiliser des tables externes et je dois obligatoirement passer par SQL Loader.

    Avez-vous une idée de comment "skipper" les caractères spéciaux (et masqués) présents en 1ère position à partir de la 2ème ligne ?


    Merci beaucoup.

    MarieO

  6. #6
    Membre expérimenté
    Homme Profil pro
    Développeur Oracle
    Inscrit en
    décembre 2019
    Messages
    830
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Nord (Nord Pas de Calais)

    Informations professionnelles :
    Activité : Développeur Oracle

    Informations forums :
    Inscription : décembre 2019
    Messages : 830
    Points : 1 339
    Points
    1 339
    Par défaut
    Tu as quoi comme erreur dans le fichier .bad à propos de ces lignes? Parce que dans ton .ctl tu déclares tes colonnes en INTEGER mais TOTO_ c'est du CHAR. A mon avis il est là ton souci. Change le type de données de tes colonnes et le filtre devrait fonctionner.

Discussions similaires

  1. Chargement XML via un fichier CTL
    Par ElessarAnduril dans le forum SQL*Loader
    Réponses: 2
    Dernier message: 26/12/2013, 15h10
  2. Réponses: 3
    Dernier message: 28/08/2009, 15h01
  3. Réponses: 4
    Dernier message: 22/02/2009, 13h10
  4. Réponses: 2
    Dernier message: 01/08/2008, 12h56
  5. [MySQL] Alterner la couleur des lignes de mon tableau via un fichier CSS
    Par SONIA.GERET dans le forum PHP & Base de données
    Réponses: 4
    Dernier message: 18/01/2008, 17h11

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo