IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

DataStage Discussion :

Suivi des traitements Datastage


Sujet :

DataStage

  1. #1
    Expert confirmé
    Avatar de doc malkovich
    Homme Profil pro
    Consultant en Business Intelligence
    Inscrit en
    Juillet 2008
    Messages
    1 884
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Nord (Nord Pas de Calais)

    Informations professionnelles :
    Activité : Consultant en Business Intelligence

    Informations forums :
    Inscription : Juillet 2008
    Messages : 1 884
    Points : 4 285
    Points
    4 285
    Billets dans le blog
    1
    Par défaut Suivi des traitements Datastage
    Hello everybody

    J'essaye actuellement de mettre en place un suivi des traitements Datastage.
    En résumé, il s'agit de fournir un rapport d'exploitation à la demande qui liste les erreurs rencontrées de manière explicite.
    Ainsi, la personne qui arrive le matin consulte ce rapport et n'a pas à chercher dans les logs datastage pour comprendre les incidents rencontrés.
    Bien sûr, ce rapport serait aussi destiné à des personnes qui ne connaissent pas forcément Datastage ...
    On trouverait dans ce rapport des erreurs comme "Pb de structure du fichier", ou "Pb de doublons" ...

    En gros il faudrait combiner toutes les logs Datastage dans une seule log, et de manière explicite !

    le problème est que Datastage sort souvent des erreurs incompréhensibles, et lister toutes les erreurs DS pour les décoder en libellés clairs me semble un travail de titan !!!

    Avez-vous des idées sur ce sujet ? un retour d'expérience ? comment est-ce géré chez vous ?
    N'oubliez pas de cliquer sur lorsque votre problème est réglé !

  2. #2
    Membre éprouvé
    Homme Profil pro
    Architecte Décisionnel
    Inscrit en
    Février 2008
    Messages
    866
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 48
    Localisation : France, Haute Garonne (Midi Pyrénées)

    Informations professionnelles :
    Activité : Architecte Décisionnel

    Informations forums :
    Inscription : Février 2008
    Messages : 866
    Points : 1 260
    Points
    1 260
    Par défaut
    Bonjour,

    Nous ne nous basons pas sur les logs Datastage pour remonter ces informations aux utilisateurs.

    L'architecture logicielle mise en place trace pour chaque job séquence le début et la fin du traitement ainsi que le statut (planté, alertes ou exécution ok).
    Mais lors d'un plantage, l'utilisateur n'a pas de moyen de savoir quel est le problème. (En pratique, cela ne doit pas arriver, sauf erreur technique).

    Les rejets sont gérés au sein de chaque traitement, via l'alimentation de fichiers de rejets qui sont récupérés à la fin de chaque job séquence et chargé automatiquement dans une base de données à laquelle les utilisateurs ont accès.
    Les rejets remontés sont de 2 types :
    - Fonctionnels : ils répondent à une règle de gestion définie par les utilisateurs (champ obligatoire, contrainte d'intégrité...)
    - Technique : rejet lors de la mise à jour d'une table.

    Dis moi si tu souhaites plus de précision sur un point précis.

    Nicolas

  3. #3
    Expert confirmé
    Avatar de doc malkovich
    Homme Profil pro
    Consultant en Business Intelligence
    Inscrit en
    Juillet 2008
    Messages
    1 884
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Nord (Nord Pas de Calais)

    Informations professionnelles :
    Activité : Consultant en Business Intelligence

    Informations forums :
    Inscription : Juillet 2008
    Messages : 1 884
    Points : 4 285
    Points
    4 285
    Billets dans le blog
    1
    Par défaut
    Bonjour Nicolas,

    Non ça me semble clair, c'est une des pistes que j'avais explorée ...
    Merci

    Johnny
    N'oubliez pas de cliquer sur lorsque votre problème est réglé !

  4. #4
    Membre à l'essai
    Profil pro
    Inscrit en
    Décembre 2008
    Messages
    12
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Décembre 2008
    Messages : 12
    Points : 11
    Points
    11
    Par défaut
    Bonjour Nico,

    je souhaiterai mettre en place le suivi de traitement que tu as décris.
    Pourrais tu m'envoyer un DSX content un job px avec la gestion des rejets et un job sequence qui récupére les erreurs et les intégres dans la bdd ?

    Par avance, merci

Discussions similaires

  1. traitement des fichiers DATASTAGE SERVER
    Par thomas02 dans le forum DataStage
    Réponses: 4
    Dernier message: 27/06/2014, 17h58

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo