Suppression automatique des lignes d'une table ODS

pticouta · 15/04/2011, 12h05

Bonjour tout le monde
J'essaye de créer des tables ODS pour stocker les données extraites des sources, le probléme c'est comment je peux paramétrer ces tables pour que la suppression des lignes s'effectue automatiquement et d'une façon périodique?
Merci d'avance

doc malkovich · 15/04/2011, 12h36

Hello
Normalement c'est à toi de le prévoir, par exemple dans ton alimentation ou dans un batch périodique.
Sinon tu passes en mode Annuler/Remplace, mais je devine que ce n'est pas ce que tu veux

Jester · 15/04/2011, 13h44

La pluspart des ETL permettent d'envoyer un truncate avant les insertions via une case à cocher.

On ne peut pas faire du périodique (enfin techniquement faisable via des crontab dans les bases de données qui le supportent ou hors BD pour les autres). Ce serait l'enfer à gérer. Imaginer qu'une purge arrive entre le moment où vous écrivez dans la table et le moment où vous avez fini de lire. Ce serais incohérent et difficle de trouver la source du problème.

pticouta · 15/04/2011, 15h33

Merci Jester
Pourriez vous me fournir plus de détails sur ce truncate et ou je dois cocher pour l'activer

Jester · 15/04/2011, 16h40

Cela dépend de l'outil utilisé.

doc malkovich · 15/04/2011, 18h06

Citation:

Envoyé par Jester

Ce serait l'enfer à gérer. Imaginer qu'une purge arrive entre le moment où vous écrivez dans la table et le moment où vous avez fini de lire. Ce serais incohérent et difficle de trouver la source du problème.

Si si ça se fait, il suffit de placer la purge au tout début de la chaîne d'alimentation mensuelle par exemple. Ce n'est pas exceptionnel ...
Et utile, sinon en effet la volumétrie augmente vite et dégrade les performances.

Jester · 16/04/2011, 11h12

Citation:

Envoyé par doc malkovich

Si si ça se fait, il suffit de placer la purge au tout début de la chaîne d'alimentation mensuelle par exemple. Ce n'est pas exceptionnel ...
Et utile, sinon en effet la volumétrie augmente vite et dégrade les performances.

Du coup c'est dans la chaîne (donc forcément en séquence), je parlais en parallèle (genre tous les jours à 6h du mat sachant qu'en général votre chaîne finis à 3h du mat). Le jours où la chaîne prend plus de temps ou qu'on la relance en manuel, boum.

doc malkovich · 17/04/2011, 09h43

Bien sûr. On peut aussi effectuer une purge avec les DBA lors de l'arrêt/relance de la base par ex.

15/04/2011, 12h05	#1
pticouta Membre à l'essai Inscription : avril 2011 Messages : 62 Détails du profil Informations personnelles : Sexe : Informations forums : Inscription : avril 2011 Messages : 62 Points : 24 Points : 24	Suppression automatique des lignes d'une table ODS Bonjour tout le monde J'essaye de créer des tables ODS pour stocker les données extraites des sources, le probléme c'est comment je peux paramétrer ces tables pour que la suppression des lignes s'effectue automatiquement et d'une façon périodique? Merci d'avance
	00

15/04/2011, 12h36	#2
doc malkovich Modérateur Consultant en Business Intelligence Inscription : juillet 2008 Messages : 950 Détails du profil Informations personnelles : Sexe : Localisation : France, Nord (Nord Pas de Calais) Informations professionnelles : Activité : Consultant en Business Intelligence Informations forums : Inscription : juillet 2008 Messages : 950 Points : 1 467 Points : 1 467	Hello Normalement c'est à toi de le prévoir, par exemple dans ton alimentation ou dans un batch périodique. Sinon tu passes en mode Annuler/Remplace, mais je devine que ce n'est pas ce que tu veux __________________ Avez-vous 60 secondes pour répondre aux sondages sur BO ici et là ?
	00

15/04/2011, 13h44	#3
Jester Membre chevronné Inscription : septembre 2003 Messages : 623 Détails du profil Informations forums : Inscription : septembre 2003 Messages : 623 Points : 632 Points : 632	La pluspart des ETL permettent d'envoyer un truncate avant les insertions via une case à cocher. On ne peut pas faire du périodique (enfin techniquement faisable via des crontab dans les bases de données qui le supportent ou hors BD pour les autres). Ce serait l'enfer à gérer. Imaginer qu'une purge arrive entre le moment où vous écrivez dans la table et le moment où vous avez fini de lire. Ce serais incohérent et difficle de trouver la source du problème.
	00

15/04/2011, 15h33	#4
pticouta Membre à l'essai Inscription : avril 2011 Messages : 62 Détails du profil Informations personnelles : Sexe : Informations forums : Inscription : avril 2011 Messages : 62 Points : 24 Points : 24	Merci Jester Pourriez vous me fournir plus de détails sur ce truncate et ou je dois cocher pour l'activer
	00

15/04/2011, 16h40	#5
Jester Membre chevronné Inscription : septembre 2003 Messages : 623 Détails du profil Informations forums : Inscription : septembre 2003 Messages : 623 Points : 632 Points : 632	Cela dépend de l'outil utilisé.
	00

17/04/2011, 09h43	#8
doc malkovich Modérateur Consultant en Business Intelligence Inscription : juillet 2008 Messages : 950 Détails du profil Informations personnelles : Sexe : Localisation : France, Nord (Nord Pas de Calais) Informations professionnelles : Activité : Consultant en Business Intelligence Informations forums : Inscription : juillet 2008 Messages : 950 Points : 1 467 Points : 1 467	Bien sûr. On peut aussi effectuer une purge avec les DBA lors de l'arrêt/relance de la base par ex. __________________ Avez-vous 60 secondes pour répondre aux sondages sur BO ici et là ?
	00

Outils de la discussion
Afficher une version imprimable Envoyer un lien vers cette page par email