Utilisation d'une BDD pour (gros) logs [Résolu]

[Dinaïz]

Salut !

Ma question est simple. Est il envisable d'ecrire les logs d'un gros programme dans une BDD, sachant qu'actuellement, les logs sont ecrits dans des fichiers, et le debit est de l'ordre de 50 meg toutes les 10 secondes ? Si oui, quel SGBD utiliser ?
Merci d'avance,

[avoiture]

Oracle.

[Dinaïz]

Je m'en doutais un peu, mais es tu sur qu'Oracle puisse supporter un tel debit de donnees ?

[laffreuxthomas]

Mais quel est l'intérêt ? Quelques heures de ce régime et n'importe quel (système de) disque(s) dur(s) sera saturé, en admettant que le logiciel tienne.

[Dinaïz]

L'interet c'est de pouvoir faire des recherches en utilisant SQL tout simplement. Tu te doutes bien qu'avec un tel volume de donnes, la fonction rechercher du notepad st un peu limite. Quant aux disques, ils stockent ce meme volume en ce moment puisqu'on fonctionne avec des fichiers texte, donc ca ne devrait pas etre trop problematique.

Par contre j'ai toujours des doutes quand a la capacite d'un SGBD a supporter un tel debit en ecriture, mais je n'ai pas trouve d'infos a ce sujet....

[laffreuxthomas]

Serait-il envisageable d'analyser le contenu à loguer avant de le mettre en base, pour factoriser ce qu'il y a à factoriser (les préfixes identiques des urls par exemple), extraire les dates pour les ranger au format date, etc. ? Ca prendrait moins de place et serait plus exploitable.

[Dinaïz]

Non. En fait s'il y a autant de log, c'estr que le systeme est vraiment enorme. Y'a pas d'URL ou de trucs comme ca, c'est deja super abrege.

Alors Oracle, 50 meg / 10 sec, ca tient ou pas a votre avis ?

[Maître Kenobi]

y a peut etre IndustrialSQL server :

http://www.factory-syst.fr/rubrique.asp?rubrique_id=214&rubrique_parentId=32-90-107-213-214

[Jaouad]

Oracle tiendrat le coup surtout si tu utilise du RAC
et que tu parrallélise tes inserts

[Dinaïz]

[Jaouad]

Pas de quoi

n'oublie pas le bouton résolu

[fadace]

Envoyé par jaouad

Oracle tiendrat le coup surtout si tu utilise du RAC
et que tu parrallélise tes inserts

... et du partitionnement ! Le goulet viendra des disques plus que du CPU

[Jaouad]

le partitionnement :
je ne l'ai pas proposé parce qu'il ne me semble pas avoir une critére de granularité bien définit pour mettre en place le partitionement

[avoiture]

Oracle tiendrait le coup, mais il va te falloir des quantité de stockage impressionnate

[Jaouad]

Une purge réguliére devrait pourvoir eviter tout cela
Et puis maintenant le stockage ne coute presque plus rien