Discussion :

[kasablaye]

Bonjour cher camarades j'ai besoin de votre aide svp.

Je voulais avoir des informations sur (le BIG DATA et les systèmes de fichiers JSON et XML) c'est à dire les traitement des big data par les systèmes de fichiers JSON et XML.

Des articles, rapport de mémoire, livres, explications, tout ce que vous avez.

Merci encore.

[dev_ggy]

Bonjour,

Quels que soient les fichiers textes que tu traites, tu traites ces fichiers par des scripts avec par exemple Spark, Pig, Hive, Bash.

Cela dépendant du type de contenu dans tes fichiers et du type de traitement que tu veux faire.

Tu peux par exemple traiter les fichiers JSON et XML et y extraire des données dans Spark pour les insérer dans une base de données Hive.

Chaque solution a ses propres documentations et ses propres Tutorials.

Cordialement,

[rouardg]

Bonjour,

Le Big Data est un très vaste domaine.

Pour ceux qui veulent absolument rester en JSON, stocker et manipuler du JSON à tout bout de champ, je dirais qu'il faut aller sur les bases de données NoSQL orientées documents, comme MongoDB ou CouchDB, mais il y a bien d'autres éditeurs.

Le JSON est très souvent rencontré comme format par rapport au XML, car moins verbeux. Il consomme donc moins d'espace de stockage.

Après il existe peut-être des bases NoSQL orientées documents qui gèrent le XML. Personnellement, n'ayant travailé qu'un peu sur MongoDB, je ne sais pas répondre à cette question.


Sinon comme disait dev_ggy, cela dépend effectivement des traitements que l'on veut faire.

Rien n'empêche aussi de lire du JSON ou du XML, et de le convertir et le stocker dans un autre format.

[kasablaye]

Est ce que tu peut m'aider à avoir les liens menant vers ces documentations et tutoriaux?

[kasablaye]

Merci à toi aussi.