Discussion :

[ebenmous]

Bonjour,

Y a t il quelqu'un qui pourra me recommander quels logiciels utiliser afin de pouvoir extraire les tweets et les analyser. Selon ce que j'ai regardé sur google j'ai trouvé ces propositions: Hadoop, TwitterR, flume, cloudera ...
J'aimerais bien avoir vos conseils svp pour la méthode la plus facile à utiliser.

Merci.

[Moctezuma]

Salut,

Le post date un peu mais je vais te donner des pistes.

Pour la récupéreration des tweets, tu peux utiliser Flume.
C'est un projet Apache qui s'installe sur un serveur Hadoop (Hortonworks et Cloudera au moins) et qui récupère les tweets au fil de l'eau et les stocks sous forme de fichiers dans HDFS.

Ensuite, pour le stockage, tu as plusieurs solutions : Hive, MongoDB, HBase, ElasticSearch, etc..
Moi perso, j'aime bien le combo Hive/ElasticSearch.
Avec Hive je créer une table qui pointe sur les fichiers flume, et ensuite j'indexe cette table avec ElasticSearch.

Enfin, pour la restitution, tu as l'outil Kibana qui se branche à ElasticSearch et permet d'analyser son contenu.

La liste n'est pas exhaustive bien entendu, mais cela pourrait te fournir une bonne base de départ.

[ebenmous]

Merci infiniment de ces informations