Discussion :

[LEK]

Bonsoir, je ne sais pas si vous me diriger, mon but : créer une sorte d'agent robot pour rechercher sur le web et indexé un certain type de contenu...
L'agent doit être capable de reconnaitre des articles portant sur une thématique particulière, l'auteur, si possible son adresse mail... Est ce aujourd'hui possible? Si oui quels types d'algo doivent être employés?
Ou trouvez des sources similaires?

[Rom_1]

Je crois qu'il existe 2 types d'algorithmes pour ce genre d'agents :

*les systèmes de recherche (type googlebots),
qui recherchent dans un texte des mot-clefs et attribuent à la page un degré de pertinence, mais je ne sais pas comment est construite la pondération (l'indice de pertinence) à partir des résultats de recherche de mots clef

*les sytèmes "d'intelligence artificielle" fonctionnant par apprentissage
type réseaux de neurones ou chaînes de Markov (utilisées aussi en reconnaissance vocale), eduqués par exemple à reconnaître le nom de l'auteur dans un article.

Dans ton cas, connaître la forme d'article à trouver (par exemple, tu sais que tous les articles sont signés) est une aide précieuse, et le type d'algo à utiliser change en fonction des cas.

Je suis sûr que c'est aujourd'hui possible (pour la veille économique, par exemple, c'est mis en oeuvre), mais je ne connais pas précisément les algos employés.

Si quelqu'un a la gentillesse de compléter...

--
Rom_1

[LEK]

Merci en tous cas pour ce début de piste, je vais voir ce que je peux en tirer...

[LEK]

Bonjour,
j'ai essayé de trouvé des sources et articles montrant comment créer un pseudo googlebot ou un agent capable de traiter une page et d'en tirer l'auteur et le contenu mais... pour l'instant je ne trouve pas
Si quelqu'un à la moindre compétence dans ces domaines qu'il n'hésites surtout pas à me faire signe.