Bonjour,
je voudrais mettre en place un moteur de recherche thématique pour indexer tous les sites d'actualités
pas mon intension de concurrencer google. que me conseillez vous comme outil d'indexation

je connais de vu scrapy, perl est ce des crawlers ?

merci de vos infos