Discussion :

[mmsoaihua]

Salut à tous.
Il y a une chose avec qui je me casse la tête.

Je cherche une manière de détecter la langue naturelle. En fait, le chose le plus important est juste si la texte est écrit en anglais ou pas. La qualité de la détection est importante.
Je suis commence par nltk et nltk stopwords. La problème est que nltk reconnaître pas les langues comme japonais, chinois, vietnamienne. Alors, quand un texte est écrit dans japonais nltk peut détecter la langue comme anglais.

Avez vous un conseil?

[wiztricks]

Salut,

Avez vous un conseil?

C'est un sujet d'algo. (comment détecter la langue d'n texte) qui peut être (ou pas) réalisé par une bibliothèque externe...
Et si c'est le cas, votre moteur de recherche favori devrait vous indiquer ce que sait faire nltk, chardet, ....

- W

[mmsoaihua]

Salut,



C'est un sujet d'algo. (comment détecter la langue d'n texte) qui peut être (ou pas) réalisé par une bibliothèque externe...
Et si c'est le cas, votre moteur de recherche favori devrait vous indiquer ce que sait faire nltk, chardet, ....

- W

Salut wiztricks,
J'essaie de le réaliser avec python, mais peut-être t'as raison et je me suis trompé de sujet. Le grand problème est que le documentation est en anglais. Je vais chercher le documentation de chardat. Merci pour la réponse.