NLTK ve dil algılama

Question

Bir metnin NLTK kullanılarak yazılmış bir dili nasıl algılayabilirim?

Gördüğüm örnekler nltk.detect kullanıyor, ancak bu yazılımı Mac'ime yüklediğimde bu paketi bulamıyorum.

Answer 1

Aşağıdaki kod parçacığına rastladınız mı? http://groups.google.com/group/nltk-users/browse_thread/thread/a5f52af2cbc4cfeb?pli=1&safe=active

Veya aşağıdaki demo dosyasından

english_vocab = set(w.lower() for w in nltk.corpus.words.words()) 
text_vocab = set(w.lower() for w in text if w.lower().isalpha()) 
unusual = text_vocab.difference(english_vocab) 

?

https://github.com/saffsd/langid.py

Bu ithal etmek çok basittir ve çok sayıda içerir: Bu NLTK olmasa

https://web.archive.org/web/20120202055535/http://code.google.com/p/nltk/source/browse/trunk/nltk_contrib/nltk_contrib/misc/langid.py

Answer 2

, başka Python tabanlı kütüphane ile mükemmel sonuçlar vardı kendi modelinde diller.

Answer 3

Bu kitaplık NLTK'dan değil ama kesinlikle yardımcı oluyor.

$ sudo langdetect yüklemek pip

Desteklenen Python sürümleri 2.6, 2.7, 3.x

>>> from langdetect import detect 

>>> detect("War doesn't show who's right, just who's left.") 
'en' 
>>> detect("Ein, zwei, drei, vier") 
'de' 

https://pypi.python.org/pypi/langdetect?

P.S. bu doğru her zaman işe beklemeyin .::

>>> detect("today is a good day") 
'so' 
>>> detect("today is a good day.") 
'so' 
>>> detect("la vita e bella!") 
'it' 
>>> detect("khoobi? khoshi?") 
'so' 
>>> detect("wow") 
'pl' 
>>> detect("what a day") 
'en' 
>>> detect("yay!") 
'so'