Pythonдо Gensim деген эмне?
Pythonдо Gensim деген эмне?

Video: Pythonдо Gensim деген эмне?

Video: Pythonдо Gensim деген эмне?
Video: Common Words in PDF files: Let Python do the Reading 2024, Ноябрь
Anonim

Gensim заманбап статистикалык машина үйрөнүү аркылуу көзөмөлсүз тема моделдөө жана табигый тилди иштетүү үчүн ачык булак китепкана болуп саналат. Gensim жылы ишке ашырылат Python жана Cython.

Муну эске алып, Gensim Word2Vec деген эмне?

1. Киргизүү Word2vec . Word2vec эки катмарлуу нейрон тармагын колдонуу менен сөздү киргизүүнү үйрөнүүнүн эң популярдуу ыкмаларынын бири. Анын кириши текст корпусу жана анын чыгышы векторлордун жыйындысы. үчүн эки негизги окутуу алгоритми бар word2vec , бири сөздөрдүн үзгүлтүксүз баштыгы (CBOW), экинчиси skip-gram деп аталат.

Кошумча, Gensim жыйынтыктоо кантип иштейт? Окуу куралы: автоматтык жыйынтыктоо колдонуу Gensim . Бул модуль тексттен бир же бир нече маанилүү сүйлөмдөрдү алуу менен берилген текстти автоматтык түрдө жыйынтыктайт. Ушундай эле жол менен, ал болот ошондой эле ачкыч сөздөрдү чыгарыңыз.

Кийинчерээк, кимдир бирөө суроо бериши мүмкүн, мен кантип Gensimди Pythonго импорттосом болот?

5 Жооптор. Алгач NumPy, андан кийин SciPy, анан орнотуу керек Gensim (сизде мурунтан эле бар деп ойлосоңуз Python орнотулган). мен колдонгон Python 3.4 версиясын колдонуу менен SciPy орнотуу оңой деп эсептейм. ЭСКЕРТҮҮЛӨР: Pip сиздин чөйрө өзгөрмөлөрүңүздө экенин текшериңиз (чөйрөңүздүн өзгөрмөсүнө C:python34scripts кошуңуз).

Gensim корпусу деген эмне?

Кийинки маанилүү объект менен иштөө үчүн таанышуу керек gensim болуп саналат Корпус (Сөз баштыгы). Башкача айтканда, бул а корпус ар бир документте id сөзүн жана анын жыштыгын камтыган объект. деп ойлосоңуз болот генсимдики Документ-Терм матрицасына эквиваленттүү.

Сунушталууда: