Ознакомьтесь со статье на Хабре связанной с принципами Word2Vec:

https://habr.com/ru/post/446530/

Загрузим библиотеку word2vec

Снимок экрана 2019-12-16 в 17.09.00

Создадим txt файл в который поместим текст книги «Властелин колец»:

http://lib.ru/TOLKIEN/hran_1.txt

Подключим ее:

Снимок экрана 2019-12-16 в 17.09.28

Превратим текст в вектора:

Снимок экрана 2019-12-16 в 17.18.45

Загрузим в модель наше представление текста в векторах:

Снимок экрана 2019-12-16 в 17.22.38

Посмотрим на представление слова «Фродо»

Снимок экрана 2019-12-16 в 17.31.57

Найдем слова, похожие на «Фродо»

Снимок экрана 2019-12-16 в 17.25.08

Поищем термины, которые для Горлума соотносятся как «Фродо»и «Сэм»

Снимок экрана 2019-12-16 в 17.45.45

 

Самостоятельное задание:

  1. С использованием результатов  выдаваемых word2vec ответьте на вопросы: http://www.frodo.ru/cgi-bin/tests/lotr1_test.pl

2. Что еще можно с помощью библиотеки word2vec?

 

NLP в Python

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *