Начать стоит от печки, то есть с постановки задачи. Откуда берется сама задача word embedding?
_Лирическое отступление:_ К сожалению, русскоязычное сообщество еще не выработало единого термина для этого понятия, поэтому мы будем использовать англоязычный.
Сам по себе embedding — это сопоставление произвольной сущности (например, узла в графе или кусочка картинки) некоторому вектору.
![image][1]

[Читать дальше →][2]

[1]: https://qph.ec.quoracdn.net/main-qimg-3e812fd164a08f5e4f195000fecf988f
[2]: https://habrahabr.ru/post/329410/?utm_source=habrahabr&utm_medium=rss&utm_campaign=feed_posts#habracut