Русская Википедия:Векторное представление слов

Материал из Онлайн справочника
Перейти к навигацииПерейти к поиску

Векторное представление (векторное вложение слов или вложение слов) — общее название для различных подходов к моделированию языка и обучению представлений в обработке естественного языка, направленных на сопоставление словам (и, возможно, фразам) из некоторого словаря векторов из <math>\R^{n}</math> для <math>n</math>, значительно меньшего количества слов в словаре. Теоретической базой для векторных представлений является дистрибутивная семантика.

Существует несколько методов для построения такого сопоставления. Так, используют нейронные сети[1] , методы снижения размерности в применении к матрицам совместных упоминаний слов (word co-occurrence matrices)[2] и явные представления, обучающиеся на контекстах упоминаний слов (explicit representations)[3].

ПродемонстрированоШаблон:Кем, что векторные представления слов и фраз способны значительно улучшить качество работы некоторых методов автоматической обработки естественного языка (например, синтаксический анализ[4] и анализ тональности[5]).

Ссылки

Шаблон:Примечания

Шаблон:Перевести