Векторное представление ( векторное вложение слов или вложение слов ) — общее название для различных подходов к моделированию языка и обучению представлений в обработке естественного языка, направленных на сопоставление словам (и, возможно, фразам) из некоторого словаря векторов из ${\displaystyle \mathbb {R} ^{n}}$ для ${\displaystyle n}$ , значительно меньшего количества слов в словаре. Теоретической базой для векторных представлений является дистрибутивная семантика .

Существует несколько методов для построения такого сопоставления. Так, используют нейронные сети , методы снижения размерности в применении к матрицам совместных упоминаний слов (word co-occurrence matrices) и явные представления, обучающиеся на контекстах упоминаний слов (explicit representations) .

Продемонстрировано ^{[ кем? ]} , что векторные представления слов и фраз способны значительно улучшить качество работы некоторых методов автоматической обработки естественного языка (например, синтаксический анализ и анализ тональности ).

Ссылки