📄️ Эмбеддинги слов
Введение, что такое эмбеддинг слов, символов и любых дискретных объектов простыми словами.
📄️ Совстречаемость слов
Обучение эмбеддингов слов с помощью счётчиков совстречаемости слов и используя меру PPMI.
📄️ Латентный семантический анализ
Снижение размерности эмбеддингов слов и документов с помощью метода Latent Semantic Analysis (LSA).
📄️ Word2vec
Модели Word2vec (CBOW и SkipGram) и модель fastText для построения эмбеддингов слов текста.
📄️ Оптимизация Skip-Gram
Вычислительно эффективные способы настройки модели Word2Vec на примере SkipGram, используя Hierarchical SoftMax и негативное сэмплирование (negative sampling).
📄️ Эмбеддинги параграфов
Базовые методы для построения эмбеддингов предложений, параграфов и документов целиком.