Линейная регрессия
Модель линейной регрессии - определение, предположения, достоинства и недостатки.
Аналитическое решение для линейной регрессии
Метод наименьших квадратов (МНК-оценка)-аналитический вывод оптимальных значений для коэффициентов линейной регрессии.
Регуляризация в линейной регрессии
Регуляризация в линейной регрессии. Методы регуляризации и их свойства.
Аналитическое решение для гребневой регрессии
Аналитический вывод решения для коэффициентов гребневой регрессии.
Линейный ансамбль моделей
Построение ансамбля моделей через их линейную комбинацию. Способы регуляризации ансамбля.
Регрессия опорных векторов
Метод регрессии опорных векторов - определение, интуиция, обобщение через ядра Мерсера (kernel trick). Опорные и неинформативные объекты.
Orthogonal matching pursuit
Метод orthogonal matching pursuit с последовательным включением признаков в модель линейной регрессии.
Локально-линейная регрессия
Локально-линейная регрессия (LOWESS) - определение и свойства.