Практика 3. Метод градиентного спуска

Практика 3. "Метод градиентного спуска" в курсе "Введение в машинное обучение", который читается на факультете ИВТ в ЯрГУ им П.Г. Демидова В практике рассматривается метод градиентного спуска на примере применения его к обучению модели линейной регрессии, рассматривается метод Ньютона, приводится наглядная интерпретация разных методов регуляризации в линейной регрессии, рассматривается метод стохастического градиентного спуска. 00:00 — Мотивация и описание градиентного спуска 09:09 — Применение градиентного спуска в задаче регрессии 16:11 — Метод Ньютона 28:51 — Геометрическое исследование итеративных методов оптимизации 35:20 — Стохастический градиентный спуск