10. Ускоряем градиентные методы.Метод тяжелого шарика. Метод Нестерова. Momentum. ФКН. 2024
Лекция курса Методы Оптимизации в Машинном Обучении. ФКН.
hse24.fmin.xyz
Видео 10. Ускоряем градиентные методы.Метод тяжелого шарика. Метод Нестерова. Momentum. ФКН. 2024 канала Даня Меркулов
hse24.fmin.xyz
Видео 10. Ускоряем градиентные методы.Метод тяжелого шарика. Метод Нестерова. Momentum. ФКН. 2024 канала Даня Меркулов
Показать
Комментарии отсутствуют
Информация о видео
Другие видео канала
Семинар 9. Двойственность. Приложения. МФТИ. 2022Церковь Георгия Победоносца на Ликабетус.4.1 Выпуклые функции. Неравенство Йенсена. μ-Сильно выпуклые функции. Условие PL. МФТИ 202325. Метод двойственного подъёма. Метод модифицированной фун. Лагранжа. Dual decomposition. МФТИ 20245. Сопряженные функции. Преобразование Лежандра. Сопряженная норма. МФТИ 2023Методы Оптимизации. 6 лекцияМетоды Оптимизации. 7 лекцияСеминар 17. Субградиентный спуск. Оценки сходимости. Правило Армихо. Неточный поиск. МФТИ. 2022Мсовет 310.Линейное программирование. Симплекс метод. MIP. Приложения: логистика, чувствительность МФТИ 202313 Градиентный спуск. Введение и интуиция. Наискорейший спуск. МФТИ 2023Методы Оптимизации. 11 лекцияМетоды Оптимизации. Семинар 18. Примеры применения методов градиентного спуска.Семинар 19. Введение в метод Ньютона. МФТИ. 202224. Методы оптимизации в непрерывном времени. Gradient Flow. Стох. и ускоренная версии. МФТИ 2024Методы оптимизации. Семинар 9. Введение в двойстенность.2.2 Автоматическое дифференцирование. Forward\Reverse Mode. Вычислительный граф. МФТИ 20238. Двойственная задача. Two-way partitioning problem. Проекция на вероятностный симплекс. МФТИ 20236. Субградиент. Субдифференциал. Теоремы Моро-Рокафеллара, Дубовицкого-Милютина. МФТИ 202316 Ускоряем градиентные методы.Метод тяжелого шарика. Метод Нестерова. Momentum. МФТИ 2023Семинар 6. Субдифференциал. Субградиент. МФТИ. 2022