21. Введение в стохастические градиентные методы. Батч, эпоха. Сходимость SGD. МФТИ 2024
Лекция курса "Методы оптимизации". МФТИ 2023 - 2024 уч. год.
Сайт с материалами курса mipt23.fmin.xyz
Видео 21. Введение в стохастические градиентные методы. Батч, эпоха. Сходимость SGD. МФТИ 2024 канала Даня Меркулов
Сайт с материалами курса mipt23.fmin.xyz
Видео 21. Введение в стохастические градиентные методы. Батч, эпоха. Сходимость SGD. МФТИ 2024 канала Даня Меркулов
Показать
Комментарии отсутствуют
Информация о видео
Другие видео канала
Семинар 9. Двойственность. Приложения. МФТИ. 2022Церковь Георгия Победоносца на Ликабетус.4.1 Выпуклые функции. Неравенство Йенсена. μ-Сильно выпуклые функции. Условие PL. МФТИ 202325. Метод двойственного подъёма. Метод модифицированной фун. Лагранжа. Dual decomposition. МФТИ 20245. Сопряженные функции. Преобразование Лежандра. Сопряженная норма. МФТИ 2023Методы Оптимизации. 6 лекцияМетоды Оптимизации. 7 лекцияСеминар 17. Субградиентный спуск. Оценки сходимости. Правило Армихо. Неточный поиск. МФТИ. 2022Мсовет 310.Линейное программирование. Симплекс метод. MIP. Приложения: логистика, чувствительность МФТИ 2023Методы Оптимизации. 11 лекцияМетоды Оптимизации. Семинар 18. Примеры применения методов градиентного спуска.Семинар 19. Введение в метод Ньютона. МФТИ. 202224. Методы оптимизации в непрерывном времени. Gradient Flow. Стох. и ускоренная версии. МФТИ 2024Методы оптимизации. Семинар 9. Введение в двойстенность.2.2 Автоматическое дифференцирование. Forward\Reverse Mode. Вычислительный граф. МФТИ 202316 Ускоряем градиентные методы.Метод тяжелого шарика. Метод Нестерова. Momentum. МФТИ 2023Семинар 6. Субдифференциал. Субградиент. МФТИ. 2022Семинар 12. Двухфазный симплекс метод. Портфельная теория Марковица. Практика. МФТИ. 2022Семинар 10. Связь двойственности Фенхеля и Лагранжа. Слейтер, ККТ, невып. сильн.двойств. МФТИ 2022.Семинар 23. Заглядываем внутрь нейронной сети. Идеи адаптивных стохастических методов. МФТИ. 2022