Алгоритм градиентного спуска с замкнутым контуром, примененный к функции Розенброка

МЕНЮ


Главная страница
Поиск
Регистрация на сайте
Помощь проекту
Архив новостей

ТЕМЫ


Новости ИИРазработка ИИВнедрение ИИРабота разума и сознаниеМодель мозгаРобототехника, БПЛАТрансгуманизмОбработка текстаТеория эволюцииДополненная реальностьЖелезоКиберугрозыНаучный мирИТ индустрияРазработка ПОТеория информацииМатематикаЦифровая экономика

Авторизация



RSS


RSS новости


Ребята из австралийского национального университета представили новый метод адаптивного демпфирования для инерционной градиентной системы, который находит применение в качестве алгоритма градиентного спуска для неограниченной оптимизации. На примере невыпуклой функции Розенброка они показали улучшение по сравнению с существующими методами градиентной оптимизации на основе импульса.

Также, используя анализ устойчивости Ляпунова, они продемонстрировали производительность версии алгоритма с непрерывным временем. Используя численное моделирование, они рассмотрели производительность его дискретно-временного аналога, полученного с помощью симплектического метода дискретизации Эйлера.

Ссылка на статью: https://arxiv.org/pdf/2108.12883v1.pdf

Ссылка на GitHub: https://github.com/SubhransuSekharBhattacharjee-01/Whiplash


Источник: github.com

Комментарии: