Российские ученые создали более эффективный алгоритм для адаптации и обучения искусственного интеллекта

Метод назвали ReBRAC. Он обучает ИИ-агентов в четыре раза быстрее и на 40% качественнее предыдущих аналогов.

Российские ученые из лаборатории исследований искусственного интеллекта Tinkoff Research разработали новый алгоритм для обучения ИИ, который требует меньше вычислительных ресурсов.

РЕКЛАМА – ПРОДОЛЖЕНИЕ НИЖЕ

Разработка российских ученых в области повышения эффективности алгоритмов обучения ИИ может способствовать преодолению технологического и цифрового разрыва в мире между разными странами: более эффективные алгоритмы требуют меньше вычислительных ресурсов. Страны с ограниченными вычислительными мощностями смогут создавать и развивать передовые технологии, адаптировать ИИ под конкретные прикладные задачи, существенно экономя на дорогостоящих экспериментах с ИИ.

Визуализация качества альтернативных подходов и алгоритма ReBRAC
Визуализация качества альтернативных подходов и алгоритма ReBRAC
Архивы пресс-службы

Новый метод исследователи назвали ReBRAC. По словам ученых, его производительность обусловлена интеграцией в предыдущий метод BRAC четырех компонентов, которые ранее считались научным сообществом второстепенными: увеличение глубины нейросетей, регуляризация актора и критика, увеличение эффективного горизонта планирования и использование нормализации слов.

Визуализация вариантов тестирования алгоритма: поиск цели в лабиринте (Ant), скорость бега (Halfcheetah, Hopper, Walker2d), задачи для робокистей — правильно держать ручку (Pen), открыть дверь, забить гвоздь, переместить объект
Визуализация вариантов тестирования алгоритма: поиск цели в лабиринте (Ant), скорость бега (Halfcheetah, Hopper, Walker2d), задачи для робокистей — правильно держать ручку (Pen), открыть дверь, забить гвоздь, переместить объект
Архивы пресс-службы
РЕКЛАМА – ПРОДОЛЖЕНИЕ НИЖЕ

Тестирование показало, что новый метод решает проблему дообучения искусственного интеллекта, на ходу адаптируя его к новым условиям. Ранее одним из самых быстрых из подобных алгоритмов считался SAC-RND, также созданный учеными из Tinkoff Research.

В этом месяце ReBRAC представили на 37-й научной конференции NeurIPS, которая посвящена искусственному интеллекту и машинному обучению.