Уведомления
Авторизуйтесь или зарегистрируйтесь, чтобы оценивать материалы, создавать записи и писать комментарии.
Авторизуясь, вы соглашаетесь с правилами пользования сайтом и даете согласие на обработку персональных данных.
Ученые из Tinkoff Research создали алгоритм, повышающий скорость обучения ИИ в 20 раз
Специалисты лаборатории исследований искусственного интеллекта Tinkoff Research — одна из немногих исследовательских групп, которая проводит научные исследования внутри компании, а не на базе некоммерческой организации — сообщили об открытии нового алгоритма, обучающего ИИ в 20 раз быстрее. Результаты представили на 40-й Международной конференции по машинному обучению (ICML), прошедшей в конце июля на Гавайских островах.
Новый метод назвали SAC-RND — Soft Actor Critic (мягкий актор-критик), RND — Random Network Distillation (случайные нейронные сети). Как показали испытания на робототехнических симуляторах, SAC-RND от Tinkoff Research в 20 раз быстрее и на 10 процентов качественнее достигает результатов при меньшем количестве потребляемых ресурсов и времени.
В методе RND задействованы случайная и основная нейросети, при этом вторая пытается предсказать поведение первой. Важна глубина нейросети, то есть количество слоев, из которых она состоит. У основной их не должно быть меньше, чем у случайной, в противном случае она не сможет смоделировать ее поведение. Это повлечет нестабильность либо станет причиной невозможности обучения.
Ученые из Tinkoff Research выяснили, что у авторов предыдущих исследований, посвященных теме использования случайных нейросетей в обучении с подкреплением (Reinforcement learning, RL), размер случайной сети составлял четыре слоя, в то время как у основной их было два. Таким образом удалось выявить недостатки в более ранних экспериментах и выводах, из-за которых считалось, что метод RND не способен классифицировать данные — отличать действия в датасете от тех, что там не было. Специалисты Tinkoff Research исправили глубины сетей, превратив их в эквивалентные, и обнаружили, что в таком случае метод может различать данные.
Затем ученые взялись за оптимизацию метода: в итоге, за счет механизма слияния, в основе которого — модуляция сигналов и их линейное отображение, — роботы научились приходить к эффективным решениям. В предыдущих исследованиях на тему RND сигналы дополнительно не обрабатывали.
Благодаря SAC-RND появится возможность повысить уровень безопасности беспилотных автомобилей, облегчить логистические цепочки, сделать быстрее доставку и работу на складах. Помимо этого, с помощью нового метода можно будет оптимизировать процессы горения на энергетических объектах и сократить выбросы вредных веществ.
«Обучение искусственного интеллекта — процесс, требующий больших ресурсов: прежде всего вычислительных мощностей, финансовых затрат и времени. Его оптимизация позволит ускорить развитие всех областей, в которых используются ИИ-агенты, например робототехники».
Пресс-служба «Тинькофф»
Более того, разработка ученых из Tinkoff Research позволит не только сделать лучше работу узкоспециализированных роботов, ускорить исследования, в том числе в области обучения с подкреплением, но и приблизит создание универсального робота, который будет справляться с различными задачами в одиночку.
Telegram 
Дзен 
VK На окраинах нашей галактики наблюдают звезды, которые ей не принадлежат: они разогнались до таких скоростей, что преодолели притяжение Млечного Пути и летят сейчас в межгалактическое пространство. Недавно астрономы рассмотрели их траектории и обнаружили, что многие из них «родом» из крупнейшей галактики-спутника Млечного Пути — Большого Магелланова Облака. Это рождает подозрения, что в нем скрывается источник такого необычного ускорения.
Бактериофаги — вирусы, которые заражают бактерии, — приобрели множество хитроумных адаптаций к жизни внутри клетки. Джамбо-фаги среди них выделяются рекордными размерами — как вирусной частицы, так и генома. Вирусы-«слоны» даже приобрели структуру наподобие ядра эукариот, хранящую генетический материал. Авторы новой статьи в Nature узнали, как такое «ядро» импортирует из цитоплазмы бактерии необходимые вирусу белки.
Астрофизики предложили заглянуть в недра нейтронных звезд, фиксируя колебания гравитационных волн, возникающих непосредственно в момент слияния. Раскрыть важнейшую информацию о ядерных процессах внутри светил можно, поймав особый «чистый» сигнал.
Исследование сотен образцов древней ДНК показало, где и когда сформировалась общность ямной культуры, первых индоевропейцев, устроивших массовую экспансию на запад и восток и определивших облик современного человечества.
На окраинах нашей галактики наблюдают звезды, которые ей не принадлежат: они разогнались до таких скоростей, что преодолели притяжение Млечного Пути и летят сейчас в межгалактическое пространство. Недавно астрономы рассмотрели их траектории и обнаружили, что многие из них «родом» из крупнейшей галактики-спутника Млечного Пути — Большого Магелланова Облака. Это рождает подозрения, что в нем скрывается источник такого необычного ускорения.
Бактериофаги — вирусы, которые заражают бактерии, — приобрели множество хитроумных адаптаций к жизни внутри клетки. Джамбо-фаги среди них выделяются рекордными размерами — как вирусной частицы, так и генома. Вирусы-«слоны» даже приобрели структуру наподобие ядра эукариот, хранящую генетический материал. Авторы новой статьи в Nature узнали, как такое «ядро» импортирует из цитоплазмы бактерии необходимые вирусу белки.
В 2022-2025 годах страны Западной Европы попытались отказаться от природного газа из России. Автор новой работы показал, что получившиеся при этом результаты были во многом противоположны целям.
Многие предпочитают вступать в романтические отношения с людьми примерно своего возраста, но есть и пары с существенной возрастной разницей. Международная группа ученых недавно на крупной выборке людей проследила за изменениями возраста партнеров на старте отношений в разные годы жизни.
По распространению сейсмических волн в недрах Земли геологи словно «сканируют» планету и обнаруживают все больше интересных особенностей ее внутреннего строения. Недавно очередное такое исследование заставило ученых особенно внимательно рассмотреть то, что скрывается под Тихоокеанской литосферной плитой.
Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.
Понятно
Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.
Понятно
Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.
Понятно
Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.
Понятно
Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.
Понятно
Последние комментарии