ИИ-алгоритм Dreamer, разработанный исследователями Google DeepMind совместно с учёным из Университета Торонто, научился самостоятельно улучшать свои навыки, осваивая Minecraft за считанные дни. Об этом пишет SecurityLab со ссылкой на журнал Nature.
Dreamer достиг уровня эксперта всего за девять дней без предварительной подготовки – ему не объясняли, как играть, а просто задали рамки возможных действий и ввели систему поощрений за поиск алмазов.
В ходе эксперимента Dreamer помещался в игровую среду Minecraft, где каждый игровой сеанс длился всего 30 минут. После этого игра перезапускалась в совершенно новом виртуальном мире — с другими ландшафтами, ресурсами и условиями. Несмотря на такие ограничения, алгоритм быстро учился: он представлял себе будущее, в котором уже достиг всех целей, и концентрировался только на действиях, ведущих к этому результату. Суть в том, что Dreamer учится не копируя чью-то стратегию, а экспериментируя и осмысленно прокладывая путь к успеху.
Такие эксперименты позволяют понять, как заставить ИИ адаптироваться, учиться и достигать целей в меняющихся условиях. А это уже серьёзный шаг в сторону роботов, которые смогут справляться с задачами в реальном мире без постоянного надзора и вмешательства.
Контекст
- Депутаты Мажилиса приняли в работу законопроект «Об искусственном интеллекте» и сопутствующие поправки. Ещё до его презентации в нижней палате депутат Мажилиса Екатерина Смышляева опубликовала так называемый «скелет» законопроекта, в котором изложены основные новеллы. Согласно представленному документу, системы искусственного интеллекта планируют разделить на три категории: вспомогательные (помощники), полуавтономные и автономные системы. Последние принимают решения вне зависимости от заранее заданных параметров и не поддаются контролю со стороны владельца; создавать и выпускать их в обращение в Казахстане могут запретить.
