В научном журнальчике Nature выпустили статью с описанием крайних достижений нейросети MuZero, развитием которой занимается компания Deepmind. Программка научилась идиентично отлично играться в шахматы и компьютерные игры. При всем этом ей даже не пришлось разъяснять правила. MuZero обучается без помощи других, просто следя за ходом игры.
Нейросети от Deepmind стали известны миру в 2016 году, когда AlphaGo в 4 партиях из 5 одолела 1-го из наисильнейших игроков мира в го. Ранее эта китайская настольная игра числилась очень сложной для компов. Наиболее мощная версия нейросети, AlphaZero, научилась совершенствоваться без роли человека. Программка игралась сама с собой, осваивая одну игру за иной.
В методе MuZero употребляется подход, аналогичный AlphaZero. Для обучения нейросеть играет сама с собой. Также её противником становилась программка AlphaZero. Всего за 12 часов занятий и 800 млн игровых сессий MuZero достигнула уровня AlphaZero в шахматах, го и остальных настольных играх, также затмила все имеющиеся нейросети, не считая Agent57, при прохождении Pac-Man и остальных компьютерных игр.
Источник: