После демонстрации игр Шейн Легг выступил с докладом, основанным на его диссертации, где он описал разновидность программных агентов, или ботов, которые способны учиться решать новые задачи в любой среде. Влад Мних и его команда создали программы, которые могли обучаться новым правилам поведения в таких играх, как Breakout и Space Invaders, и то, что предложил Легг, было расширением этой деятельности за пределы игровой сферы – в более сложные виртуальные миры, а также и в реальный мир. Подобно тому как бот может научиться ориентироваться в игре Breakout, робот-слуга может научиться ориентироваться в гостиной или беспилотный автомобиль может научиться ориентироваться в населенном пункте. И примерно таким же образом один из таких ботов мог бы научиться ориентироваться в английском языке. Это гораздо более сложные проблемы. Игра – это замкнутая вселенная, где награды четко определены. Есть старт, и есть финиш. Реальный мир намного сложнее, и награды в нем труднее определить, но это тот путь, который компания DeepMind наметила себе. «Диссертация Шейна, – говорит Юстас, – заложила фундамент того, чем они занимались».
Это была цель на далекое будущее, но этот долгий путь складывается из множества маленьких шагов, которые найдут практическое применение в ближайшей перспективе. На глазах у «гуглеров» Алекс Грейвс, американец, выросший в Шотландии, продемонстрировал один из таких «шагов»: систему, которая писала «от руки». Анализируя паттерны, определяющие объект, нейронная сеть может научиться распознавать его. Если она понимает эти паттерны, она также может генерировать изображение этого объекта. Проанализировав базу написанных от руки слов, система Грейвса научилась создавать
В то время, когда Google и другие гиганты платили за каждого исследователя сотни тысяч, если не миллионы долларов, компания DeepMind платила таким, как Алекс Грейвс, меньше 100 000 долларов в год. Это было все, что она могла себе позволить. Через три года после своего основания эта крошечная компания все еще не получала дохода. Сулейман и его команда пытались создать мобильное приложение, которое бы, опираясь на искусственный интеллект, помогало пользователям не упустить из виду последние веяния моды – в офисах DeepMind на Рассел-сквер иногда среди разработчиков ИИ можно было заметить редакторов и авторов модных журналов, – а отдельная группа исследователей была близка к тому, чтобы предложить через Apple App Store новую видеоигру, но доллары пока не поступали. В то время как Грейвс и другие ученые рассказывали о своей работе гостям из Google, Хассабис понимал, что нужно что-то менять.