Британский стартап Worldmodeldata намерен использовать данные из видеоигр для обучения моделей, способных понимать физический мир. Компания собирает сведения о действиях игроков и происходящем в виртуальной трёхмерной среде, включая движения стика, нажатия кнопок и спуск курка. По замыслу разработчиков, такие материалы могут помочь искусственному интеллекту освоить управление роботами, автомобилями и другими устройствами.
Интерес к так называемым мировым моделям связан с ограничениями больших языковых моделей. Они обучаются преимущественно на текстах и поэтому могут быть недостаточно подготовлены к задачам, где требуются точность и тонкое взаимодействие с физическими объектами. Над этим направлением, в частности, работают Фэй-Фэй Ли и Янн ЛеКун.
Для понимания физики мировым моделям нужны одновременно визуальные данные и сведения о действиях. Например, при обучении управлению роботизированной рукой важны видеозаписи производственной площадки, сила захвата предмета и крутящий момент при его перемещении. Однако единого массива подобных данных, сопоставимого с огромными текстовыми корпусами для языковых моделей, пока нет.
«Для мировых моделей нужны причина и следствие. В интернете у нас очень мало данных такого типа», — приводит WIRED слова Ксиатяня Чжу, доцента Университета Суррея, специализирующегося на искусственном интеллекте. Worldmodeldata, консультантом которой выступает ЛеКун, хочет объединять и систематизировать данные, полученные от игровых студий, чтобы исследовательским лабораториям не приходилось заключать отдельные соглашения с большим числом компаний.
Глава Worldmodeldata Рея Лукас считает, что видеоигры дают доступ к большому числу разнообразных сценариев. «Есть миллионы отличных игр, и они всё больше похожи на реальный мир. Почему бы не взять огромный, богатый и разнообразный опыт видеоигр и не обучить на нём искусственный интеллект?» — сказала она WIRED.
Стартап утверждает, что уже лицензировал почти 1 млн часов данных от создателей популярных видеоигр, однако названия студий Лукас не раскрыла. Компания рассчитывает, что игровые материалы помогут воспроизводить редкие и сложные ситуации, которые трудно получить при ручном сборе данных с участием людей и роботов. В дальнейшем Worldmodeldata также планирует создать механизм вознаграждения для отдельных игроков.