Британский стартап Worldmodeldata намерен использовать данные из видеоигр для обучения моделей искусственного интеллекта, способных лучше ориентироваться в физическом мире. Компания собирает сведения о действиях игроков, включая движения стика, нажатия кнопок и спуск курка, а затем планирует превращать их в наборы данных для разработчиков.
Необходимость в таких технологиях связана с ограничениями больших языковых моделей. Они обучаются преимущественно на текстах и поэтому могут плохо справляться с задачами, где требуется точное взаимодействие с окружающими объектами: управлением автомобилем, роботизированной рукой или другой техникой. Над созданием так называемых мировых моделей работают, в частности, Фей-Фей Ли и Янн ЛеКун.
Для понимания законов физики таким системам нужны одновременно визуальная информация и данные о действиях. Например, при работе с роботизированной рукой модель должна знать не только, как выглядит производственный объект, но и с какой силой его следует захватить и каким усилием перемещать. Как отмечает Сяотянь Чжу, доцент Университета Суррея, мировым моделям необходимы причинно-следственные связи, а в интернете подобных данных крайне мало.
Worldmodeldata, консультантом которой является ЛеКун, хочет выступать посредником между игровыми студиями и лабораториями искусственного интеллекта. Стартап намерен систематизировать данные, полученные из игр, чтобы разработчикам не приходилось отдельно заключать соглашения с большим числом компаний. Генеральный директор Worldmodeldata Рея Лукас заявила журналу WIRED: «Есть миллионы отличных игр, и они всё больше похожи на реальный мир. Почему бы не взять огромный, доступный и разнообразный опыт из видеоигр и не обучить на нём искусственный интеллект?»
Исследователи предполагают, что мировые модели, как и большие языковые модели, смогут улучшать результаты по мере увеличения объёма обучающих данных. Некоторые лаборатории уже получают такие сведения, устанавливая датчики на людей и роботов, однако этот способ даёт ограниченный объём информации и не охватывает редкие ситуации. Партнёр инвестиционной компании Khosla Ventures Николь Френкель, чья фирма вложилась в General Intuition, подчеркнула, что одних повторяющихся демонстраций недостаточно для воспроизведения хаотичности реального мира.
По замыслу Worldmodeldata, игровые пространства с трёхмерной графикой и действиями пользователей могут обеспечить нужное разнообразие, включая нестандартные сценарии. Френкель отметила, что именно такие случаи особенно важны из-за высокой цены ошибки при эксплуатации автомобилей, самолётов, дронов, погрузчиков и автономных роботов. Стартап сообщил о лицензировании почти 1 млн часов данных от создателей популярных видеоигр, но названия студий Лукас раскрывать не стала; в дальнейшем компания рассчитывает создать возможность вознаграждать и отдельных игроков.