Японский ИИ впервые прошел научное рецензирование со своей статьей

Японский стартап Sakana объявил о первом случае успешного прохождения научного рецензирования статьи, полностью написанной искусственным интеллектом. Система компании под названием The AI Scientist-v2 самостоятельно сформулировала гипотезы, провела эксперименты, обработала полученные данные и создала визуальные материалы. Одна из трех подготовленных статей была одобрена на семинаре при конференции International Conference on Learning Representations. Несмотря на это достижение, компания впоследствии добровольно отозвала публикацию, сославшись на уважение к правилам конференции и принципам научной открытости.

Однако заявление стартапа вызывает определенные вопросы. Сама Sakana признает наличие ошибок в работе системы, особенно при цитировании источников. Например, искусственный интеллект неправильно датировал метод, разработанный в 1997 году, указав его как публикацию 2016 года. Кроме того, статья была принята не в основную программу конференции ICLR, а на отдельный семинар, где процесс рецензирования обычно менее строгий, а рецензентами часто выступают молодые ученые.

Специалисты отмечают, что компания сама выбирала наиболее удачные работы из нескольких вариантов, созданных системой. Это говорит скорее о совместной работе человека и машины, чем о полностью самостоятельном исследовании искусственного интеллекта. Исследователь Мэтью Газдиал из Университета Альберты подчеркнул, что данный случай демонстрирует эффективность взаимодействия человека и ИИ, но не доказывает способность искусственного интеллекта к полностью автономной работе.

Майк Кук из Королевского колледжа Лондона выразил сомнения относительно серьезности экспертной оценки. По его мнению, подобные семинары обычно посвящены обсуждению трудностей и отрицательных результатов исследований, что упрощает задачу для искусственного интеллекта. ИИ может достаточно убедительно описать проблемы экспериментов, не делая при этом значимого научного вклада.

Стартап Sakana не утверждает, что их система способна создавать революционные исследования. Основной целью эксперимента была проверка качества научных текстов, созданных искусственным интеллектом. Компания подчеркивает необходимость разработки четких правил для использования ИИ в научной сфере, чтобы искусственный интеллект не просто писал статьи для прохождения рецензирования, а вносил реальный вклад в развитие науки.

ICLR — это ежегодная конференция, посвященная исследованиям в области машинного обучения и искусственного интеллекта, особенно глубокого обучения. Мероприятие отличается открытым процессом рецензирования, при котором обсуждения между авторами и рецензентами доступны для публичного ознакомления.