ИИ обошел ученых в оценке качества научных публикаций

© Magnific.com

Рецензии на научные статьи, подготовленные искусственным интеллектом, оказались полезнее экспертных. Об этом пишет Гарвардский университет.

Ученые сравнили 134 отзыва специалистов на 124 научные рукописи с рецензиями, созданными нейросетью Claude Opus 4.8. Эксперты получали оплату за подробный разбор обезличенных работ. При этом 88 процентов из 74 опрошенных авторов высоко оценили качество полученных от специалистов замечаний.

Рецензии ИИ проверяли в двух вариантах: с использованием стандартных инструкций и с доступом к интернет-поиску. Их оценивали три бывших редактора научных журналов, которые не знали, кем были подготовлены отзывы. В 26 из 30 случаев они отдали предпочтение текстам нейросети. Другая модель, GPT-5.5, выбрала рецензии ИИ во всех сравнениях.

Дополнительная проверка показала, что в отзывах нейросети доля ошибочных утверждений о содержании рукописей составила 5,5 процента против 15,9 процента у экспертов. Авторы также не обнаружили вымышленных источников в рецензиях, подготовленных с доступом к поиску. При этом исследователи предупредили, что массовое применение ИИ может привести к преобладанию общепринятых научных подходов и сокращению разнообразия идей.