ScientistTwo от Google: ИИ-агент сам проводит цикл ML-исследований и улучшает человеческие решения.
Мы изучили, как работает ScientistTwo от Google. Это ИИ-агент, который самостоятельно проводит полный цикл ML-исследования: предлагает гипотезы, пишет код, запускает эксперименты и проверяет, какие изменения действительно улучшают результат. Затем он убирает бесполезные компоненты, готовит статью и дорабатывает исследование по замечаниям ИИ-рецензентов.
Найденное решение становится отправной точкой для следующего раунда. Система может улучшить человеческий метод, а затем продолжить улучшать собственную разработку.
Авторы оценили ScientistTwo на 107 задачах из работ ICLR, ICML и NeurIPS. По их данным, в 86 задачах (80,4%) решения превзошли исходные человеческие результаты. Средний относительный прирост в успешных задачах составил 25,2%.
Задачи и критерии оценки задают люди. ScientistTwo автоматизирует поиск решений и экспериментальную проверку, а рецензирование внутри цикла выполняют агенты.
Подробнее о проекте можно узнать на официальной странице ScientistTwo.

