Google Research представила Agile Deliberation: ИИ сам уточняет субъективные правила.
Google Research представила Agile Deliberation, систему для создания ИИ-классификаторов, которым приходится работать с субъективными понятиями.
Например, как научить нейросеть отличать здоровую еду от нездоровой? Салат подходит, бургер нет. А фруктовый смузи с большим количеством сахара?
Обычный подход требует заранее написать подробные правила. Agile Deliberation сама находит спорные изображения и предлагает человеку решить, к какой категории их отнести. На основе ответов LLM автоматически уточняет инструкции для визуальной модели, причём без дообучения и изменения весов.
В исследовании использовали Gemini 2.5 Pro и Flash.
Результаты экспериментов
- До 11% прироста F1 относительно базового классификатора.
- На 7,5% выше F1 по сравнению с автоматическим разбиением категорий.
- Более чем на 3% выше F1 по сравнению с ручной настройкой.
- Все 18 участников исследования предпочли новый подход ручному редактированию промптов.
Google открыла исходный код и опубликовала демонстрацию в Colab.
Исследование: https://research.google/blog/agile-deliberation-how-ai-helps-humans-define-the-gray-areas/
Ещё новости:
