Fable 5.1 обошёл другие нейросети в тесте по религиозным вопросам.
Исследователи из HalachaBench провели тест для десятков нейросетей: им дали ответить на 60 вопросов по религии без доступа к интернету, а результаты оценивали по баллам.
Локальные модели не смогли показать высокие результаты: выше 11 баллов не поднялась ни одна. Результат модели Fable 5.1 составил 79,7 из 100, тогда как проходной балл для людей на этом экзамене составляет 60.
Ещё новости:
