Компактная LLM TwIL-LM3-Pro на 3,66 млрд параметров приблизилась к Qwen3-8B в формальной логике.
Компания webAI представила TwIL-LM3-Pro, компактную LLM на 3,66 млрд параметров, основанную на IBM Granite 4.2 3B. По тестам разработчиков, новинка приближается к Qwen3-8B по сводной метрике формальной логики.
Среди заявленных результатов:
- сопоставимые с Qwen3-8B результаты по сводной метрике формальной логики;
- превосходство над публичной VibeThinker-3B во всех шести проверенных направлениях;
- 95,4% на логической подвыборке BIG-Bench Hard;
- 95% на математических задачах SVAMP.
Квантованная версия Q4_K_M занимает 2,09 GiB. Согласно карточке модели, она запускается на CPU или видеокарте с 4 ГБ VRAM. При локальном использовании запросы обрабатываются на устройстве пользователя, без оплаты облачного API.
За такими результатами стоит многоэтапное дообучение: логические задачи, разные траектории рассуждений, объединение весов и обучение с подкреплением.
Отметим, что есть нюансы: опубликованные оценки получены на BF16, качество Q4 отдельно не измерено. Лицензия некоммерческая.
Такую модель стоит проверить, чтобы понять, какая доля пользовательских запросов действительно требует самой мощной модели.
Подробнее о модели: https://huggingface.co/webAI-Official/TwIL-LM3-Pro
Ещё новости:
