Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

ElevenLabs выпустила Eleven Realtime v1: готовый голосовой агент с версиями Mini и Max.

ElevenLabs представила готового голосового агента Eleven Realtime v1. Распознавание, очередность реплик, рассуждение и озвучка работают одной системой, поэтому собирать цепочку из отдельных сервисов не нужно. Внутри это каскад моделей, настроенных работать вместе.

Версии

Доступны две версии:

  • Mini для обычных разговоров;
  • Max для сложных сценариев с вызовом инструментов.

Совместимость

API совместим с OpenAI Realtime. Можно оставить SDK OpenAI и направить его на адрес ElevenLabs с ключом сессии и именем модели. Работает только по WebSocket, поэтому захват и воспроизведение звука придётся подключать самостоятельно. Поддерживается больше 90 языков, а библиотека насчитывает больше 17 тысяч голосов.

Результаты тестов

По замерам Artificial Analysis Max почти безошибочно отвечает голосом на вопросы Big Bench Audio и начинает говорить раньше всех моделей с похожей точностью, включая GPT-Realtime-2 и Gemini 3.1 Flash Live. Mini в рассуждениях заметно слабее, зато немного впереди на Full-Duplex-Bench, где проверяют паузы и перебивания. С инструментами Max тоже сильнее. В тесте AA работа обеих моделей обошлась в $4,80 в пересчёте на час входящего аудио.

ElevenLabs блокирует доступ с российских IP.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.