Nnets [Neural Networks] — старейший в России культовый ИИ-журнал о нейросетях, искусственном интеллекте и роботах.

Ежедневные новости и аналитика нейромира.

Авторские материалы, исследования, обзоры и подборки.

Будущее уже здесь!

Локальный Qwen3-TTS клонировал голос по 12-секундному семплу, но английский получил русский акцент.

Локальный агент развернул модель Qwen3-TTS 1.7B Base в 8-битном режиме через MLX Audio и клонировал голос по 12-секундному образцу. Голос получился очень похожим на оригинал.

Что пошло не так

Вместе с похожестью модель сохранила фонетику русской речи, поэтому в английской озвучке появился заметный русский акцент.

После автоперевода изменилась длина аудиодорожек. Чтобы растянуть звук до длины видеоряда, агент начал его замедлять. Липсинком не занимались, поэтому звук живёт немного отдельно от картинки.

Итог

Английская озвучка получилась грустной и слегка подвыпившей, будто персонаж из голливудской драмы. Если доработать скорость звука и настройки агента, можно добиться приемлемого результата.

Мы считаем главным открытием то, что даже небольшие локальные модели неплохо клонируют голос.

Этот пост Вконтакте:

Ещё новости:

Появился словарь слов, которых ещё нет, но они скоро понадобятся.
Превращаем обычное фото в выразительный арт-постер с помощью нейросети.
Старый ноутбук MSI стал настенным сервером умного дома благодаря Claude.
Google Meet научился переводить речь на 63 языка в реальном времени.
В США компания Tau Robotics запустила подписку на домашних роботов-уборщиков!
Роботы с ИИ протыкают рыбам мозг ради вкуса: странный стартап Shinkei поддержал Питер Тиль.
Хоакин Феникс снялся в тизере умных очков Gentle Monster с Gemini от Google.
ИИ может выдавать разные результаты даже при одинаковом обучении: учёные нашли причину.
OpenAI добавила поддержку исходящих телефонных звонков в GPT-Live API.
Pydantic AI: как исключения ModelRetry и ToolFailed управляют поведением модели.