Бесплатный XTTS vs HeyGen: Какой Сервис для Клонирования и Перевода Голоса Лучше? #ai #нейросети #ии

Оба сервиса позволят воспроизвести ваш голос и использовать его для создания голосовых записей на различных языках.Основное отличие заключается в том, что XTTS полностью бесплатен. Он поддерживает работу на английском, русском и многих других языках. HeyGen платный, с тестовым периодом. Переводит видео с русского, на русский пока нет. Его преимущество в том, что при переводе он не только имитирует голос, но и подстраивает движение губ.

XTTS
➕ Бесплатный
➕ Поддерживает русский
➕ Можно клонировать голос на разные языки, используя аудиозапись от 6 секунд
➕ Открытый код на Github
➕ Есть демо-версия на Hugging Face
➖ Проигрывает HeyGen в клонировании голоса

HeyGen
➖ Платный
➕ Тестовый период. За один доступный кредит вы можете протестировать видео длинной от 30 до 50 сек.
➕ Перевод видео, при этом сохраняя голос диктора ➕ точная имитация соответствующих движений губ.

Пока монтировала ролик, поменяла свое мнение о HeyGen, со стороны сказали, что голос очень похож на мой. А вы как считаете? Напишите в комментариях 🤔👇🏻

[LeraGenshinDivaPlay]

Искала нейросеть для клонирования голоса и нашла XTTS благодаря Вам, вчера его использовала, но сегодня он почему-то не работает и просто выдаёт ошибку... Никто не знает, что случилось? Раньше загружала аудио уже заранее записанное, всё прекрасно было, а сейчас не получается

[highlandsdweller]

Огромное спасибо за тесты, очень нужная информация. Проверил тоже. Получилось норм.
В общем, huggingface озвучивает своим голосом, и подгоняет какие-то особенности моего голоса. Жаль только очень малое количество знаков.
Кстати, если хотите зарабатывать в ютубе, то надо менять тему и вещать на буржунет))

[vadimmakarov]

есть какой-то +- опенсорс аналог перевода-дубляжа по типу того что делает elevenlabs? именно с сохранением интонации исходной реплики и контроль над таймингом

[burinis_and_his_sims_world_tv]

у меня не получается: выдаёт ошибку "It appears something wrong with reference, did you unmute your microphone?"

[shandy]

Есть у кого чувство будто бы через микрофон говорит женоподобный мальчик, а в записи все нормально, девичий голос?))

[CryptoGamingPool]

Ну это просто демо ведь. Надо качать XTTS и устанавливать через командную строку локально

[supersonicunitedsupersonic]

автор походу основную модельку делал через англ. претрейн, уж оч странный акцент у неё в голосе

[VOKTRECH]

Серый волк, ты нас не проведешь,
Твой голос на мамин совсем не похож...
(_Волк и семеро козлят_)