Нейросеть LipDub AI для автоматического дубляжа: новый шаг в видео-переводе

Новая нейросеть LipDub AI, ранее доступная ограниченному кругу пользователей, теперь открыта для всех. Она способна переозвучивать видео на 40 языков, включая русский, и синхронизировать движения губ персонажей с новым аудио. Ключевая особенность – возможность клонирования голоса говорящего, что позволяет сохранить его тембр при переводе, делая дубляж более естественным.
Нейросеть LipDub AI для автоматического дубляжа: новый шаг в видео-переводе
Изображение носит иллюстративный характер

Сервис не только переводит речь, но и синхронизирует артикуляцию, что позволяет использовать его даже на вымышленных языках, таких как валирийский. Пользователи могут загружать готовые аудиофайлы и настраивать соответствие губ и звука. Кроме того, есть функция озвучивания текста до 1000 символов с сохранением оригинального голоса, требующая 30-секундного видео для клонирования.

LipDub AI уже применялся в рекламе, например, для создания португальской версии ролика с Уиллом Смитом. Сервис позволяет обрабатывать минутные видео в разрешении 1080p. Для ознакомления предоставляются 50 бесплатных кредитов, при этом перевод видео стоит 10, а клонирование голоса – 25 кредитов.

Стоимость подписки на LipDub AI начинается от 149 долларов в месяц. Несмотря на это, сервис открывает новые возможности для создателей контента, хотя на рынке уже есть конкуренты, предлагающие аналогичные возможности в более доступном ценовом диапазоне. Подобные технологии могут быть полезны и в YouTube для премиум-подписчиков.


Новое на сайте

20959Что известно о предупреждении mSecure и какие меры принять? 20957Что делать администраторам cPGuard после взлома канала обновлений? 20956Бэкдор в телевизоре: как Google остановила сеть из 1,3 млн Android-устройств 20955Кто может получить доступ к кошелькам через плагин CryptoPayment Gateway? 20954Критическая уязвимость Siemens IoT2050 открыла путь к удалённым командам 20953Взлом Chainstack: под угрозой оказались данные клиентов и хеши паролей 20952Четыре проверки, которые помогают найти уязвимости с реальным риском 20951Две уязвимости Barracuda открывают путь к root-доступу 20950Почему устаревшие Synology NAS снова оказались мишенью вымогателей? 20949Старая техника Apple получила заплатку для опасной уязвимости 20948Как три уязвимости открыли ShinyHunters путь к серверам PeopleSoft? 20947Может ли ИИ сам собрать уязвимости в работающий взлом? 20946Уязвимость CVSS 10.0 в LXD и MicroCloud позволяет выдать себя за доверенного клиента 20945Google разрешит устанавливать приложения из сторонних магазинов одним нажатием
Ссылка