Нейросеть LipDub AI для автоматического дубляжа: новый шаг в видео-переводе

Новая нейросеть LipDub AI, ранее доступная ограниченному кругу пользователей, теперь открыта для всех. Она способна переозвучивать видео на 40 языков, включая русский, и синхронизировать движения губ персонажей с новым аудио. Ключевая особенность – возможность клонирования голоса говорящего, что позволяет сохранить его тембр при переводе, делая дубляж более естественным.
Нейросеть LipDub AI для автоматического дубляжа: новый шаг в видео-переводе
Изображение носит иллюстративный характер

Сервис не только переводит речь, но и синхронизирует артикуляцию, что позволяет использовать его даже на вымышленных языках, таких как валирийский. Пользователи могут загружать готовые аудиофайлы и настраивать соответствие губ и звука. Кроме того, есть функция озвучивания текста до 1000 символов с сохранением оригинального голоса, требующая 30-секундного видео для клонирования.

LipDub AI уже применялся в рекламе, например, для создания португальской версии ролика с Уиллом Смитом. Сервис позволяет обрабатывать минутные видео в разрешении 1080p. Для ознакомления предоставляются 50 бесплатных кредитов, при этом перевод видео стоит 10, а клонирование голоса – 25 кредитов.

Стоимость подписки на LipDub AI начинается от 149 долларов в месяц. Несмотря на это, сервис открывает новые возможности для создателей контента, хотя на рынке уже есть конкуренты, предлагающие аналогичные возможности в более доступном ценовом диапазоне. Подобные технологии могут быть полезны и в YouTube для премиум-подписчиков.


Новое на сайте

19209Как беспрецедентный бунт чернокожих женщин в суде Бостона разрушил планы рабовладельцев? 19208Как новые поколения троянов удаленного доступа захватывают системы ради кибершпионажа и... 19207Почему мировые киберпреступники захватили рекламные сети, и как Meta вместе с властями... 19206Как фальшивый пакет StripeApi.Net в NuGet Gallery незаметно похищал финансовые API-токены... 19205Зачем неизвестная группировка UAT-10027 внедряет бэкдор Dohdoor в системы образования и... 19204Ритуальный предсвадебный плач как форма протеста в традиционном Китае 19203Невидимая угроза в оперативной памяти: масштабная атака северокорейских хакеров на... 19202Как уязвимость нулевого дня в Cisco SD-WAN позволяет хакерам незаметно захватывать... 19201Как Google разрушил глобальную шпионскую сеть UNC2814, охватившую правительства 70 стран... 19200Как простое открытие репозитория в Claude Code позволяет хакерам получить полный контроль... 19199Зачем киберсиндикат SLH платит женщинам до 1000 долларов за один телефонный звонок в... 19198Устранение слепых зон SOC: переход к доказательной сортировке угроз для защиты бизнеса 19197Скрытые бэкдоры в цепочках поставок по: атаки через вредоносные пакеты NuGet и npm 19196Как абсолютная самоотдача, отказ от эго и физиологическое переосмысление тревоги помогают... 19195Отказ от стратегии гладиаторов как главный драйвер экспоненциального роста корпораций
Ссылка