Новини Софт 11.10.2023 о 15:22 comment views icon

Нейромережевий дубляж українською — нова ШІ-функція ElevenLabs перекладає відео на 20 різних мов зі збереженням голосу

author avatar

Катерина Даньшина

Авторка новин

Тиждень ШІ на ITC.ua за підтримки

На ITC.ua Тиждень ШІ. Ми досліджуємо, як саме ШІ покращує життя мільйонів людей прямо зараз і що чекає нас у майбутньому. Партнер проєкту – компанія Favbet Tech, яка активно інтегрує ШІ у свої продукти.

Система дозволяє замінити голос актора штучним, але тим самим за звучанням голосом, який говорить іншою мовою.

ElevenLabs — це ШІ-стартап, який пропонує послугу клонування голосу, що дозволяє користувачам генерувати аудіо за допомогою нейромереж на основі завантажених зразків тривалістю кілька хвилин. (Компанія на початку року виклала свою технологію у відкритому доступі, чим одразу скористалися інтернет-троллі — в соцмережах тоді поширювали фейкові голоси знаменитостей, що говорили образливі речі, оголошували війни чи цитували Гітлера).

Нині сервіс розширився новою ШІ-функцією, яка дозволить перекласти голос на аудіо більш ніж 20 різними мовами, включаючи хінді, португальську, іспанську, японську, українську, польську та арабську — але законно та з дозволу. Цей інструмент призначений для використання медіакомпаніями, педагогами та окремими творцями.

ElevenLabs стверджує, що система зможе не тільки перекладати «розмовний вміст іншою мовою за лічені хвилини», але й створювати нові діалоги цільовою мовою за допомогою власного голосу актора. Повідомляється, що система навіть здатна підтримувати «емоції та інтонацію» базового діалогу та передавати їх у згенерований переклад.

«Це допоможе аудиторії насолоджуватися будь-яким контентом, незалежно від мови, якою вони говорять», — каже генеральний директор ElevenLabs Маті Станішевскі. «І це означатиме, що творці контенту зможуть легко та автентично отримати доступ до набагато більшої аудиторії в усьому світі».

Раніше і YouTube залучив ШІ для дубляжу аудіо та нині тестує технологію із «сотнями» авторів. Функція доступна англійською, іспанською та португальською мовами, але надалі список розширюватиметься. За словами компанії, вони «працюють над тим, щоб перекладені звукові доріжки звучали як голос автора, з більшою виразністю та синхронізацією». Запуск ШІ-дубляжу запланований на 2024-й рік.

Джерело: Engadget

Favbet Tech — українська продуктова компанія, розробник iGaming-рішень. Входить до топ-50 найбільших IT-компаній України за версією DOU.Спеціалізується на високонавантажених системах, хмарній інфраструктурі та штучному інтелекті. У 2025 стала ініціатором створення АІ-комітету Асоціації «ІТ Ukrainе» — першого галузевого об’єднання, що займається питаннями розвитку АІ на рівні бізнесу й держави.

Що думаєте про цю статтю?
Голосів:
Файно є
Файно є
Йой, най буде!
Йой, най буде!
Трясця!
Трясця!
Ну такої...
Ну такої...
Бісить, аж тіпає!
Бісить, аж тіпає!
Loading comments...

Повідомити про помилку

Текст, який буде надіслано нашим редакторам: