Яндекс представил технологию автоматической переозвучки видео с помощью машинного перевода, технологии биометрии, распознавания и синтеза речи.
Нововведение уже ввели в Яндекс.Браузер. Функция переводит озвучку на иностранном языке на русский. Пока в прототипе доступен только перевод с английского, но в будущем добавят и другие языки.
Разработчики опробовали технологию с роликами на разные темы: изменение климата, машинное обучение, история Плутона. Посмотреть видео с закадровым переводом можно через Яндекс.Браузер по этой ссылке. Позднее пользователи сами смогут выбирать видео.
С помощью биометрии система определяет пол говорящего и подбирает ему соответствующий голос. Специальный алгоритм следит за темпом речи и старается ему соответствовать.
Войди и оставь комментарий
Или войди с помощью
Охренеть, если это будет работать со временем всюду у каждого видео на ютубе и тестовые ролики не фейк, то вот это я понимаю инновации!
Как включить? Или работает только с пк?
Яндекс презентует в “лучших традициях” Microsoft – вот как умеем, но выпустим позже, где-нибудь к осени (а может и нет). Точную дату никому не скажем, следите за обновлениями.
Очень хочется чтение текста (книг) по ролям. С подобными технологиями это уже становится возможно. Например голоса подставлять мужские и женские (по ходу диалога) фоновые спецэффекты в контексте повествования.
брехня, не работает
Вот бы работало с нетфликс и Ютуб)))
На демо роликах работает хорошо. Но они и выбраны не просто так, взять какого-нить американского ютубера индийского происхождения, его свои же не поймут, не то что нейросеть.
Рекомендуем
Нашли орфографическую ошибку в новости?
Выделите ее мышью и нажмите Ctrl+Enter.