«Яндекс» представил технологию автоматического перевода любых видео на русский язык

«Яндекс» представил технологию автоматического перевода любых видео на русский язык

13.09.2021     

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

Ожидаемое развитие

Впервые технология «Яндекса» была продемонстрирована в июле этого года. Тогда она могла создавать озвучку только для небольшого числа видеозаписей из заранее подготовленного плейлиста. Сейчас компания объявила о том, что разработка способна обрабатывать любой ролик на английском языке из YouTube, Vimeo, TikTok, Twitter, Facebook и «ВКонтакте». Исключение сделано для лицензионного контента – например, сериалы из стримингового сервиса Netflix программа переводить не будет.

Для того, чтобы протестировать работу технологии, необходимо использовать мобильную или десктопную версию «Яндекс.Браузера». В списке поддерживаемых ОС – Windows, macOS, Linux, Android и iOS. Для начала генерации русской озвучки необходимо нажать соответствующую кнопку в плеере и немного подождать – создание перевода занимает несколько минут. По завершении этого процесса пользователь получит уведомление.

Видео может быть озвучено двумя голосами – мужским и женским (он же используется в ассистенте «Алиса»). «Яндекс» намерен в будущем расширить языковую поддержку и позволить переводить ролики и с других языков, кроме английского.

Перевод в несколько шагов

Роман Иванов, руководитель «Яндекс.Браузера», рассказал, что главная задача технологии – стереть языковые границы во всемирной паутине. Компания идет к этой цели с 2011 года, и сейчас может предложить пользователям перевод самых популярных типов интернет-контента: текстов, изображений и видео. Добавление новых языковых пар и голосов позволит людям получать больше удовольствия от просмотра роликов, уверен Иванов.

Сам процесс перевода видео происходит в несколько этапов. Сперва программа распознает речь, затем превращает ее в текст и при помощи нейросети разбивает его на предложения. После этого приложение определяет пол говорящего в ролике человека, переводит текст на русский язык и синтезирует подходящий голос. На последнем этапе алгоритм совмещает закадровую озвучку с видеорядом.

Проблема прав

Российский сервис AllMyBlog обвинил «Яндекс» в том, что компания украла идею сервиса для закадрового перевода видеороликов, и подал в Арбитражный суд Москвы иск. Истец утверждает, что вел разработку аналогичной технологии, демонстрировал первые наработки представителям отечественного поисковика и предлагал сотрудничество. По словам AllMyBlog, переговоры с компанией длились до 7 июля, и уже на следующий день «Яндекс» заявил о разработке собственного сервиса для перевода видео.

Отечественный ИТ-гигант опровергает заявления «Оллмай.блог». В компании утверждают, что не вели никаких переговоров и не запрашивали математические модели и другие компоненты технологии. Новая функция «Яндекс.Браузера» работает исключительно на собственных разработках «Яндекса», утверждают представители организации.



Источник: https://infostart.ru/journal/news/tekhnologii/yandeks-predstavil-tekhnologiyu-avtomaticheskogo-perevoda-lyubykh-video-na-russkiy-yazyk_1514969/
Автор:
Александр Вашкевич Аналитик


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. dnikolaev 165 13.09.21 15:59 Сейчас в теме
Протестировал. Это нееереально круто. яндекс ты молодец. получилось гораааааздо лучше чем перевод боевиков на VHS кассетах в 90х. голос приятный. интонации меняются. уважаемый Яндекс. я жду софт типа онлайн Яндекс переводчик с голоса для мобильного телефона. ))
2. dnikolaev 165 13.09.21 16:01 Сейчас в теме
(1) Написал я это и тут же понял, что еще одну профессию скоро заменят машины (( переводчики станут не нужными
4. madonov 156 14.09.21 02:15 Сейчас в теме
(2) Эта технология не в состоянии переводить на лету. Она загружает весь ролик (или большой кусок), разбирает голос в тексты, после чего переводит и озвучивает. Создается впечатление перевода и озвучки на лету, но на самом деле предугадывать контекст она пока не может.

И в заголовке статьи громко указано "технологию автоматического перевода любых видео на русский язык", что на самом деле неправда. Пока это работает исключительно с англоязычными видео.
dnikolaev; +1 Ответить
3. пользователь 13.09.21 16:13
Сообщение было скрыто модератором.
...
5. the1 909 14.09.21 08:59 Сейчас в теме
По ссылке веселье от Яндекса
ixijixi; 27272; dnikolaev; +3 Ответить
Оставьте свое сообщение

См. также

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

15.09.2021    3109    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    2345    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    1984    user1015646    2       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    8210    user1015646    0       

GitHub выпустил веб-редактор кода: возможности, о которых вы могли не знать

Новость GitHub Автоматизация Интернет ИТ-новость

Начинающим программистам часто сложно настроить среду разработки и установить весь необходимый софт. Для них, а также для специалистов, которые работают в распределенных командах, GitHub запустил новый сервис github.dev.

10.09.2021    4590    user1015646    0       

Раскрыта дата релиза Windows 11

Новость Windows ИТ-новость Новости компаний

Microsoft официально объявила, когда станет доступна новая версия самой популярной десктопной ОС. Обновиться с Windows 10 до Windows 11 можно будет уже 5 октября 2021 года.

09.09.2021    7006    user1015646    0       

В Google научились увеличивать изображения в 16 раз с восстановлением деталей

Новость Искусственный интеллект ИТ-новость

Раньше увеличить видео с камер наблюдения в десятки раз получалось только у героев фильмов. Но теперь такая возможность существует и в реальной жизни – инженеры Google разработали прорывную технологию масштабирования изображений.

09.09.2021    3957    user1015646    3       

Эксперты подготовили рекомендации по использованию кириллицы в доменах и почте

Новость Интернет ИТ-новость

Рабочая группа представила стандарты внедрения, обработки, хранения, валидации и адаптации кириллических символов для программ, поддерживающих доменные имена и email-адреса.

07.09.2021    2752    VKuser24342747    0       

Госструктуры перейдут на российские системы видеоконференций

Новость Импортозамещение ИТ-новость Облачные технологии

Российских чиновников переводят на использование отечественного сервиса видеоконференций. Будут внедрять систему TrueConf на базе ОС Astra Linux и процессоров Baikal-M от «Байкал Электроникс».

03.09.2021    3127    user1015646    0       

Минэкономики раскритиковало требования к обновлению оборудования для суверенного Рунета

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Минэкономики пришло к выводу, что требования Минцифры затормозят развитие связи в России. По мнению специалистов ведомства, возможным последствием может стать ухудшение интернет-услуг провайдеров.

03.09.2021    2551    VKuser24342747    0       

Разработчики назвали любимые языки программирования

Новость ИТ-новость Языки программирования

Крупнейший форум для разработчиков Stack Overflow составил рейтинг любимых языков программирования. Первую строчку списка занял молодой, но перспективный Rust.

02.09.2021    5124    user1015646    3       

Петербургские ученые обучили нейросеть находить вредоносных ботов в соцсетях

Новость Безопасность Искусственный интеллект ИТ-новость Соцсети

Сотрудники Санкт-Петербургского федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) создали решение для поиска ботов, размещающих спам и дезинформацию на любом языке.

02.09.2021    2161    VKuser24342747    1       

Windows Server исключается из эксперимента по поставке обновлений Microsoft WaaS

Новость Windows ИТ-новость Новости компаний Облачные технологии

По результатам четырехлетнего эксперимента Windows as a Service Microsoft решила, что больше не будет обновлять Windows Server несколько раз в год. Для серверной ОС было решено вернуться к практике обновления каждые 2-3 года.

01.09.2021    4408    SKravchenko    0       

Microsoft добавила в Power BI инструменты аналитики для Angular-приложений

Новость Аналитика ИТ-новость

Microsoft представила новый компонент для создания веб-сервисов аналитики данных. Он позволит интегрировать функции Power BI в Angular-приложения.

31.08.2021    3130    user1015646    0       

Windows 11 лишится нескольких функций предыдущей версии системы

Новость Windows ИТ-новость

Microsoft в бета-версии Windows 11 изменила привычные функции. Из ОС исчезло отображение секунд на часах и возможность быстро добавлять события в календарь, а кнопка «Пуск» переместилась в центр панели задач.

31.08.2021    4842    VKuser24342747    6       

GitHub в версии утилиты CLI 2.0 добавил поддержку расширений

Новость GitHub ИТ-новость Новости компаний

Разработчики GitHub представили вторую версию утилиты для управления проектами при помощи командной строки CLI. Приложение поддерживает несколько стандартных расширений и создание собственных.

27.08.2021    5947    VKuser24342747    0       

Круглая дата: ядру Linux исполнилось 30 лет

Новость Linux ИТ-новость Новости компаний

Ядро Linux отмечает юбилей. О создании новой ОС 21-летний Линус Торвальдс объявил 25 августа 1991 года.

27.08.2021    4509    user1015646    2       

Искусственный интеллект научился распознавать изображения лучше человека

Новость Искусственный интеллект ИТ-новость

Алгоритм компьютерного зрения впервые превзошел человека. В экспериментах людям и системе искусственного интеллекта предлагали определить, что изображено на фото, и ответить на вопросы. Результат ИИ оказался выше, чем у человека.

26.08.2021    3598    user1015646    5       

Facebook представил криптобиблиотеку для разработчиков – Winterfell

Новость ИТ-новость Новости компаний

Специалисты Facebook выпустили новую библиотеку Winterfell. Проект с открытым исходным кодом может генерировать доказательство вычислительной целостности STARK.

24.08.2021    4598    user1015646    3       

В GitHub добавлена поддержка цитирования из репозиториев

Новость GitHub ИТ-новость

GitHub позволил использовать файл CITATION.cff, в котором можно указать, как правильно ссылаться на содержимое репозитория при написании академических публикаций.

24.08.2021    4872    VKuser24342747    0       

GitHub официально представил новую версию «Обсуждений»

Новость GitHub ИТ-новость

GitHub заявил о завершении бета-тестирования обновленной версии раздела Discussions. Релизный вариант площадки для обсуждений репозиториев разрабатывался почти год при активном участии сообщества.

23.08.2021    3197    VKuser24342747    0       

Разработчик создал браузерную версию OpenAI Codex для управления веб-страницами

Новость Интернет Искусственный интеллект ИТ-новость

Программист Эндрю Кантино рассказал, что сделал расширение для модификации страниц в Google Chrome, работающее на основе ИИ-ассистента для разработки OpenAI Codex.

23.08.2021    5653    VKuser24342747    0       

Российский разработчик создал эмулятор для запуска приложений iOS на M1 Mac

Новость Mac OS ИТ-новость Мобильные приложения

Программа PlayCover позволяет запускать на компьютерах с операционной системой MacOS любые мобильные приложения для iOS, в том числе игры с поддержкой мыши и клавиатуры.

20.08.2021    6182    VKuser24342747    0       

Вместо директора Nvidia на презентации выступил его цифровой клон

Новость Искусственный интеллект ИТ-новость Новости компаний

Во время презентации Nvidia выступила точная цифровая копия генерального директора компании Дженсена Хуанга. Виртуальный аватар предпринимателя создан при помощи ИИ-технологий.

20.08.2021    3537    VKuser24342747    1       

Минцифры запустило приложение Госключ

Новость ИТ-новость Минкомсвязь Цифровая подпись Цифровая экономика

С помощью приложения можно сгенерировать бесплатную электронную подпись и подписывать документы при работе с порталом «Госуслуги».

20.08.2021    4822    Senator_I    2