Закадровый перевод яндекс айфон

Закадровый перевод англоязычных видео в Яндекс.Браузере

О технологии автоматического закадрового перевода англоязычных видео в Интернете от Яндекса, появившейся в Яндекс.Браузере. Что являет собой эта технология, как её включить на YouTube.

Не успели ещё мы, пользователи Интернета привыкнуть к тому, что автоматический перевод веб-страниц в браузерах – сегодня это уже вещь вполне достойного уровня, с помощью которой мы можем как минимум понять суть изложенного в текстах на иностранном языке, как технологии автоматизации перевода шагнули ещё дальше. И замахнулись они на закадровый перевод видеороликов, выложенных в Интернете. Относительно недавно Яндекс представил интегрированную в свой браузер Яндекс.Браузер технологию автоматического голосового перевода англоязычных видео на YouTube, Vimeo и некоторых других интернет-площадках. Что за функция, и как она работает?

Цель создания Яндексом закадрового автоматического перевода видео в Интернете – сделать англоязычные видео доступными русскоязычным пользователям. Далеко не все русскоязычные владеют английским языком на должном уровне, чтобы понимать происходящее в обучающих, технических, научных и т.п. видео. Единственным решением, как русскоязычным смотреть YouTube-видео на английском, до недавнего времени были только субтитры. Но всерьёз рассматривать инструмент субтитров на YouTube можно, если только они созданы не автоматически, а на каналах, где авторы занимаются субтитрами и редактируют их. А таких немного. Предложенная Яндексом технология, во-первых, решает проблему низкого качества самого перевода субтитров за счёт реализации своих механизмов распознавания речи и перевода. Во-вторых, предлагает закадровый перевод, т.е. перевод с переозвучиванием видео. Переозвучивание базируется на механизме синтезирования речи Яндекса. Выполнено по принципу профессионального закадрового перевода: оригинальный звук заглушается и поверх него пускаются русскоязычные голосовые движки, озвучивающие переведённую речь. Технология закадрового перевода распознаёт оригинальные женские и мужские голоса и переозвучивает их, соответственно, женским и мужским голосовыми движками. Где, кстати, в женском голосовом движке каждый узнает голос Алисы – голосового ассистента Яндекс.Браузера. Также технология учитывает темп речи говорящих в оригинале.

Технология закадрового перевода интегрирована в Яндекс.Браузер, пока что её без проблем можно обнаружить только в десктопной версии браузера, но также она может быть доступна уже и на некоторых мобильных устройствах. В любом случае необходима последняя актуальная версия Яндекс.Браузера. В десктопной версии при открытии видео, где поддерживается закадровый перевод, увидим его кнопку «Перевести видео» в числе функций на самом видео. Кликаем эту кнопку.

Если ролик непродолжительный, закадровый перевод начнётся практически мгновенно. Если ролик длинный, придётся немного подождать, при больших объёмах обработки данных технологии нужно какое-то время на перевод и озвучку. В общем принцип работы перевода видео таков: при включении этой функции в видеоролике в фоне запускается распознавание речи, далее текст переводится, затем озвучивается голосовыми движками с применением мужского и женского голоса, а также различных темпов их воспроизведения. При этом закадровый перевод осуществляется максимально синхронно, насколько это возможно сделать автоматически. Для этого в процессе перевода учитываются временные отрезки оригинального звучания и в соответствии с ними запускается переозвучивание голосовыми движками.

Пока что технология работает только для видеороликов на английском языке. И только для видео, которые выложены в общем доступе. Использовать её предпочтительнее для видео разговорного жанра, но иногда она кое-как справляется с переводом текста в музыкальных клипах и видео концертов. Где-то с неточностями перевода, где-то с пропуском больших отрезков речи, но справляется. Но в каких-то видеороликах закадровый перевод работать не будет. Это могут быть музыкальные видео, видео с плохим звучанием и прочие случаи, где механизм распознавания речи столкнётся с какими-то трудностями.

В целом же Яндексу большой зачёт, весьма неплохо как для первых наработок. Остаётся надеться, что и идея, и её технология не будут заброшены, а будут эволюционировать. В процессе эволюции избавятся от шероховатостей и угловатостей и превратятся в годный качественный продукт отечественного производства.

Источник

В Яндекс.Браузере появился закадровый перевод любых видео с YouTube на английском языке

В приложении Яндекс и в Яндекс.Браузере появилась функция закадрового перевода видео с YouTube и Vimeo.

Для запуска перевода надо нажать на кнопку перевода в плеере и подождать несколько минут.

Перевод происходит в несколько этапов. Сначала Яндекс распознает речь, превращает её в текст и с помощью нейронных сетей разбивает на предложения. Потом определяет пол говорящего, переводит предложения на русский язык, синтезирует голос и накладывает его на видео.

Илья Сидоров

Редактор новостей и автор статей на iPhones.ru.

Обзор умной зубной щётки Oral-B iO Series 9. Сама выбирает тип чистки зубов и языка, и даже лечит гингивит

Полгода хожу с Android и уже скучаю по iPhone. 7 вещей, которых мне не хватает в гуглофоне

👀 Читайте также . Всё по теме

• 

Apple на несколько дней остановила производство iPhone и iPad из-за нехватки комплектующих

Google подала в суд на двух россиян, которые якобы создали вирус Glupteba и заразили 1 миллион компьютеров

Подписка Apple Music Voice появится в iOS 15.2, но не в России

Вышла macOS 12.1 Release Candidate

Apple выпустила watchOS 8.3 Release Candidate

• 

Яндекс объединился с Apple и Google для разработки единого стандарта умного дома

Яндекс создал три самых мощных суперкомпьютера в России

В Яндекс.Музыке появилась Моя волна. Это бесконечный персональный поток треков

🙈 Комментарии 23

Крутотень! Яндекс – красавчики!

@NightBird , с*издили идею, а так да, “красавчики”…)

@desired , так кто мешает спи*дить идею другим? Любому из комментаторов к этой новости к примеру. Это же так легко!
Цукерберг наверно каждый день сожалеет о том, от куда у него все новые функции беруться.

@desired , а где это ещё реализовано?

@Dr.Plush , я не знаю, но прочел новость как раз на днях. Просто загуглите AllMyBlog, сразу все увидите. Если вкратце, то яшка с ними в этом направлении сотрудничала, те хотели продаться, а яшка дала заднюю и запилила все сама) Короче, привет Цукерману и братьям Уинклвоссам 🙂

@desired , ну посмотрим чем закончится это противостояние 🙂

@desired , а в чем идея то? Закадровый перевод – это то, что напрашивается само собой, тут и думать не надо, а вот реализовать хорошо – да. Или если я покрашу автомобиль в красный – вы тоже скажите, что я содрал этот цвет с другой машины?

@Tilk , совершенно верно, в законе нет понятия “кража идеи”, поэтому тут никаких претензий, просто констатация факта, что они воспользовались идеей и благодаря своему раздутому штату программистов быстро реализовали ее, а потенциальный “партнер”, который слил им инфу и свои наработки оказался в итоге у обочины.

@desired , то что к обочине – это грустно, конечно, но я бы такой «идеей» даде делиться не стал, потому что на идею это не тянет, а если в яндексе такие дебилы, что сами не могли до этого догадаться, то нужно было ждать, чтобы самим реализовать позже. У меня в голове таких «идей» миллион и маленькая тележка.

@Tilk , честно говоря, там история “мутная”, фиг его знает, кто первый придумал, кто реализовал и т.д., отдельные программисты на хабре и фб пруфы кидают, что яндекс уже более 10 лет работает над этой фичей… но факт остается фактом, что яндекс выкатил готовый “бесшовный” продукт, а аналог завязан на каком-то тг-боте, да еще и платный вроде как…

В общем, да, идей много, были бы возможности их воплотить в реальность и, самое главное, чтобы было удобно конечному потребителю:)

Источник

Любые английские ролики с русской озвучкой: Яндекс запустил закадровый перевод в массы

Переводятся видео на YouTube, Vimeo и других популярных платформах

Команда Яндекса объявила о запуске очень удобной функции для пользователей — возможность смотреть англоязычные ролики на многих популярных платформах, включая YouTube и Vimeo, с автоматической русскоязычной озвучкой.

Летом в Яндексе начали тестировать технологию машинного перевода видео и предложили пользователям для демонстрации специальный плейлист. Сегодня же новая функция открыта для массового использования. Как обещают разработчики, теперь пользователи смогут посмотреть с русской озвучкой практически любой англоязычный ролик.

Русский закадровый перевод предлагается в двух вариантах — с мужским и женским голосом. Перевод работает в Яндекс.Браузере для компьютеров (Windows, macOS, Linux) и Android, а также в приложении Яндекс для Android и iOS. Чтобы посмотреть видео с русской озвучкой, нужно нажать на кнопку в плеере и немного подождать. Процесс перевода занимает несколько минут. Когда всё будет готово, придёт уведомление.

Перевод происходит в несколько этапов. Сначала Яндекс распознаёт речь, превращает её в текст и с помощью нейронных сетей разбивает на предложения. Потом определяет пол говорящего, переводит предложения на русский язык и синтезирует голос. Затем перевод совмещается с видеорядом с помощью нейросетей. Как отмечают разработчики, это совсем не тривиальная задача, потому что в русском языке предложения длиннее, чем в английском.

Источник

Перевод

Приложение Яндекс автоматически определяет язык загруженной страницы и предлагает перевести ее на русский или другой язык по вашему выбору.

В приложение встроен перевод видео с английского языка на русский. Смотрите обучающие лекции и любимые видеоролики сразу на русском языке с помощью функции закадровой озвучки.

Перевод страниц

Страница переводится с иностранного языка на русский автоматически. Чтобы вернуться к странице на исходном языке, нажмите → Показать оригинал .

Перевод и озвучка видео

Чтобы смотреть видео на русском языке, на ролике нажмите Перевести видео . Видео продолжит озвучиваться на русском языке. Мужчин озвучивает мужской голос, а женщин — женский.

Если кнопка перевода исчезла, нажмите на видео, и она появится снова.

Иногда перевод видео занимает некоторое время. Вам придет уведомление, когда всё будет готово.

Если вы хотите вернуться к оригиналу, нажмите Выключить .

Отключение переводчика

Проблемы с переводом

Сейчас видео переводится на русский с английского, французского, немецкого и испанского языка. Технология находится в разработке, поэтому перевод доступен не для всех видео.

Перевод текста в камере

В приложении Яндекс вы можете перевести текст на фото, объявлении или дорожном указателе с помощью Умной камеры.

Язык интерфейса

Вы можете изменить язык интерфейса приложения Яндекс.

Вы читаете справку приложения Яндекс для iOS. Если у вас устройство с Android — перейдите в справку для этой операционной системы.

Перевод

Приложение Яндекс автоматически определяет язык загруженной страницы и предлагает перевести ее на русский или другой язык по вашему выбору.

В приложение встроен перевод видео с английского языка на русский. Смотрите обучающие лекции и любимые видеоролики сразу на русском языке с помощью функции закадровой озвучки.

Перевод страниц

Страница переводится с иностранного языка на русский автоматически. Чтобы вернуться к странице на исходном языке, нажмите → Показать оригинал .

Перевод и озвучка видео

Чтобы смотреть видео на русском языке, на ролике нажмите Перевести видео . Видео продолжит озвучиваться на русском языке. Мужчин озвучивает мужской голос, а женщин — женский.

Если кнопка перевода исчезла, нажмите на видео, и она появится снова.

Иногда перевод видео занимает некоторое время. Вам придет уведомление, когда всё будет готово.

Источник

«Яндекс» запустил закадровый перевод видео

Представленный в июне этого года голосовой переводчик видео в «Яндекс.Браузере» полностью заработал. По заявлению разработчиков, их технология закадрового машинного перевода не имеет аналогов в мире. Она объединяет в себе машинный перевод с функциями синтеза речи «Яндекс.Переводчика» и определяющей пол говорящего для подбора соответствующего голоса.

После почти двухмесячного закрытого тестирования технология машинного перевода видео в «Яндекс.Браузере» стала общедоступной. Теперь у пользователей появилась возможность смотреть любой англоязычный ролик с русской озвучкой. Перевод накладывается на оригинальную речь, которая приглушается и не мешает воспринимать информацию.

«Перевод, который выполняет «Яндекс», получается закадровым и двухголосым. Мужские голоса переводятся мужским голосом, женские — женским. Если вы поймёте, что женский голос вам знаком, знайте, что вам не показалось. Это голос Алисы», — объясняется в блоге компании «Яндекс».

Новая функция работает в «Яндекс.Браузере» на ПК и в приложении «Яндекс» на мобильных устройствах с iOS и Android. Машинный перевод с английского языка доступен на YouTube, Vimeo, Twitter и других популярных платформах, но только для видео, которое находится в общем доступе.

В будущем компания «Яндекс» намерена применить технологию и для других языков, а также включить в перевод больше голосов.

Источник