Можно ли использовать переводящий видео движок яндекса без яндекс браузера?

Нельзя, он ж не в самом браузере, а виде сервиса снаружи.

Незачем мне ещё третий браузер.

Выкинь более бесполезный из первых двух.

Такое? Нейросети в Firefox, а-ля Яндекс.Браузер

А значок этот нельзя прятать? Мешает своей блямбой.
«Нейросети не смогли определить речь на видео».
https://www.youtube.com/watch?v=YvLH0sy_lu8

Тогда страдай.

Значок пропадает, если мышкой не двигать. Наверно настраивается в скрипте.

А то, что «не смогли определить», ну там не всякий язык, en - точно может, плюс еще какие-то.
Пример видео, где 100% работает перевод, RATATOUILLE ENGLISH FULL MOVIE.

Да вы просто автор вредных советов Григорий Остер, дядя Крыс.

Не двигать мышью сложно. Значит придётся включать и выключать скрипт после просмотра, раз нельзя этот значок переместить в угол и без текста.

Спасибо, с немецкого перевёл: https://www.youtube.com/watch?v=HZVA9Mmc__8 Правда я дико ржу с контекста - километры вместо килобайт, и прочие пёрлы. Иногда ИИ натурально говорит абракадабру пыш-пыш-тытыж - видимо язык заплетается (с дикцией у людей в видео всё ок). Но без знания контекста и видения оригинальных сабов это всё ещё треш) ИИ не хватает погружения перевода из контекста темы, главы, абзаца и предложения. Он тупо переводит как гугл транслит, который не знает что в рассказе про ТТХ ПЭВМ 64 kilo не инфа сотка что не про расстояния)))

Но слушать можно. Лучше, чем ничего. Хотя мне рассказывали про крутость перевода с таким воодушевлением, что сейчас мем вспомнил где кун тян писю показал: «а разговоров-то было…»

https://github.com/ilyhalight/voice-over-translation

«Тред не читай, сразу отвечай» (c)

Коммент выше

Тред не читай, сразу отвечай

Как будто что-то плохое.

Смешное ещё заметил,иногда его клинит, и он начинает повторять как коротнувший телепузик фразу по много раз увеличивая скорость речи.

9 раз повтор: «и то, жто мы продаём, …»

Хочу только аглицкие видео

видео на немецком языке, «9 раз повтор»

:)

Лично я, использую данный скрипт в основном для перевода en подкастов. Серьезных рекламаций пока не было. Но бывает изредка, перевод на каком-то коротком участке чуть ускоряется.

https://github.com/ilyhalight/voice-over-translation

Да, надо было писать шире, «видео на иностранном языке».)

Но когнитивный диссонанс не в этом, а в том, что видео на немецком, но все 9 раз повторяется не dasistfantastisch)

Главное, и спасибо всем, тут кажется уже раза три ссылку кидали на гитхаб проекта, я теперь открыл для себя познавательные видео про Commodore64, большая их часть как раз на eng/de языках. Интересно, если польское видео найду, будет ли повторяться 9 раз kurwaperdole! =)

Оно пока годится только чтобы покринжевать. Ну и тогда уж лучше достать какой-нибудь старый PROMT, чтобы веселее было охлаждать траханье. А так вообще, эта задача сводится к нескольким: сначала нужна распознавалка, которая делает субтитры на языке оригинала, потом уже переводилка, которая переводит эти самые субтитры, и читалка, которая тупо зачитывает субтитры.

То, что вы говорите, это же не ИИ, а отдельно: распознавалка речи, переводчик текста, и говорилка речью. Так разве сейчас ИИ уже не переводит из звука от и до сам?

Вчера стрим по теме развития языковых моделей в ИИ смотрел: https://youtu.be/JIzp22z7Yi8

Насколько я понимаю, Яндекс делает именно так. Использует одну нейросетку для распознания, потому другую для перевода (ту же самую, что для обычного текстового перевода), и потом третью для перевода текста в голос. Я не уверен на 100%, но судя по косвенным признакам, так и есть. Если бы нейросетку тренировали именно сразу на голосе, то эмоции и интонации учитывались бы, и во многих местах перевод был бы более адекватным, но сейчас оно переводит именно ровно так, как переводило бы тупо текст субтитров.

smplayer

Не знаю, видел ли ты мой последний коммент в соседней теме. Я там проверил еще один способ через mpv (Yandex.Translate yt-dlp plugin) и он сработал у меня, в отличии от дефолтного, требующего nodejs.

ответил там

Для этого слишком много качественных данных надо. В инете столько нет пока. Ты поди найди видео с несколькими языковыми дорожками и чтоб не Гоблином озвучивалось или гнусавыми его коллегами да еще и картинку бы неплохо учитывать.

Фильмы, официальный переведенные на несколько языков?

Да: https://github.com/ilyhalight/voice-over-translation/.

Там же ужасный перевод озвученый ужасным голосом, может как мотивация учить иностранный язык оно годится, но сомтреть в такой озвучке бррр...

Там из видео вытаскиваются сабы, а потом переводятся:

❯ curl -X POST https://translate.toil.cc/translate -H "Content-Type: application/json" -d '{
  "text": "Hello, world!",
  "lang": "es"           
}'
{"code":200,"lang":"en-es","text":["¡Hola, mundo!"]} 

Это я из исходников ссылку подсмотрел… Можно скорее всего готовую языковую модель скачать, чтобы товарищу майору с твоего айпи всякие подозрительные тексты не отправлялись

В браузере был где-то встроенный синтезатор речи. Те выдрали сабы, перевели, воспроизвели текст. Я не уверен, что яндекс браувзер так работает, но

товарищу майору

Я сейчас тебя могу ему сдать, чтобы ты понял, что бояться его не стоит.

Английские субтитры и те очень часто (!) ошибаются, не улавливают произношение англоязычных людей, чего уж говорить о переводе на русский.

Да можно, вот например https://github.com/FOSWLY/vot-cli. Браузер не нужен