Аппаратно-ускоренный декодер OGG Theora для Firefox Mobile

2ТС: таки «работает над» или уже все сделал? если первое - то о чем новость? если второе - оформи плиз нормально.

по ходу уже сдедал, раз «С новым кодеком на N900 потребление ЦПУ при просмотре полноэкранного видео составляет всего 20%.»

И, кстати, для тех, кто не в теме, а сколько проца видео кушает без этого кодека?

Зачем оно нужно, когда сам ЦП с задачей справляется? Энергопортебление типа, а кто-ть проверял эту теорию на практике?

Ну раз в железяке есть такая функция, почему бы не задействовать? Заодно сделаем небоеспособным аргумент банальных рабов и поработителей, что theora не поддерживается аппаратными декодерами.

Поправил, как мог. Новость о том, что таки есть аппаратная теора, на слешдоте вполне на новость тянет, хотя у ЛОРа свои стандарты :-)

>Заодно сделаем небоеспособным аргумент банальных рабов и поработителей, что theora не поддерживается аппаратными декодерами.

Не хочется тебя огорчать, но TI'ный ядрёный модуль (который и позволяет аппаратно крутить теору) закрытый.

ДСП проще, а значит при перекладывании декодирования на него, устройство жрать будет меньше.

В любом случае видео без тормозов - лучше чем с тормозами, жаль только что авторитет мозилы уходит в такой пердеж как проталкивание VP3, нет что бы занятся его серьезным улучшением что ли для разнообразия.

Не так давно обсуждалось, что в преимуществах у H.264 наличие аппаратной поддержки у многих уже проданных устройств, и это влияет на выбор формата у владельцев видеохостингов. Как мне представлялось, ситуацию можно исправить только добавив аппаратное ускорение для Theora на этапе проектирования устройства (что они, в свою очередь, не будут делать пока видеохостингов с Theora мало).

А тут получается, что можно «добавить» это пресловутое аппаратное ускорение программно в УЖЕ существующие устройства!

Так что, во-первых, на новость это тянет, а во-вторых, новость - просто няшка!

вот вот обещаются открыть vp8, и что потом будут с теорой делать? впихивать в неё наработки из vp8?

>Для декодирования видео использует встроенный в SoC DSP

То есть этот DSP не настолько же специализированный, как, например, нвидиевское vdpau? В смысле, теоретически можно добавлять поддержку разных форматов, или какие ограничения?

Ну наконец-то рожают. Может хоть там теора будет шевелиться.

Да, и уберите всякие and из новости.

Даешь теору в массы!!! ... хоть таким образом =)...

...Palm Pre, Motorola Droid, _and_ Nokia N900.

Если через месяц гугл откроет VP8, то Theora будет нужна тем же кому и OGG )

DSP, это процессор ориентированный на обработку данных. У него есть специализированные иструкции для быстрой реализации многих алгоритмов обработки сигналов, таких как БПФ, цифровая фильтрация и др. а также инструкции позволяющие за раз произвести несколько операций. Соответственно на нам можно реализовавать декодировании не тольо Theor`ы но и других форматов.

То есть никому?..

А это фишка сугубо ARM-платформ? У интеля нет ничего подобного?

И вот почему такой няшный открытый формат, как ogg vorbis, никому не нужен? Он же всухую делает mp3 по качеству!

>Не хочется тебя огорчать, но TI'ный ядрёный модуль (который и позволяет аппаратно крутить теору) закрытый.

Пока у меня нет устройств с этим SoC, поэтому мне пофигу. Меня здесь интересует не полное соответствие каких-то конкретных железяк идеологии свободного ПО, а продвижение свободного видеокодека в качестве стандарта де-факто.

Превед h264, расчехляем лопаты, готовим могилу.

Интересно на нокии 5800 реализуема аппаратная теора.. хотя я наверное раньше новый телефон куплю...

вот вот обещаются открыть vp8, и что потом будут с теорой делать? впихивать в неё наработки из vp8?

Это самый логичный выход..

Мозила будет с ним нянчится, игрописатели, но на массовость можно забить осиновый кол.

«И вот почему такой няшный открытый формат, как ogg vorbis, никому не нужен? Он же всухую делает mp3 по качеству!»

Слишком поздно вышел, бесплатный lame занял рынок, а на чистоту крови юзер смотреть не будет, за маленьким битрейдом больше ни кто не гонится.

lame просто стал стандартом де факто убив не только ogg но и более лучший по качеству wma 10, а так же очень продвинутый aac LTP/ HEv2, и весьма любимый меломанами mpc, который делает их всех.

>А это фишка сугубо ARM-платформ?

Это фишка всех DSP, незавимо от родословной.

«вот вот обещаются открыть vp8, и что потом будут с теорой делать? впихивать в неё наработки из vp8?»

Учитывая что при добавлении к VP6 VP8 +30% по битрейду, то VP3 может прибавить больше. Хотя все равно это будет велосипед и наверно хуже VP8. Скорей всего мозила будет двигать Theora, а гугл следующий VP.

вот он, шандец для адобы

Скорее для MPEG-LA. Но это в лучшем случае. В худшем ­— просто придётся увеличить откаты.

меломанам пофигу качество кодека, а аудиофилы используют lossless-кодеки

Для меня новостью явилось то, что у N900 DSP открыт — в N800 с ним можно было работать только через закрытый плагин Gstreamer.

Ну и сам факт того, что на девятихатке видео с большим разрешением нормально играется, а то в 810 баг был аппаратный.

> Для меня новостью явилось то, что у N900 DSP открыт — в N800 с ним можно было работать только через закрытый плагин Gstreamer.

В плане открытости DSP в N900 от N800 практически ничем не отличается. На N800 использовать DSP тоже никто не запрещал (в наличии имеется документация и free as a beer toolchain от TI). Просто часть народа его не захотела/не осилила, а другая часть - поверила распространителям FUDa о полной закрытости DSP ;)

Вот wiki страница с инструкциями: http://wiki.maemo.org/Programming_the_DSP

Вот тут и реальный пример использования DSP на N800 для чего-то полезного: https://garage.maemo.org/projects/dsp-flac/

Ну и сам факт того, что на девятихатке видео с большим разрешением нормально играется, а то в 810 баг был аппаратный.

В 810 для декодирования видео с большим разрешением просто не хватает скорости процессора (ну и декодер не польностью оптимизирован). Слухи об аппаратном баге сильно преувеличены. Скорость вывода на экран достаточна для отображения видео 800x480 @ 30fps, хотя и почти впритык :)

Дело в том, что тактовая частота графическай шины (а она как раз и влияет на максимальную частоту кадров) пропорциональна частоте процессора. Перевод CPU с 330MHz на 400MHz в последних версиях прошивки (maemo 4.1) оказался достаточным для изменения ситуации с «чуть-чуть не хватает» до «хватает с небольшим запасом».

от ведь шустрые шайтаны...

То есть это такой случай, когда один опенсорц-проект задушил... другой опенсорц-проект?

Во-первых, это только слухи, что Google откроет
В-вторых, даже если VP8 откроют, то если Google не владеет всеми патентами или не захочет отдать их, то ничего, собственно, не изменится.

* аудиофилы имелись в виду

если вы все равно не cможите отличить mpc от lossless, то зачем файлы в 3 раза больше?

Как показывает история кодеков - место под солнцем только одно.

1. Да 2. VP3 имеет тогда точно такие же патентные проблемы что и VP8 и ни чем не лучше. (по чему то до сих пор ни кто не потребовал права на VP, значит все таки не могут и все патенты в одних руках).

Гуглу не надо отдавать патенты ни кому, достаточно сказать, что кодек для веба, а лучше для всего, будет только и на всегда бесплатным. + Открыть код или спеки.

>Это фишка всех DSP, незавимо от родословной.

А у всяких ати с нвидиями это свои велосипеды в виде vdpau/vaapi/etc, или оно же? Но если так, почему их варианты намного менее универсальны?

>2. VP3 имеет тогда точно такие же патентные проблемы что и VP8 и ни чем не лучше.

Нет. С VP3 и Theora все совсем по другому: Theora использует DCT и там с патентами все более менее понятно: большая часть уже истекла, а то чем владела On2, они пообещали безвозмездно и безвозвратно отдать сообществу. Если VP8 действительно будет кодеком нового поколения, то там будут возможны новые поля для патентных атак (просто пока о кодеке мало что известно, то возможно делать только такие предположения). Поэтому VP3/Theora скорее всего будут в более выгодном отношении, чем новый кодек.

Гуглу не надо отдавать патенты ни кому, достаточно сказать, что кодек для веба

О, да! Google уже кое-чего сказал по поводу H.264 и теперь отваливает кучу денег за его использование в Chrome и что-то не торопится включать его по умолчанию в Chromium, хотя и переводит видео на Youtube в H.264. Это все было бы чудесно (по поводу отдачи патентов), если все патенты на VP8 принадлежали On2 (так ли это на самом деле, пока неизвестно: вон с Theora'ой выяснилось, что некоторые [Apple, Nokia, etc.] компании сомневаются).

В общем, посмотрим что будет дальше, а пока что единственным более-менее приемлемым выходом является Theora, тем более теперь, когда ее можно аппаратно декодировать на мобильных устройствах.

1. Вы определитесь все же есть проблемы с патентами на VP3 или их нет. 2. Нет. Если гугл откроет VP8 шансов у Theora не будет. Theora сейчас только потому что что нет выхода. Надо было раньше ее пилить, добавлять новые фитчи, а не шильдики переклеивать. Есть там аппаратное декодирование или нет не суть важно, так как и к VP8 можно прикрутить, кроме того On2 заявила для VP8 менее сложное декодирование чем для VP7.

Что касается патентных атак, то гугл покупая смотрели у кого на что патенты и если бы они знали что технологии VP8 On2 не пренадлежат - они бы их просто не купили, так как смысла нет.

linalex> А тут получается, что можно «добавить» это пресловутое аппаратное ускорение программно в УЖЕ существующие устройства!

Более того - с помощью DSP можно сделать аппаратное ускорение для любого кодека. Это же универсальный процессор обработки сигналов.

anonymous> Если через месяц гугл откроет VP8

Гугль не заявлял, что даст свободно пользоваться форматом и кодеком.

NoMad> А это фишка сугубо ARM-платформ? У интеля нет ничего подобного?

У штеуда такого нету. А фишка - не сугубо ARM. Зависит от того, как процессор сделан. DSP и на MIPS вроде бывают.

Okitain> И вот почему такой няшный открытый формат, как ogg vorbis, никому не нужен? Он же всухую делает mp3 по качеству!

Потому, что делает - его очень широко используют. В особенности в игровой индустрии. Там сейчас с начала 2000-х годов почти всё в OGG/Vorbis. Да и плейеров дофига, которые этот формат поддерживают.

anonymous> lame просто стал стандартом де факто убив не только ogg но и более лучший по качеству wma 10, а так же очень продвинутый aac LTP/ HEv2, и весьма любимый меломанами mpc, который делает их всех.

Ну вообще-то lame ещё убил фраунгхоферский кодек, который по качеству уделывал и самого lame.

>> меломанам пофигу качество кодека, а аудиофилы используют lossless-кодеки

это да

> wma 10

Такого кодека не существует. Есть wma10 pro. Это pro означает лишь поддерку каналов более, чем 2. Сам кодек - это wma9.

> Ну вообще-то lame ещё убил фраунгхоферский кодек, который по качеству уделывал и самого lame.

Никогда фраунгхоферский кодек не уделывал по качеству lame. Тем более, он никогда lame не убивал ввиду своей платности.

> А это фишка сугубо ARM-платформ?

Это скорее фишка фирмы TI: это они упорно свои DSP с ARM процессорами в чипы OMAP закатывали. И похоже только сейчас их «заметили» программисты, раз стали появляться такие проекты.

Если в N810 использовался OMAP2420 c классическим DSP C55x, то в N900 уже OMAP3430, где намного более интересный VLIW DSP типа C64+ (более подходящий для обработки видео, т.к. на той же частоте позволяет достичь большей параллельности).

Так что, в виду разных DSP, проекты с N810, использующие DSP, без значительных переделок не будут работать на N900 и наоборот (в последнем случае и переделки могут не помочь из-за разрыва в производительности).

P.S. Кстати, а я бы вообще ядра С6000/TriMedia/e2k одну группу бы отнес, т.е. в новых OMAP эти DSP весьма интересный довесок, только б научились их использовать...

У интеля нет ничего подобного?

Ну есть же у них чипы Atom+GPU, например D410/D510, что мешает часть работы перекинуть с CPU на шейдеры? Только пока просто не нужно никому...

> И вот почему такой няшный открытый формат, как ogg vorbis, никому не нужен? Он же всухую делает mp3 по качеству!

Еще раз, на пальцах - 95% потребителей качество не волнует абсолютно. О каком качестве мы говорим если слушаем музыку в метро? на шумной улице? и т.д. Правильно - нередко шум того же метро тупо перекрывает звук в наушнике, особенно если этот плеер соответствует стандартам ЕС на мах. громкость. Посему-то мр3 128 kbps до сих пор является самым распространенным вариантом, не смотря на то что и плееры и емкости флеша давно позволяют использовать 256-320 kbps или вообще lossless-форматы.