О! Интересно. Всем, кто привел примеры ( RazrFalcon, mkam, PPP328) спасибо за инфу.

Разве реклама порносайтов не запрещена на лоре?

Мимо.

Это плейсервер для невиртуальных кинотеатров, которые с билетами, креслами и попкорном. Показывать честно лицензированное у прокатчиков кино, с шифрованием потоков и водяными знаками.

Но я про ссылки из поста.

Если тебе хостинг картинок рядом со скриншотом показывает порнуху — проблема, скорее всего, на твоей стороне канала :)

А можно нормальных пятизвездочных регистрантов, а не это Linfan позорище?

Нормальных выгнала кровавая (теперь во всех смыслах) модерастия.

Там можно было запихнуть их в if. Вот только не помню, можно ли пол файла в одной кодировке, пол в другой. Вроде бы нет.

ссылки из пост

Специально перешел… Прона не увидел.

https://doc.kaitai.io/user_guide.html#calc-endian

Возможно, в 0.10 мы попробуем сделать билд на Scala.Native.

Два вопроса: сборка на NWjs или Electron есть?

Я так понимаю, вопрос про Web IDE? Пока нет. Если есть желание сделать — welcome :)

И еще по bintray.com - это фришный акк позволяет репы там держать?

Да. В целом сейчас держать репозитарии вообще не большая проблема — их чуть ли не github умеет содержать.

Просто в документации я увидел только 2 варианта be и le. А что если в зависимости от слова по определйнному выносу у меня файл может или be, или le?

У нас это называется «calculated default endianness» и оно поддерживается. Ровно так b работает, например, парсинг ELF, который на скриншоте.

рядом со скриншотом

А там был скриншот?

Прона не увидел.

А скриншоты? Скриншоты увидел?

был

И до сих пор есть, прикинь.

Это как-то связано с ASN.1?

Зачем теперь ты постишь ссылки на порно?

мне не нужно «выдать себя за специалиста»

конечно, ведь твоя страница проекта выдаёт «профессианала» с головой. я аж прослезился от кол-ва упоминаний professional. также порадовало

is a powerful and mature application that makes users more productive and provides them professional and free solution even for exotic *nix OSes.

продактив, профешнал. экзотические юниксы в виде арча и манжары. ну и, конечно же, убийца профешнал фотошопа и кореля.

О! Интересно. Всем, кто привел примеры

т.е. гуру парсинга даже про форматы нихера не знает, но вскукарекнуть очень хочется?

Бинарные пакеты не обязательно кратны байту, слову и т.д., пример - в радиоканале сотовой связи

я аж прослезился

Поплачь, авось попустит ) Ты ж, бедолага, всю ночь с пылающим батхертом маялся.

так это другой анонимус. нас, вообще-то, - легион

та то понятно, что вас как за баней ) Но уходить от темы сабжа на обсуждение другого проекта - моветон. Будет новость, там и оттягивайтесь. А тут другая тематика.

«Теперь он и тебя посчитал!»

А ksy для ksy есть?

Вместо .ksy есть

формальное описание языка в виде JSON-схемы, из которой теперь генерируется документация

«Непорядок!»

инструменты для удобной разработки спецификаций с одновременным визуальным контролем:

…удобной разработки…
…с одновременным визуальным контролем…

Нет. grumpy_cat.jpg

плагин для Binary Ninja;

Плагин для Binary Ninja представляет собой банальные парсеры, сгенерированные Kaitai и наваленные в одну папку. Он не позволяет создавать новый .ksy на лету, а только лишь подсвечивает фрагменты дампа по шаблону.

Очевидно, при изменении форматов в ветке Kaitai, автор плагина сам должен перегенерить парсеры, положить сгенеренные .py–файлы в свой проект с плагином на github, и только тогда эти изменения будут доступны пользователям плагина.

Veles

Аналогично. Veles содержит лишь весьма бедный статичный комплект парсеров, в какой-то момент времени сгенерированных и добавленных в проект.

Hobbits

То же самое — парсеры генерируются из .ksy в момент сборки и представлены в готовом релизе в виде скомпилированной бинарной библиотеки. Но! Уже есть возможность загрузить внешний .ksy …при условии указания пути к ksc . То есть, чтобы работать со своими .ksy необходим внешний компилятор, со всеми его зависимостями. Увы, даже с такой оговоркой Hobbits не может заменить WebIDE/ksv, ибо работа с Kaitai, в плане эргономики, там реализована крайне отвратно никак. Нет перехода по двойному щелчку, нет подсветки, нет распарсенного содержимого полей, etc, etc…

плагин для Hiew

Также является статичным набором парсеров. Но это пункт списка, поразивший меня более всего. Итак, Hiew — это классический «swiss army knife» для ковыряния бинарников под оффтопик. Минималистичный, компактный, со спартанским интерфейсом, но широкими возможностями. Плагинные расширения там, понятно, в виде библиотек с сишным интерфейсом. И как же автор (широко известный в узких кругах Tavis Ormandy) выкрутился, чтобы запихнуть Kaitai в сишную библиотеку? …барабанная дробь… Ему пришлось притащить туда яваскриптовый движок (!!!). То есть: Hiew, который грузит плагин, в котором вкомпилен duktape, на котором исполняется KaitaiStream.js и сгенерированные яваскриптовые парсеры… Занавес.

Комментарии в массе своей справедливы и, вероятно, нужно будет как-то так их и разграничивать: часть инструментов не позволяет вообще подгружать кастомные ksy (Veles, Kiewtai), часть инструментов позволяет делать это с определенными сложностями (Binja), часть — позволяет свободно (Hobbits, ksv, Java GUI, плагин для vscode, WebIDE).

То есть, чтобы работать со своими .ksy необходим внешний компилятор, со всеми его зависимостями.

Это будет так абсолютно для всех визуализаторов, претендующих на работу с внешними .ksy. Максимум, что можно сделать — bundle’ить компилятор внутри визуализатора (что делают, скажем, Java GUI, vscode-плагин и WebIDE), либо осуществить развязку

А парсер текста на нём можно делать?

но зачем?

Бывают производства где необходима диверсификация и одним флексом не обойтись, приходится искать всякие альтернативы.

Мммм... что же это у вас за форматы такие?

Бывают производства где необходима диверсификация и одним флексом не обойтись …

Так flex и не предназначен для работы с бинарными форматами.
О чем вы?

Владимир

Парсинг - интересная и АКТУАЛЬНАЯ тема.
Почему?
ИМХО ни кто еще в open source не выложил исходники парсера, который бы работал быстро, умел AST в качестве результата предоставлять, иметь хороший API, внятную документацию, … bison, byacc, flex, … как-бы «умеют» многое, но отказался от них.
Проще докторскую диссертацию на тему «Кому на Руси жить хорошо» проще написать, чем с их использованием реализовать скажем парсинг struct /у меня такой самопал имеется/.
Когда решил добавить в struct возможность использования «свойств» для полей и объектов, то написал свой парсинг.
Он не универсальный, зато скорость «полета» как если сравнить «кукурузник» и МИГ-35.

www.antlr.org правда есть, но …

PS: Огорчю тех кто считает, что «до нас все украдено».

Вы не правы

Владимир

PS: Огорчю тех кто считает, что «до нас все украдено».

Чу … «огорчу».

Владимир

Неплохая штука

Отличная штука, использовал уже несколько раз в реальных проектах. Для меня самое главное - позволяет разделить хорошо процесс анализа структур данных (визуальный редактор, написание правил формата) и управления ими позже (берем какой-нибудь python или MSVC и довольно быстро пишем конвертор или экстрактор данных).

По гибкости пара моментов была с чем я сталкивался, но ничего критичного не помню.

PS: Кстати, документация отличная.

А документация у них есть вообще? Может я не нашёл просто. Есть какой-то обширный туториал с кучей TODO прямо в тексте. Там почти всё есть, конечно, но как-то несерьёзно.

обширный туториал с кучей TODO прямо в тексте

Речь про http://doc.kaitai.io/user_guide.html ?

Плагин для vscode, к сожалению, не работает без доступа в интернет

Т.к. при открытии файла он хочет загрузить js скрипт https://unpkg.com/fudgedit@1.0.0/dist/fudgeapps.js

См. в исходниках https://github.com/fudgepop01/kaitai_ide_vscode/blob/master/webviews/webview.html

https://github.com/fudgepop01/kaitai_ide_vscode/issues/new