Хочу заняться анализом кода.

какие функции emacs лучше для этого использовать?

https://www.gnu.org/software/emacs/manual/html_node/elisp/Buffer-Contents.html

http://www.gnu.org/software/emacs/manual/html_node/elisp/Network.html

какие посоветуйте материалы для элементарного структурного анализа кода на таких языках как C, Java, C#?

Анализируй AST как тебе надо. Или вопрос в том, как получить этот самый AST?

Лисп с емаксом конечно хорошо, но часто все начинания скатываются в регулярки. Ты ведь не хочешь этого?

ООП языки - это сплошная рефлексия.

как получить этот самый AST?

Да. Кажется здесь придётся велосипедить.

Если нужна теория, то кури формальные языки, грамматики - Хопкрофт, Ульман, например. Или можешь взять готовый парсер для твоего $LANGUAGE_NAME.

Я хотел спросить о функциях временного подчёркивания участков кода, временной смены окраски фона, расцветки.

https://www.gnu.org/software/emacs/manual/html_node/elisp/Changing-Properties...

Понимаю, что гугл мог всё рассказать. Я просто думал есть что-то уровнем повыше - дополнений хоть отбавляй.

Всё равно спасибо.

Для парсинга C/C++ в AST стоит юзать libclang. Код можно писать как минимум на C, C++ и Python.

В модуле irony-mode для emacs схема такая же: буфер и метаданные пакуются в JSON и отправляются внешней программе, написанной на C++, которая парсит код с помощью libclang и возвращает в emacs описание в виде s-exp.

Для парсинга C/C++ в AST стоит юзать libclang.

А он умеет парсить код с макросами и инклудами, например? Или перед этим надо скормить код препроцессору?

А он умеет парсить код с макросами и инклудами, например? Или перед этим надо скормить код препроцессору?

Отдельно вызывать препроцессор не надо. IIRC, в libclang есть минимум 2 api:

• Получение AST. В этом случае информации о макросах не останется.
• Последовательный обход файла, в процессе которого вызываются юзерские колбэки (см. clang_visitChildren). В этом случае можно повесить колбэки на директивы препроцессора и раскрытие макросов.

нужна будет многопоточность https://github.com/kiwanami/emacs-deferred но раскрашиваться с этим хттп будет заторможенно, скорей всего. Закодировать, отправить, обработать, получить, раскодировать + оверхед от ненативной многопоточности ~50ms.

Парсеры тут http://en.wikipedia.org/wiki/Comparison_of_parser_generators

Если будешь свой писать, то самый простой — LL(1), но твои языки он не распарсит.

https://github.com/kiwanami/emacs-deferred

Не пойму как с помощью её содержимое буфера отправлять на сервер.

Решил так:

(defun deferred:url-post-content (url post-data &rest args) 
  (let ((url-request-method "POST")
        (url-request-extra-headers
         (append url-request-extra-headers
                 '(("Content-Type" . "application/x-www-form-urlencoded"))))
        (url-request-data post-data))
    (let ((d (deferred:$
               (apply 'deferred:url-retrieve url args)
               (deferred:nextc it 'deferred:url-delete-header))))
      (deferred:set-next
        d (deferred:new 'deferred:url-delete-buffer))
      d)))

Вот такой код:

(defun my:highlight-background (start end color)
  (hlt-highlight-region start end
                        `((background-color . ,color))))

(defun my:highlight-server-request ()
  (interactive "")
  (deferred:$
    (deferred:url-post-content "http://127.0.0.1:8080/"
      (buffer-string))
    (deferred:nextc it
      (lambda (buf)
        (let ((m (set-marker (make-marker)
                             0
                             buf))) 
          (catch 'loop
            (while t
              (apply #'my:highlight-background
                     (condition-case nil
                         (read m)
                       ((end-of-file) (throw 'loop nil))))))) 
        (kill-buffer buf)))))

Работает вполне всё шустро.

Задача анализа кода полностью эквивалента задаче написания продвинутого компилятора.

Анализ среднестатистических распространенных говноязыков - достаточно сложное занятие, и сложности начинаются с парсинга. Грамматики у среднестатистических говноязыков не контекстно-свободные даже, не говоря уже про LL(1) какие-то, плюс тебе в процессе обхода дерева надо собирать кучу метаинформации, итд.

На емакс-лиспе я бы не советовал это все делать(больно он ущербный), а попрактиковаться сначала взяв в руки какой-нибудь нормальный язык, типа CL.

Для начала прочитай dragon book, чтобы основы знать, ну и далее смотри всякие там статьи на acm, читай всякие умные вики вроде c2, итд. На русском информации крайне мало, сразу предупреждаю, и она часто либо неадекватная, либо устаревшая, либо рассматривающая только простейшие случаи. Основы, вобщем, освоишь за годик, наверное, если стараться. За пару-тройку лет сможешь написать простенький анализатор какого-нибудь Java с выводом типов.

Успехов, так сказать.

(deferred:url-post-content "http://127.0.0.1:8080/"
	(buffer-string))

Ты тут каждый раз отправляешь весь буффер? Оно же загнется на больших файлах

Грамматики у среднестатистических говноязыков не контекстно-свободные даже

Разве? Какие, например? ЕМНИП, даже у ужасных плюсов КС грамматика

Только лексический анализатор. Семантика - контекстно зависимая. Паскаль - идеален, там все ясно сразу на первом проходе. И лисп, да.

можно курнуть исхоники ada-mode %)
http://stephe-leake.org/emacs/ada-mode/emacs-ada-mode.html

Ты тут каждый раз отправляешь весь буффер? Оно же загнется на больших файлах

У меня оно почему-то иногда передаёт обрезанный буфер до некоторой длины.

стоп-стоп! ща я тебе посоветую одного чела и его проект, он 1С код анализировал уже. и довольно успешно.

если интересно, стуканись ко мне, я тебе его контакты скину.

можно так еще

(buffer-substring-no-properties 1 (point-max))

Посмотрел я lex(bison). ИМХО туфта какая-то. Может кто что скажет про различные peg генераторы?

Тебе этот анализатор для одной лишь подсветки нужен?

Понимаю, что мелочно. Но помаленьку в область вхожу, утиль осваиваю.

Не помогает кстати.