Сегодня вышла в свет новая версия библиотеки для препроцессинга текстов (natural language processing) — FreeLing 3.1.

Основные изменения относительно предыдущей версии:

• Потокобезопасность (можно запускать параллельно обработчики для нескольких языков).
• Расширенное API.
• Исправление\поиск похожих слов.
• Регулярные выражения теперь из boost`a, (boost::regex, boost::xpressive) на выбор.
• Поддержка новых языков (французский, чешский, словенский).
• Упрощенная инсталляция и сборка.
• Документация дополнена примерами.

( читать дальше )

>>> ссылка на оф. сайт

Наконец-то вышла OpenSource-библиотека для обработки текста FreeLing 3.0. Основные возможности FreeLing:

• разметка текста (токенизация);
• выделение предложений;
• морфологический анализ;
• определение составных слов;
• вероятностное определение части речи неизвестного слова (hmm tagger);
• обнаружение и определение именной группы;
• классификация именной группы;
• построение дерева зависимостей (слов в предложении);
• определение местоимений (местоименных словоформ);
• нормализация и определение дат, чисел, процентных соотношений, валюты и физических величин (скорость, вес, температура, плотность и т. д.);
• определение части речи (вероятностное).

>>> FreeLing homepage