Разработка и тестирование алгоритмов на основе машинного обучения для семантической обработки текстов на живом языке для автоматизации аналитической деятельности

Цель: разработка и тестирование алгоритмов на основе машинного обучения для семантической обработки текстов на живом языке для автоматизации аналитической деятельности. Задачи: исследование и проектирование семантических алгоритмов обработки текстов на живом языке; разработка внутреннего представления для хранения результатов в виде тензоров, таблиц и графов, хранения и анализа полученных результатов; разработка и отладка функций, реализующих алгоритмы обработки и функции хранения результатов, а также эффективных алгоритмов исполнения функций; исследование и выбор инструментов для визуализации результатов; сборка библиотек функций и тестирование алгоритмов и функций из собранных библиотек; разработка руководства пользователя. Проведены экспериментальные исследования существующих алгоритмов и методов обработки текстов на естественном языке. Определены требования к их доработке и реализации новых алгоритмов и методов с учетом эффективного исполнения. Разработаны семантические алгоритмы обработки текстов, проведен анализ их эффективности алгоритмов, выявлены их «слабые» места, и намечены работы по повышению их эффективности. Специфицированы библиотеки Morphology, Semantics.Core и Semantics.Algorithms, а также команды обработки запросов Semantics.Controllers. Разработана структура хранилища для внутреннего представления (тензоры, таблицы, графы), и определены методы и инструменты работы с ним, а также инструменты для визуализации объектов внутреннего представления. Данные библиотеки использованы в разработанном прототипе семантического ассистента, который использован при выполнении договоров для обработки данных, анализа и сохранения информации. Поданы две заявки на государственную регистрацию программы для ЭВМ (библиотеки Morphology и Semantics.Core).