Институт системного программирования им. В.П. Иванникова РАН


Исследование возможностей применения современных высокопроизводительных архитектур In-Memory Computing (IMC) и интеллектуальных производственных технологий

Начало проекта – 2017 год. Заказчик - Минобрнауки РФ, соглашение № 14.604.21.0199 от 26.09.2017 г.

Полное название: Исследование возможностей применения современных высокопроизводительных архитектур In-Memory Computing (IMC) и интеллектуальных производственных технологий при создании промышленных информационно-аналитических систем высокой доступности и систем обработки больших объемов данных, машинного обучения и искусственного интеллекта.

В 2017 году, на первом этапе проекта, было проведено исследование существующих In-Memory Computing систем и их аналитическое сравнение. На данный момент исследуются заявленные свойства программных систем Apache Ignite и VoltDB. В частности, в рамках исследований проверяется устойчивость данных на высоких нагрузках, корректность исполнения операций, масштабируемость систем и поведение систем в случае потери узлов. Также исследуются возможности прозрачной интеграции упомянутых систем для совместного использования с классическими реляционными системами.

Также на первом этапе за счет внебюджетных средств было проведено исследование существующих подходов и инструментов для сбора и извлечения информации из Веба.

Рассмотрены аспекты краулинга современных веб-сайтов, фокусированного сбора данных, автоматического и автоматизированного извлечения записей из одного или многих веб-ресурсов, а также специфика задач сбора для различных средств разработки веб-приложений.

В данный момент ведется разработка инструментов сбора данных для ряда веб-ресурсов из таких категорий, как социальные сети, онлайн-реестры и каталоги информации.

Также продолжается исследование существующих подходов к противодействию автоматическому краулингу и разработка инструментов их обхода.

Начало проекта: сентябрь, 2017, окончание - декабрь, 2019.

Исполнитель

Информационные системы

Перейти к списку всех проектов