Поисковый модуль

Поисковый модуль осуществляет поиск контента в сети Интернет с помощью фреймворка Scrapy и библиотеки скриптов. После извлечения, структурированные данные отправляются на сервер Solr. Дальнейший доступ к полученным данным осуществляется через специальный интерфейс, встроенный в ИС “Семограф”, с возможностью непосредственного импорта данных из Solr в проект “Семографа”. Поисковый модуль также позволяет выполнить следующие действия:

1. Используя платформу Solr, осуществлять поиск по ключевым словам;
2. Формировать таблицу статистических данных по ключевым словам;
3. Осуществлять кластерный анализ на основе статистических данных;
4. Формировать графическое представление результата кластерного анализа;
5. Передавать данные в Проект Семографа.