Поисковый модуль — различия между версиями
Baranov (обсуждение | вклад) м (1 версия: Восстановленная версия) |
Belousov (обсуждение | вклад) |
||
Строка 1: | Строка 1: | ||
Поисковый модуль осуществляет поиск контента в сети Интернет с помощью фреймворка Scrapy и библиотеки скриптов. | Поисковый модуль осуществляет поиск контента в сети Интернет с помощью фреймворка Scrapy и библиотеки скриптов. | ||
− | После извлечения, структурированные данные отправляются на сервер [http://lucene.apache.org/solr/ | + | После извлечения, структурированные данные отправляются на сервер [http://lucene.apache.org/solr/Apache Solr]. |
Дальнейший доступ к полученным данным осуществляется через специальный интерфейс, встроенный в ИС “Семограф”, с возможностью непосредственного импорта данных из Solr в проект “Семографа”. | Дальнейший доступ к полученным данным осуществляется через специальный интерфейс, встроенный в ИС “Семограф”, с возможностью непосредственного импорта данных из Solr в проект “Семографа”. | ||
Поисковый модуль также позволяет выполнить следующие действия: | Поисковый модуль также позволяет выполнить следующие действия: |
Версия 18:29, 4 сентября 2014
Поисковый модуль осуществляет поиск контента в сети Интернет с помощью фреймворка Scrapy и библиотеки скриптов. После извлечения, структурированные данные отправляются на сервер Solr. Дальнейший доступ к полученным данным осуществляется через специальный интерфейс, встроенный в ИС “Семограф”, с возможностью непосредственного импорта данных из Solr в проект “Семографа”. Поисковый модуль также позволяет выполнить следующие действия: 1) используя платформу Solr, осуществлять поиск по ключевым словам; 2) формировать таблицу статистических данных по ключевым словам; 3) осуществлять кластерный анализ на основе статистических данных; 4) формировать графическое представление результата кластерного анализа; 5) передавать данные в Проект Семографа.