Умный парсинг с аналитикой и визуализацией.

Решение сложных бизнес-задач по поиску, сбору и анализу данных из открытых источников и документов

Мониторинг СМИ и социальных сетей. Анализ социально-политических процессов.

Медиааналитика —

OSINT: поиск, сбор и анализ сведений из открытых источников данных в Интернете.

Анализ объекта —

Поиск незаконного контента, нарушений патентов, прав на интеллектуальную собственность.

Обеспечение безопасности —

Мониторинг динамики и анализ рынков, цен. Парсинг маркетплейсов. Конкурентный анализ.

Маркетинговые исследования —

Бизнес-решения по сбору и анализу данных

Автоматизация процессов поиска, сбора и анализа текстовых данных

Классификация и анализ неструктурированных данных, сайтов

Поиск смыслов в анализируемых текстовых данных

Набор обученных нейросетевых моделей и алгоритмов для типовых задач

Набор готовых парсеров и коннекторов к источникам данных

Интеллектуальная автоматизация

Актуальные отчёты в удобном формате

Мы предлагаем услуги по поиску, сбору и анализу данных из интернета, корпоративных источников и документов для формирования информационной базы об объекте поиска.

Как эксперты в области поиска и анализа данных, мы располагаем солидным портфелем из более, чем 50 успешных решений для крупных компаний, в числе которых банки, органы власти и управления, известные производственные и ИТ-компании.

Источники парсинга

Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга
Источники парсинга

Технолологии: Peraspera Data Hunter

Платформа для автоматизации и управления поиском, сбором и анализом данных в интернете и корпоративных источниках, основные функции которой:

Поиск и сбор данных
Интеграция данных
Потоковая обработка данных
Хранение данных
Визуальная аналитика

Реестровая запись №18120 от 29.06.2023 в Реестре российского ПО.

Свидетельство о госрегистрации №2022682815 от 28.11.2022 в Реестре программ для ЭВМ.

Страница платформы: eclsoft.ru/products/data-hunter

Производительность

Количество запросов к 1 ресурсу: сайты, домен вместе с поддоменами: 2 запроса в секунду

Количество запросов к 1 ресурсу: анонимизация и обход блокировок: 1 запрос за 5 секунд

Количество запросов к социальным сетям: 5 запросов в секунду

Количество запросов за 24 часа: 12 миллионов

Количество загруженных страниц за 24 часа: 8 миллионов

Объём загруженных данных за 24 часа / за 1 секунду: 1.071 Тб / 12.3 Мб

Одновременное количество запрашиваемых ресурсов: 80

Занимаемая полоса канала: 200 Мбит/сек, в пике 400

Показатели могут масштабироваться в зависимости от потребностей и целей проекта

Кейсы

Обеспечение безопасности

Федеральные регуляторы

Обеспечение безопасности

Финансовый сектор

Мониторинг СМИ и соцсетей

Социальный сектор

Управление отраслью, городом, регионом, компанией

Госсектор: цифровой двойник территории

Управление производством и корзиной потребителя

Товары широкого потребления

Бесконтактная социология
Мониторинг качества ведения образовательной деятельности
Экспресс скоринг качества ведения образовательной деятельности (ССУЗ)

Кадры и образование

Мониторинг, анализ, прогноз мощностей теплогенерации
Анализ эффективности объектов муниципальной недвижимости с поиском аномалий и зависимостей

Энергетика

Анализ производственной устойчивости заёмщиков – юрлиц
Анализ эффективности мероприятий по выделению субсидий и предоставлению налоговых льгот

Сельское хохяйство

Как мы работаем

Этап 1: Консалтинг

Выявление и формализация тематических потребностей, определение временных, функциональных границ и объёмов проекта

Выявление и исследование источников, содержащих тематические данные, создание краулера — поискового робота

Исследование семантики: итерационное изменение слов и словарных фраз до получения необходимого результата

Формирование и исследование аналитических гипотез, как набора единичных и взаимоувязанных алгоритмов обработки данных

Настройка инструментов поиска, сбора, хранения, обработки и визуализации данных в целях подготовки сервиса к эксплуатации

Обучение сотрудников Заказчика в соответствии с ролевым составом платформы Peraspera Data Hunter

Этап 2: Эксплуатация

Техническая поддержка, исправление ошибок, расширение функциональности платформы Peraspera Data Hunter

Адаптация краулеров, алгоритмов обработки, средств обхода блокировок под динамические изменения в источниках данных

Законность парсинга

В соответствии с действующим законодательством РФ разрешено всё, что не запрещено Законом. Парсинг сайтов является законным, если не происходит нарушений запретов, установленных законодательством РФ.

Организация вправе осуществлять автоматизированный сбор информации в открытом доступе на сайтах в сети интернет при соблюдении условий:

Информация находится в открытом доступе и не защищается законодательством об авторских и смежных правах.
Автоматизированный сбор осуществляется законными способами.
Автоматизированный сбор информации не приводит к нарушению работы сайтов.
Автоматизированный сбор информации не приводит к ограничению конкуренции.