Парсинг Big Data Архитектура

DataMiner

Система сбора данных

Клиент: DataFlow Analytics
DataMiner

О проекте

Highload-система парсинга и агрегации данных с 500+ источников. Обработка 2 млн записей в час с автоматической очисткой и нормализацией.