Подготовка данных — это важнейший процесс преобразования необработанных данных в формат, подходящий для анализа или моделирования. В нашей системе мы подготовили некоторую работу по подготовке данных для нашего клиента, чтобы он мог выполнить преобразование перед анализом.
| Тип работы | Применимая метрика | Детализация времени | Уровень сущности | Описание |
| [Новый конвейер] Исправление данных подсчета посещений |
|
|
|
Очистка данных на предмет отсутствующих значений или несоответствий. Значение обновляется в почасовом выражении, а затем агрегируется до дневного значения. |
| [Старый конвейер] Обновление данных подсчета Wi-Fi (ежечасно) |
|
|
|
Очистка данных на предмет отсутствующих значений или несоответствий в значениях подсчета Wi-Fi. Уникальные MAC-адреса по часам и дням будут разными, повторная агрегация не требуется. |
| [Старый конвейер] Обновление данных подсчета Wi-Fi (ежедневно) |
|
|
|
Очистка данных на предмет отсутствующих значений или несоответствий в значениях подсчета Wi-Fi. |
| [Старый конвейер] Реагрегация входных и исходящих данных области |
|
|
|
Повторное агрегирование данных подсчета количества посетителей на территории для повторного выполнения агрегирования почасово и ежедневно для устранения поздних проблем с данными. |
| [Новый конвейер] Исправление исходящих данных для нового часового пояса |
|
|
|
Действия по исправлению неправильно установленного часового пояса. |
| [Новый конвейер] Корректировка исходящих данных для нового рабочего часа |
|
|
|
Действия по устранению неправильной настройки часов работы. |