Capítulo 12: Preparação de Dados

A preparação de dados é um processo crucial na transformação dos dados brutos em um formato adequado para análise ou modelagem. Em nosso sistema, já preparamos algum trabalho de preparação de dados para que nosso cliente realize a transformação antes da análise.

Tipo de Trabalho Métrica Aplicável Granularidade de tempo Nível de entidade Descrição
[Novo pipeline] Patch de dados de contagem de passos
  • [PFC01_1] Contagem de passos IN_Todas as pessoas
  • [PFC02_1] Contagem de passos_Todas as pessoas
  • Por hora e depois reagregado para Diário
  • Local
Limpeza de dados para valores ausentes ou inconsistências. Valor atualizado em valor horário e posteriormente reagregado em valor diário.
[Old Pipeline] Patch de dados de contagem de WiFi (por hora)
  • [PWA01] Tráfego externo
  • De hora em hora
  • Local
Limpeza de dados para valores ausentes ou inconsistências no valor de contagem de WiFi. O MAC exclusivo por hora e por dia será diferente, sem necessidade de reagregação.
[Old Pipeline] Patch de dados de contagem de WiFi (diariamente)
  • [PWA01] Tráfego externo
  • Diário
  • Local
Limpeza de dados para valores ausentes ou inconsistências no valor de contagem de WiFi.
[Old Pipeline] Reagregação de dados de entrada/saída de área
  • [PFC01_1] Contagem de passos IN_Todas as pessoas E [PFC02_1] Contagem de passos_Todas as pessoas
  • Por hora e diariamente
  • Área
Reagregação de dados de contagem de passos da área, para executar novamente a agregação horária e diária, para corrigir problemas de dados atrasados.
[Novo pipeline] Correção de dados de entrada para novo fuso horário
  • [PFC01_1] Contagem de passos IN_Todas as pessoas E [PFC02_1] Contagem de passos_Todas as pessoas
  • Por hora e depois reagregado para Diário
  • Local
  • Área
Etapas corretivas para configuração incorreta de fuso horário.
[Novo pipeline] Correção de dados de entrada e saída para novo horário de operação
  • [PFC01_1] Contagem de passos IN_Todas as pessoas E [PFC02_1] Contagem de passos_Todas as pessoas
  • Por hora e depois reagregado para Diário
  • Local
  • Área
Etapas corretivas para ajuste incorreto de horas de operação.

 

Atualizado em março 19, 2024