Notas técnicas
Notas técnicas
Problema, hipótese, implementação e o que ficou de aprendizado.
-
Saúde do dado antes do KPI
Freshness, null rate e unicidade — para não apresentar número com pipeline atrasado.
-
Contratos de dados entre camadas
Schema, freshness e owner — o mínimo para o consumidor não quebrar em silêncio.
-
Kafka vs batch
Quando o job horário basta — e quando o pico de 20 minutos exige evento em fluxo.
-
Bronze, Silver e Gold
Por que o pipeline de delivery tem três camadas — e o que quebra quando se pula uma.
-
Como tornei o pipeline idempotente
Reexecução sem duplicar pedido: estado, chave de negócio e Silver que não cresce duas vezes.