O veredicto que ninguém ousa escrever: o sistema antigo estava certo

The €100 Lakehouse — 10/12

Todo o rebuild assume que o legacy está errado. Veredicto escrito: os 12 pagamentos em falta eram reais — "a plataforma perdeu-os; o legacy não os inventou."

Essa frase teve de ser merecida:

→ cada um dos 12 pagamentos de maio surge em 13–30 exports independentes do legacy; 11 dos 12 com fatura emitida; todos com referência MB Way/Multibanco
→ os 12 atletas, procurados na plataforma por seis identificadores — email, telefone, nome, nascimento, NIF. Cada hit aparente resolvia para outra pessoa
→ a sobrecontagem conhecida do legacy, medida: zero em maio

O árbitro: o registo fiscal, externo aos dois — puxar as 11 faturas; confirmar data, valor, cliente. Decisão registada: para maio, vale o total do legacy. O sistema novo está certo no método e errado na população.

Quando dois sistemas discordam, o desempate é um terceiro registo externo a ambos.

Julho mostrou o risco: −16,54%, 5× pior que qualquer outro mês. A série diária: €185 a 11/07, zero linhas de 12 a 18, €65 a 19/07. Não eram vendas fracas — a ingestão tinha morrido. Semear números do legacy teria calado esse alarme para sempre.

A última linha do relatório: €1.502 (17,6%) "atribuído com base em evidência que esta investigação não conseguiu verificar independentemente." Cada "não sabemos" datado, quantificado, delimitado.

Já tiveram de escrever, num rebuild, que o legacy estava certo? Quanto vos custou admiti-lo?

Databricks · dbt · Airflow · Terraform · AWS

P.S. Novo post tech todas as quartas-feiras.

#100EuroLakehouse #DataQuality #EngineeringCulture