A metodologia ideal é a linhagem de dados a nível de coluna, devido a importância dos dados e a possibilidade de um rastreameno mais detahado das informações de origem e transformações.
A metodologia ideal é a linhagem de dados a nível de coluna, devido a importância dos dados e a possibilidade de um rastreameno mais detahado das informações de origem e transformações.
Olá, Gabriela! Como vai?
Sua resposta está certíssima! A escolha pela linhagem a nível de coluna (também conhecida como column-level lineage) é a decisão mais estratégica quando lidamos com setores sensíveis, como o de alimentos (cereais e laticínios).
Em governança de dados, quanto maior a necessidade de conformidade e precisão, mais "profundo" precisamos mergulhar no mapeamento.
Existem três níveis principais de linhagem, e a sua escolha se destaca pelos seguintes motivos:
Imagine que o sistema de laticínios tenha uma coluna temperatura_armazenamento.
Sem a linhagem a nível de coluna, seria muito difícil identificar em qual etapa da transformação uma possível falha de cálculo ocorreu. Com a sua metodologia, o rastreio é imediato.
Parabéns pela análise técnica! Dominar a granularidade da linhagem é um passo fundamental para qualquer profissional que deseja atuar com Engenharia de Dados e Governança.
Espero que possa ter lhe ajudado!
Na sua opinião, qual seria o maior desafio técnico para manter essa linhagem atualizada em um ambiente que muda constantemente?