No curso Criando um pipeline de ingestão de dados, em 5. 01 Criando pipeline, mostra o data factory uma forma de ETL mais simples, sem ter que codificar, essa forma não pode ser usada para transformação de dados?
No curso Criando um pipeline de ingestão de dados, em 5. 01 Criando pipeline, mostra o data factory uma forma de ETL mais simples, sem ter que codificar, essa forma não pode ser usada para transformação de dados?
Oi, Renata, tudo bem?
No decorrer deste curso, estamos explorando o Databricks para realizar a transformação de dados. É importante ressaltar que o Data Factory também é capaz de executar transformações de dados, mas geralmente é mais empregado na orquestração e automação do fluxo de dados.
Optamos pelo Databricks com fins estritamente didáticos, já que a programação direta nos proporciona mais flexibilidade para lidar com manipulações de dados complexas.
A escolha entre Databricks e Data Factory pode depender das preferências individuais e dos requisitos específicos de cada usuário, considerando fatores como a interface mais amigável.
Espero que essas informações sejam úteis para os seus estudos!
Abraços e até mais!