Eu vou fazer orquestração do azure data factory e automação de qualidade e validação de dados

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Hindi, Inglês
Sou um Engenheiro de Dados & Analista especializado em Azure, Databricks, Synapse, Data Lake e Microsoft Fabric. Eu projeto e implemento pipelines de ETL na nuvem de ponta a ponta, migrando e transfor...
Sobre este Serviço

Vou criar pipelines do Azure Data Factory que automatizam sua extração, transformação e carregamento de dados. Inclui agendamento, tratamento de erros e ajuste de desempenho.

FAQ:

P: Você consegue integrar ADF com Databricks?

R: Sim, posso acionar notebooks do Databricks de forma integrada ao ADF.


&


Vou criar scripts automatizados de validação de dados usando Python ou Databricks, integrados ao Azure Data Factory para monitoramento de qualidade e alertas.

FAQ:

P: Você consegue adicionar alertas por email ou Teams?

R: Sim, usando Azure Logic Apps ou ADF Web activity.

Idioma:

Inglês

Experiência técnica:

apache spark

Databricks

Especialidade:

Pipelines de dados

Desenvolvimento de ETL

Setor:

Data analytics

Serviços financeiros