Vou criar pipelines de ETL no azure data factory e migrar dados para adls gen2

Quer migrar seu data warehouse legado on-premise para Azure sem tempo de inatividade? Você está no lugar certo!

Sou um Engenheiro de Cloud & Dados especializado em projetar pipelines de ingestão de dados robustos, de nível empresarial. Vou ajudar você a mover bancos de dados transacionais de grande escala ou configurar cargas incrementais automatizadas de forma eficiente.

O que ofereço:

• Migração de On-Premise para Cloud: Transferência de dados sem interrupções do MS SQL Server para o Azure Data Lake Storage (ADLS Gen2).
• Pipelines Baseados em Metadata: Arquitetura avançada de ADF usando designs Parent-Child e loops ForEach para processamento paralelo.
• Carga Incremental (Lógica de Watermark): Arquitetura de tabela de controle personalizada com T-SQL dinâmico para garantir cargas diárias eficientes sem redundância.
• Particionamento Dinâmico: Estruturação de hierarquias de diretórios limpas usando expressões do ADF e armazenamento de dados em formato Parquet comprimido com Snappy de alto desempenho.
• Configuração de IR Auto-Hospedado: Configuração completa do SHIR e resolução de problemas complexos de JRE/JVM.

Pilha de Tecnologia: Azure Data Factory (ADF), ADLS Gen2, MS SQL Server, T-SQL, Parquet.

Por favor, entre em contato comigo antes de fazer seu pedido para discutir os requisitos do seu projeto!