Vou construir e otimizar pipelines de etl usando azure data factory e databricks

Algumas informações foram traduzidas automaticamente.

Portugal

Eu falo Português, Inglês
Desenvolvi pipelines ADF para otimizar o processamento de dados. Transformei dados usando Databricks/Snowflake com SQL e Python. Garanti a integridade dos dados no Power BI e realizei uma limpeza minu...
Sobre este Serviço

Descrição:

Vou criar e implementar um pipeline ETL básico para extrair, transformar e carregar dados usando Azure Data Factory ou Databricks. Isso inclui conectar a uma fonte de dados, fazer transformações simples e carregar os dados em um destino final (por exemplo, banco de dados SQL, CSV ou Snowflake).

O que está incluído:

  • Configuração de um pipeline ETL
  • Mapeamento de origem para destino
  • Transformação básica de dados (filtragem, renomear colunas, etc.)
  • Carregamento em um destino
  • Documentação do processo


Estou assumindo que você já possui uma infraestrutura Azure/Databricks configurada.

Idioma:

Inglês

Português

Experiência técnica:

Databricks

Snowflake

Especialidade:

Pipelines de dados

Desenvolvimento de ETL

Setor:

Outros