Eu vou construir pipelines de dados em pyspark e databricks

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Inglês, Hindi

Analista Programador

Sou graduado em Ciência da Computação com sólida formação em Tecnologias de Nuvem, Data Stewardship e Gestão de Banco de Dados. Possuo habilidades em Python, Serviços Azure e Segurança de Rede, com pa...
Sobre este Serviço

Você está procurando pipelines de dados robustos e de alto desempenho, prontos para escalar?


Eu me especializo em criar, otimizar e automatizar pipelines ETL/ELT de ponta a ponta usando PySpark, Databricks e arquiteturas modernas de dados em nuvem. Quer você precise ingerir arquivos crus bagunçados, transformar conjuntos de dados complexos ou migrar dados estruturados, entrego soluções confiáveis e prontas para produção.


Serviços oferecidos:


1. Design de pipeline ETL/ELT personalizado e automação de fluxos

2. Processamento e transformação de dados em grande escala com PySpark e Databricks

3. Afinamento de consultas SQL, validação de dados e deduplicação

4. Integração com armazenamento em nuvem (Azure Data Lake, Synapse, Databricks Lakehouse)

5. Integração de APIs, testes e fluxos de ingestão automatizados

6. Migração de dados de ponta a ponta e suporte à governança


Pilha tecnológica:

Databricks, Apache Spark / PySpark, Azure Synapse, ADLS, Python, SQL, REST APIs / Postman.


Por que trabalhar comigo?


Experiência prática em engenharia de dados corporativos e gestão de dados

Código limpo, modular e bem documentado

Entrega pontual com comunicação clara


Por favor, me envie uma mensagem com seus requisitos de projeto e dados de amostra antes de fechar o pedido para definirmos o melhor escopo!

Idioma:

Inglês

•

Hindi

Experiência técnica:

Informática

•

apache spark

•

Databricks

Especialidade:

Pipelines de dados

•

Desenvolvimento de ETL

Setor:

Biotecnologia

•

Segurança Cibernética

•

Data analytics