Vou construir data lakehouse empresarial, databricks, engenharia de dados e pipeline de etl

Algumas informações foram traduzidas automaticamente.

Ajay Bidyarthy

Índia

Eu falo Inglês

1 pedido finalizado

Engenheiro de IA FD, Python, MLOps, LLM, Neo4j, Grafana, Logstsh, AWS Bedrock, REST

Sou um Engenheiro de IA sênior e Cientista de Dados especializado em Python, IA/ML, Engenharia de Dados e automação inteligente, ajudando empresas a transformar dados complexos em soluções escaláveis ...

Saiba mais

Sobre este Serviço

Descrição do projeto:

Eu projetei e desenvolvi um Data Lakehouse de nível empresarial usando Databricks para centralizar, processar, transformar e gerenciar dados de múltiplas fontes. Construi pipelines escaláveis de ETL/ELT usando PySpark e SQL, implementei fluxos de trabalho de ingestão e transformação de dados, e organizei os dados em camadas estruturadas para análises e relatórios.

Pilha de tecnologia:

Databricks & Apache Spark
PySpark & Python
SQL
Azure Data Lake Storage
ETL/ELT
Arquitetura Data Lakehouse
Delta Lake
Azure Data Factory
Power BI

Impacto no negócio:

Construí uma plataforma de dados escalável e centralizada para análises empresariais
Automatizei fluxos de trabalho de ingestão e transformação de dados
Melhorei a qualidade, consistência e acessibilidade dos dados
Reduzi o processamento manual de dados e a manutenção de pipelines
Permiti relatórios de negócios mais rápidos e confiáveis e decisões baseadas em dados

Saiba mais