Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Vou construir soluções de engenharia de dados usando azure
Web scraper e Engenheiro de Dados
Tenho mais de 4 anos de experiência profissional em web scraping com Python, tendo criado mais de 300 crawlers personalizados para diversos sites. Sou altamente habilidoso em Scrapy, Selenium, Seleniu...
Nível 2
Atendeu a critérios de alto desempenho e tem um histórico comprovado de atendimento às expectativas dos clientes.
Sobre este Serviço
Procurando um engenheiro de dados para criar pipelines de ETL confiáveis no Azure? Eu projeto e implemento soluções de dados de ponta a ponta usando Azure Data Factory (ADF), Azure Databricks e Medallion Architecture para ingerir, transformar e gerenciar seus dados de forma eficiente.
Serviços que Ofereço:
- Ingestão de Dados: APIs, CSV, Excel, bancos de dados, armazenamento em nuvem
- Transformação de Dados: Databricks (PySpark/SQL), ADF Data Flows (filtro, agregação, seleção, coluna derivada, alteração de linha, junções)
- Pipelines ETL com Medallion Architecture (Bronze, Silver, Gold)
- Atividades ADF: Copiar Dados, ForEach, Lookup, Web, Stored Procedures
- Agendamento & Gatilhos: baseados em tempo, armazenamento e eventos
Por que me escolher?
- Grande expertise em ADF & Azure Databricks
- Pipelines ETL otimizados e escaláveis
Ferramentas e plataformas:
Fábrica de dados do Azure
•
Outros
Meu portfólio
Perguntas frequentes
Tradução automática
O que você precisa de mim para começar?
Vou precisar de acesso à sua assinatura do Azure (ou um grupo de recursos dedicado), detalhes sobre suas fontes de dados (APIs, bancos de dados, arquivos, etc.) e seus requisitos para transformações e armazenamento.
Você consegue montar pipelines ETL simples e complexos?
Sim! Posso criar desde um pipeline básico no ADF com gatilhos agendados até fluxos de trabalho avançados de ETL no Azure Databricks usando a Medallion Architecture (Bronze, Silver, Gold).
Você também faz transformações de dados?
Com certeza. Uso ADF Data Flows (filtro, agregação, junções, colunas derivadas, alteração de linhas, etc.) e Databricks (PySpark/SQL) para transformações personalizadas.
Você consegue integrar com meus bancos de dados ou APIs existentes?
Sim. Posso ingerir dados de APIs, CSV, Excel, bancos de dados SQL e armazenamento em nuvem no Azure, garantindo uma integração tranquila com seus sistemas atuais.
