Ver categorias
Explorar
Fiverr Pro
Português
$
USD
Vou fazer engenharia de big data com pyspark, kafka, airflow, AWS etl e mongodb
Engenheiro de backend e IA: FastAPI, AWS, RAG, soluções de LLM
Oi, eu sou o shoaib, um especialista em Python com experiência comprovada na entrega de projetos de alta qualidade em aprendizado de máquina, aprendizado profundo, big data (Hadoop, Spark, Kafka) e au...
Sobre este Serviço
Você está procurando um engenheiro de dados para te ajudar com projetos de big data, pipelines ou análises?
Você está no lugar certo. Sou um engenheiro de big data profissional com experiência em Hadoop, Spark, Kafka, Hive, PySpark, Scala e serviços de nuvem AWS.
Vou fazer seus projetos, construir pipelines de dados, jobs ETL, clusters e análises usando ferramentas padrão da indústria e melhores práticas.
Especialização em tarefas de dados:
- Desenvolvimento com PySpark e Spark
- Configuração e otimização de clusters Hadoop
- Pipelines de streaming de dados com Kafka
- Consultas Hive e Spark SQL
- Orquestração com Airflow e agendamento de DAG
- Desenvolvimento, testes e implantação de jobs ETL
- Modelagem e agregação de dados com MongoDB
- Serviços AWS (S3, Glue, EMR, Redshift)
- Análises e relatórios de big data
Por que comprar este serviço?
- Engenheiro de Big Data com experiência real em projetos
- Código limpo, documentado e pronto para produção
- Entrega rápida e confiável no prazo
- Flexível com ferramentas e requisitos do projeto
- Consulta gratuita e suporte pós-entrega
Vou construir pipelines confiáveis, otimizar clusters e transformar seus dados brutos em análises poderosas usando Hadoop, Spark, Kafka, PySpark e AWS.
Tags relacionadas: #BigData #DataEngineer #Spark #PySpark #Hadoop #Kafka #Airflow #AWS #ETL
Meu portfólio
Perguntas frequentes
Tradução automática
Quais tecnologias de big data você usa em seus projetos de engenharia de dados?
Trabalho com ferramentas líderes do mercado de big data, incluindo Hadoop, Spark, Kafka, Hive e PySpark. Essas tecnologias me permitem criar soluções escaláveis de engenharia de dados, construir pipelines eficientes e processar grandes conjuntos de dados para análises.
Você consegue construir pipelines de dados de ponta a ponta usando Hadoop e Spark?
Sim, sou especializado em construir pipelines completos de big data usando Hadoop e Spark. Desde a ingestão de dados até transformação e armazenamento, crio fluxos de ETL confiáveis, personalizados às suas necessidades de negócio.
Você oferece soluções de streaming de dados em tempo real com Kafka?
Com certeza. Desenvolvo pipelines de streaming de dados em tempo real usando Kafka, permitindo que você processe e analise dados em fluxo de forma eficiente para casos de uso como monitoramento, análises e sistemas orientados a eventos.
Que tipos de serviços de engenharia de dados você oferece?
Ofereço uma ampla gama de serviços de engenharia de dados, incluindo desenvolvimento de ETL, processamento de big data, configuração de clusters Hadoop, otimização de Spark, integração com Kafka e soluções de análise de dados.
Você consegue otimizar clusters existentes de Hadoop ou Spark? Sim
Sim, posso analisar e otimizar sua infraestrutura existente de Hadoop ou Spark para melhorar o desempenho, reduzir o tempo de processamento e garantir uso eficiente dos recursos.
Você trabalha com PySpark para processamento de big data?
Sim, PySpark é uma das minhas principais habilidades. Uso extensivamente para construir fluxos de trabalho escaláveis de engenharia de dados, realizar transformações de dados e lidar com tarefas de processamento de big data em grande escala.
Como você garante a qualidade e confiabilidade dos dados em pipelines de ETL?
Sigo as melhores práticas em engenharia de dados, como verificações de validação, registros, tratamento de erros e testes, para garantir alta qualidade de dados e pipelines de ETL confiáveis usando ferramentas como Spark, Hadoop e Kafka.
Avaliações
2 avaliações deste Serviço
| (1) | ||
| (1) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
Mais relevante
M moozabh
Emirados Árabes Unidos
The individual demonstrated exceptional technical ownership throughout the lifecycle of the Project. They are a high-trust contributor who consistently delivers "production-ready" results.!
3 dias
Tempo
Útil?N nicholasjohn10
Estados Unidos
Outstanding work on my big data project. The seller demonstrated deep knowledge of tools like Hadoop and Spark, delivered everything on time, and ensured accuracy throughout. Highly recommendations
1 dia
Tempo
Útil?
Avaliações
2 avaliações deste Serviço
| (1) | ||
| (1) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
Mais relevante
M moozabh
Emirados Árabes Unidos
The individual demonstrated exceptional technical ownership throughout the lifecycle of the Project. They are a high-trust contributor who consistently delivers "production-ready" results.!
3 dias
Tempo
Útil?N nicholasjohn10
Estados Unidos
Outstanding work on my big data project. The seller demonstrated deep knowledge of tools like Hadoop and Spark, delivered everything on time, and ensured accuracy throughout. Highly recommendations
1 dia
Tempo
Útil?
