Eu farei criação profissional de ETL de engenharia de dados
Engenharia de Dados AWS GCP PYTHON
Sobre este Serviço
Desenvolvedor de ETL baseado na nuvem (AWS + GCP) | Pipelines de dados | Automação | Big Data
Você está procurando um desenvolvedor confiável de ETL na nuvem para construir, automatizar ou otimizar suas pipelines de dados na AWS ou Google Cloud?
Eu ajudo empresas a projetar workflows de ETL escaláveis, otimizados em custo e prontos para produção usando ferramentas modernas nativas da nuvem.
O que posso fazer por você
Construir pipelines de ETL/ELT de ponta a ponta (batch ou streaming)
Migrar jobs de ETL on-premises para AWS / GCP
Integrar APIs, bancos de dados, data lakes, ferramentas SaaS
Transformar e limpar dados usando Python, SQL, dbt, Pandas
Orquestrar workflows usando Airflow / Cloud Composer / Step Functions
Desenvolver pipelines de streaming usando Pub/Sub / Kinesis
Criar ETL serverless usando Lambda / Cloud Functions
Construir soluções de Data Lakehouse usando BigQuery / Redshift / Athena
CI/CD para ETL (GitHub Actions, Cloud Build, CodePipeline)
Stack de nuvem com a qual trabalho
AWS
- AWS Glue, Lambda, Step Functions
- S3, Redshift, Athena, EMR
- API Gateway, EventBridge
- DynamoDB, RDS, Aurora
GCP
- Cloud Composer (Airflow)
- Cloud Functions, Cloud Run
- Cloud Storage
- Pub/Sub
Entregáveis que você receberá
- Pipeline de ETL pronto para produção
Tecnologia:
apache spark
•
Python
•
SQL
•
Snowflake
•
NoSQL
•
Apache Airflow
