Vou construir pipeline de ETL geoespacial

Algumas informações foram traduzidas automaticamente.

Paquistão

Eu falo Inglês

Engenheiro de Dados e IA

Sou engenheiro de Dados e IA com mais de 5 anos de experiência construindo pipelines de ETL para diversas fontes de dados, incluindo dados geoespaciais, financeiros e de saúde. Especializo-me em proce...
Sobre este Serviço

Você está lidando com dados geoespaciais que demoram uma eternidade para processar ou travam sua máquina?

Eu construo pipelines de dados geoespaciais limpos e confiáveis, sem horas de depuração de tiles raster, erros de memória e dores de cabeça com formatos.

O que eu ofereço:

  • Mais de 3 anos construindo pipelines de produção processando dezenas de milhões de registros
  • Processamento otimizado de tiles raster com leituras em janelas, fluxos de trabalho em chunks, conversões de formato que não travam às 3 da manhã
  • Experiência com datasets EO (Copernicus, Sentinel) e dados socioeconômicos (US Census, Banco Mundial, Eurostat)
  • Implantações em produção na AWS e Snowflake

Com o que posso trabalhar:

  • Qualquer formato GeoTIFF, Shapefile, GeoJSON, CSV, Parquet, feeds de API
  • Qualquer banco de dados de destino, S3, arquivos planos, dashboards

O que você vai receber:

  • Código Python limpo e documentado
  • Dados validados e transformados prontos para análise
  • Fluxos de trabalho otimizados que não vão consumir toda a sua RAM
  • Entrega clara com instruções

Nota: Sem streaming em tempo real ou aplicativos móveis.

Não tem certeza de qual pacote é o ideal? Me envie uma mensagem primeiro!

Especialidade:

Integração via API

Big data

Validação de dados

etl

Tecnologia:

Amazon Redshift

apache spark

Python

SQL

Snowflake