Vou construir um pipeline de dados, web scraper, com python, sql, etl, elt, dbt

Sou um Engenheiro de Banco de Dados com expertise comprovada na criação de ferramentas de automação robustas usando Python e Node.js. Especializo-me em extrair dados estruturados e não estruturados de APIs, endpoints internos e sites dinâmicos, transformando-os em formatos utilizáveis como Excel, CSV e JSON. Minhas ferramentas utilizam Cheerio, Axios, ExcelJS, Puppeteer, BeautifulSoup e Pandas, projetadas para lidar com nulos, limitar requisições e recuperar de problemas de rede, tudo isso mantendo a precisão e consistência dos dados.

Além de scraping, projeto pipelines de dados de ponta a ponta que automatizam a coleta, transformação e armazenamento de dados para saídas prontas para análise. Meus ambientes Dockerizados garantem portabilidade entre sistemas, e meu trabalho com parsing de HTML, interação com APIs e fluxos estruturados de ETL prepara equipes para escalar de forma eficiente. Se você precisa automatizar coleta manual de dados, analisar feeds de API ou construir um sistema de scraping que alimenta seu fluxo de dados, estou pronto para dar vida aos seus dados.