Vou construir pipelines de dados automatizados com python, sql e dbt

Precisa que seus dados sejam coletados, limpos e mantidos atualizados automaticamente? Eu crio pipelines de dados que funcionam sozinhos, para você ter dados sempre frescos e confiáveis.

O QUE EU CONSTRÓI

- Extração de APIs e arquivos com Python

- Carregamento no PostgreSQL

- Limpeza e modelagem com dbt, com testes de qualidade de dados

- Automação diária com GitHub Actions, não precisa de servidor

- Um dashboard ao vivo no Streamlit que você pode abrir com um link e também para qualquer destino final de sua escolha

PROVA DE FUNCIONAMENTO

Eu criei e gerencio o Nigeria Data Jobs Tracker: ele puxa as vagas todos os dias, limpa com dbt e atualiza automaticamente um painel público.

Demonstração ao vivo: nigeria-job-market-tracker-c2dqzraz9ouopa9qo4cgnt.streamlit.app

COMO EU TRABALHO

- Você me diz a sua fonte de dados e o que quer ver

- Eu builds o pipeline e entrego o código

- Testes rodam em cada atualização, então dados ruins são pegos antes de chegar ao seu dashboard

Ferramentas: Python, SQL, PostgreSQL, dbt, GitHub Actions, Streamlit, Docker.

Me manda uma mensagem antes de pedir com uma descrição curta dos seus dados, e eu vou indicar o pacote certo.