Vou criar pipelines de dados no snowflake com snowpipe, streams, tasks e tabelas dinâmicas
Engenheiro de dados
Sobre este Serviço
Precisa de dados no Snowflake que se carregam automaticamente, atualizam apenas o que mudou e nunca contam duas vezes? Eu construo pipelines dentro do Snowflake usando SQL simples, sem precisar de ferramentas extras para pagar ou manter.
O que eu construo:
- Ingestão: estágios, formatos de arquivo e Snowpipe de ingestão automática do S3, Azure Blob ou Google Cloud Storage
- Captura de mudanças: Streams + Tasks com MERGE upserts e desduplicação
- Histórico: dimensões SCD Tipo 2 para clientes, produtos ou contas
- Camada de relatórios: Tabelas dinâmicas para marts diários e mensais
- Qualidade dos dados: verificações de nulos, duplicados, chaves órfãs e atualização
- Monitoramento: histórico de tarefas, alertas de falhas por e-mail e limites de custo
Como eu trabalho:
- Concordamos as fontes, tabelas e horários de atualização
- Construo em um schema de desenvolvimento e testo com seus dados de exemplo
- Você revisa os resultados e o histórico de execuções
- Entrega com um runbook e diagrama
Você recebe SQL versionado, um diagrama do pipeline, resultados de testes e documentação.
Já usa Fivetran, ADF ou SSIS? Posso pegar os dados de onde eles chegam.
Meu portfólio
Outros serviços de Engenharia de Dados que eu ofereço
Perguntas frequentes
Tradução automática
Por que criar pipelines no Snowflake em vez de outra ferramenta?
Snowpipe, Streams, Tasks e Tabelas Dinâmicas rodam dentro da sua conta, então não há licença extra ou servidor. Eles são uma boa opção quando as fontes podem enviar arquivos ou quando os dados já estão no Snowflake.
Você consegue carregar dados diretamente de APIs ou bancos de dados?
Sim. Para bancos de dados e APIs, uso sua ferramenta existente (ADF, Fivetran, SSIS) ou um script agendado pequeno para colocar os arquivos em um stage, e aí o Snowflake cuida do resto.
Com que frequência meus dados ficarão atualizados?
Snowpipe geralmente carrega os arquivos minutos após chegarem. Tasks podem rodar a cada minuto, e as Tabelas Dinâmicas seguem o atraso que você escolher, por exemplo 15 minutos ou 1 hora.
Isso vai aumentar minha conta no Snowflake?
Tasks só ativam o warehouse quando uma stream tem dados novos, e eu uso o menor warehouse que atende ao tempo necessário. Você recebe uma estimativa de créditos diários antes do início.
O que acontece se uma carga falhar?
Tasks que falham enviam um alerta por e-mail, a stream mantém as mudanças não processadas, e a próxima execução as pega. O runbook explica como verificar e reexecutar cada etapa.
1 avaliações deste Serviço
| (1) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
A adityapons

Estados Unidos
Colaboração contínuadelivered high quality work with strong understanding of business requirements
US$ 200-US$ 400
$
1 dia
Tempo
A 
Resposta do freelancer
Útil?
1 avaliações deste Serviço
| (1) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
A adityapons

Estados Unidos
Colaboração contínuadelivered high quality work with strong understanding of business requirements
US$ 200-US$ 400
$
1 dia
Tempo
A 
Resposta do freelancer
Útil?

