Vou construir um pipeline de dados de mercado personalizado em python e polars
Arquiteto Quantitativo Engenheiro de Dados Financeiros Especialista em Trading Algorítmico
Sobre este Serviço
Este é um pipeline personalizado de dados de mercado em Python e Polars, criado com base nas suas fontes, fluxo de trabalho e requisitos de pesquisa.
Você escolhe a fonte de dados, esquema, frequência de atualização, regras de transformação, formato de saída, estrutura de armazenamento e ambiente de implantação. Eu então projeto o fluxo de ETL para ingerir, limpar, normalizar, validar, transformar e armazenar seus dados.
Dependendo do pacote, o pipeline pode incluir ingestão via API ou arquivo, tratamento de timestamp e fuso horário, verificações de duplicidade e nulos, validação de esquema, mapeamento de contratos, filtragem de sessões, processamento incremental, saída particionada em Apache Parquet, registro de logs, agendamento, lógica de reinício, testes e documentação.
Cada entrega documenta a arquitetura, configuração, verificações de validação, suposições e limitações. Standard e Premium incluem código funcional e materiais de entrega; Basic fornece uma auditoria e um plano de implementação.
Detalhes importantes:
- Trabalho com dados fornecidos pelo cliente ou devidamente autorizados.
- Taxas de fornecedor, troca, nuvem e assinatura não estão incluídas.
- Lógica de negociação ao vivo, reconstrução avançada de L2/MBO e monitoramento contínuo requerem escopo separado.
Envie-me uma mensagem antes de fazer seu pedido para discutir suas necessidades.
Meu portfólio
Perguntas frequentes
Tradução automática
Quais partes do pipeline posso personalizar?
Você pode personalizar a fonte de dados, esquema, frequência de atualização, regras de transformação (como filtragem de sessões ou mapeamento de contratos), formato de saída, estrutura de armazenamento e ambiente de implantação.
O que está incluído no pacote Basic (Starter)?
Você recebe uma auditoria técnica do seu fluxo de trabalho atual e um plano de implementação completo e design de arquitetura. Este pacote não inclui código funcional.
O que preciso fornecer antes de começar o trabalho?
Você precisa fornecer suas fontes de dados, esquemas, regras de transformação, ambiente de implantação alvo e critérios de aceitação claros.
Quais fontes e formatos de dados você suporta?
Suporto APIs, CSVs, arquivos Parquet, bancos de dados, arquivos SCID e mais, processando-os através de Python e Polars.
Vou receber o código fonte e a documentação?
Sim, para os pacotes Standard e Premium (Avançado), você receberá o código completo em Python/Polars, arquivos de configuração, resultados de testes e documentação completa.
