Vou fazer seu projeto de big data em python com pyspark, pyflink

Bem-vindo ;

Sou Engenheiro de Big Data com 5 anos de experiência,

Posso te ajudar a construir seu projeto de big data, incluindo injeção de dados (usando Apache Kafka), armazenamento de dados (em Hadoop ou Amazon S3 ou seu Data Lake remoto), processamento de dados em batch ou stream (em tempo real) com pySpark ou pyFlink, análise de dados (usando machine learning e MLlib para big data), e também análise e visualização em dashboard

Bem, meus serviços incluem:

• Design da sua arquitetura de Big Data de pipelines Batch e Stream
• Benchmarking dos melhores ferramentas de Big Data que se encaixam no seu projeto
• Criação de Data lake para armazenamento (Hadoop, HBase, Amazon S3...)
• Injeção de dados usando Apache Kafka
• Jobs ETL + Transformações nos Dados em PySpark / PyFlink / SQL
• Processamento Batch & Stream (em tempo real): PyFlink / PySpark
• NoSQL: MongoDB, Elasticsarch
• Análise de Dados usando Pandas Dataframes
• Visualização de Dados em dashboards estáticos ou dinâmicos (kibana / tableau ...)

Reembolso de 100% se o trabalho não for feito conforme o requisito.

NOTA:

Pedidos personalizados também são aceitos. Por favor, envie uma mensagem antes de fazer o pedido.

Obrigado por estar aqui. Me envie uma mensagem agora para começar.

Atenciosamente,