Vou construir pipelines de dados escaláveis com opensearch para buscas super rápidas


Sobre este Serviço
Tradução automática
Eu crio pipelines de dados OpenSearch que lidam com cargas de trabalho de produção, desde o design do esquema até a implantação na AWS.
O que eu entrego
Ingestão de Dados: pipelines ETL assíncronos usando Python (asyncio, aiohttp). Modos de processamento em lote e em tempo real. Suporte a múltiplas fontes: APIs, bancos de dados, arquivos, streams.
Configuração do OpenSearch: mapeamentos de índice otimizados para seus padrões de consulta. Analisadores e tokenizadores personalizados. Ajuste de relevância e consultas de agregação.
Integração com AWS: funções Lambda para ingestão orientada por eventos. S3 para armazenamento de dados brutos. SQS/SNS para processamento baseado em filas. Implantação no Amazon OpenSearch Service.
Pilha de Tecnologias:
- Busca: OpenSearch
- Linguagens: Python
- AWS: Lambda, S3, SQS, SNS, OpenSearch, CloudWatch
Experiência:
- Desenvolvi motor de crawler assíncrono que ingere mais de 100 mil documentos no OpenSearch
- Publiquei pesquisa sobre sistemas de busca distribuída (ICOCI 2023)
- Projetei pipelines ETL para sistemas de séries temporais
- Experiência com arquiteturas multi-inquilino e monitoramento de qualidade de dados
Casos de Uso:
- Busca de produtos em e-commerce
- Análise e monitoramento de logs
- Busca de documentos/conteúdo
- Dashboards em tempo real
Antes de fazer seu pedido:
- Me envie uma mensagem com seus requisitos. Vou revisar seu caso de uso e confirmar o pacote adequado.
Conheça mais sobre Asadullah
Python Backend Developer, AWS, Data Engineering
- A partir deBangladesh
- Membro desdeout. de 2023
- Responde em aprox.:3 dias
- Última entrega10 meses
Idiomas
Bengali, Inglês
Tradução automática
Meu portfólio
Outros serviços de Desenvolvimento de Software que eu ofereço
Perguntas frequentes
Tradução automática
Quero integrar um motor de busca personalizado ao meu aplicativo web.
Ótimo. Posso usar OpenSearch para armazenar documentos indexados dos seus itens e fornecer APIs para lidar com consultas complexas conforme as necessidades do usuário. Também posso gerar estatísticas sobre seus dados e fornecer APIs para alimentar um dashboard.
Tenho um aplicativo que armazena arquivos de documentos no S3. Como posso indexar esses documentos?
Posso configurar o Amazon OpenSearch para você armazenar documentos indexados. Posso usar um processador em lote para indexar os documentos em massa ou acionar um Lambda para tratar arquivos individualmente.
Preciso oferecer funcionalidades de busca baseadas em dados textuais. Você pode me ajudar com isso?
Claro. Posso criar uma pipeline que ingere dados, tanto do banco de dados principal quanto de streams de banco de dados, e armazena esses grandes textos de forma eficiente no OpenSearch. Posso criar consultas complexas para rodar em clusters de OpenSearch e fornecer resultados classificados por relevância.
2 avaliações deste Serviço
| (2) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
B 
bigfour98

Singapura
Quick to respond, polite, and display above-average understanding of opensearch
US$ 50-US$ 100
$
2 dias
Tempo
Útil?C coghan

Estados Unidos
Very professional. Great work
US$ 100-US$ 200
$
5 dias
Tempo
Útil?
2 avaliações deste Serviço
| (2) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Classificação detalhada
- Nível de comunicação do freelancer
- Qualidade da entrega
- Valor da entrega
Ordenar por
B 
bigfour98

Singapura
Quick to respond, polite, and display above-average understanding of opensearch
US$ 50-US$ 100
$
2 dias
Tempo
Útil?C coghan

Estados Unidos
Very professional. Great work
US$ 100-US$ 200
$
5 dias
Tempo
Útil?

