Vou implantar e gerenciar infraestrutura de mlops, llm e gpu na aws e kubernetes

Algumas informações foram traduzidas automaticamente.

Índia

Eu falo Hindi, Inglês

19 pedidos finalizados

Engenheiro sênior de DevOps de IA: AWS, Kubernetes, APIs do ComfyUI, DevSecOps

Engenheiro de IA, DevSecOps e Infraestrutura na Nuvem, com 4 anos construindo sistemas de produção. Entrego o que a maioria dos projetos de IA não tem: a infraestrutura por trás. Trabalho com AWS e E...
Sobre este Serviço

Coloco modelos de IA em produção e os mantenho funcionando. Um script de treinamento não é um produto. Um serviço monitorado, versionado e com autoescalonamento é.

O QUE EU CONSTRUO
pipelines de MLOps: rastreamento com MLflow ou Weights and Biases, registro de modelos, re-treinamento automatizado e rollout seguro
serviço de LLM: vLLM, Ollama, TGI e modelos Hugging Face por trás de uma API compatível com OpenAI
infraestrutura de GPU: AWS EC2 g5 e g6, EKS com grupos de nós GPU, RunPod e Vast.ai, instâncias spot e autoescalonamento para reduzir sua conta
Containers: Docker, Kubernetes, Helm, agendamento de GPU, verificações de saúde e rollout sem downtime
CI/CD para modelos e código: GitHub Actions, Jenkins, ArgoCD e GitOps
Observabilidade: Prometheus, Grafana, rastreamento de requisições, dashboards de latência e custo por token
Segurança: IAM com privilégios mínimos, endpoints privados VPC, gerenciamento de segredos e SSL
O QUE VOCÊ RECEBE
Infraestrutura funcional, o código fonte do Terraform ou Helm que você possui, documentação do runbook e uma chamada de transferência para que sua equipe possa operá-la sem minha ajuda.
Quatro anos em DevOps e infraestrutura de IA. Conte-me seu modelo, tráfego esperado e nuvem, e eu farei a dimensionamento e te darei um custo mensal realista antes de você fazer o pedido. Trabalho em horário dos EUA.

Ferramentas:

Kubernetes

Docker

Amazon EKS

Frameworks:

Terraform

Ansible

Provedor de Nuvem:

Amazon Web Services

Google Cloud Platform

Linguagem de programação:

Bash

Python

Especialidade:

Instalação

Migração

Depuração

Outros serviços de Engenharia de DevOps que eu ofereço