Vou criar uma imagem docker de produção para seu modelo de IA com GPU
Engenheiro de DevOps, infraestrutura de GPU e IA
Sobre este Serviço
Oi! Você precisa de uma imagem Docker pronta para produção, que funcione bem para um modelo pesado de IA ou ML (geração de vídeo, geração de imagem ou um pipeline personalizado de GPU)?
Eu crio imagens Docker que sobrevivem a um cold start real, não só uma demonstração. Isso significa incluir todas as extensões CUDA, checkpoints do modelo e dependências, para que sua imagem rode totalmente offline na hora da inferência, sem downloads surpresa que quebrem a produção.
O que posso fazer por você:
- Construir um Dockerfile de múltiplas etapas com versões fixas de CUDA e PyTorch
- - Compilar extensões CUDA personalizadas a partir do zero quando os pacotes pip não forem suficientes
- - Incluir checkpoints e pesos do modelo para que nada precise ser baixado na hora de rodar
- - Verificar a imagem em um cold start real, isolado da rede, e não em um container aquecido
- - Implantar e solucionar problemas em provedores de nuvem com GPU, e escolher o melhor se a sua primeira opção não servir
Por que me escolher:
- Entrega de produção real: passou em 21 de 21 verificações de aceitação, testada offline com docker run sem conexão de rede
- - Eu analiso o código fonte fornecido para encontrar dependências escondidas, não só o que aparece na superfície
- - Mais de 9 anos em DevOps e infraestrutura, então cuido de toda a pipeline, não só do Dockerfile
Me envie uma mensagem primeiro com os detalhes do seu projeto.
Ferramentas:
Docker
Frameworks:
Ansible
Provedor de Nuvem:
Google Cloud Platform
•
DigitalOcean
Linguagem de programação:
Bash
•
Python
Especialidade:
Desenvolvimento
•
Configuração

