Vou criar uma imagem docker de produção para seu modelo de IA com GPU

Algumas informações foram traduzidas automaticamente.

Indonésia

Eu falo Inglês

Engenheiro de DevOps, infraestrutura de GPU e IA

Oi, sou um Engenheiro de DevOps Sênior com mais de 9 anos de experiência em infraestrutura na nuvem, Kubernetes, CI/CD e, mais recentemente, implantação de GPU e modelos de IA. Eu crio imagens Docker...
Sobre este Serviço

Oi! Você precisa de uma imagem Docker pronta para produção, que funcione bem para um modelo pesado de IA ou ML (geração de vídeo, geração de imagem ou um pipeline personalizado de GPU)?


Eu crio imagens Docker que sobrevivem a um cold start real, não só uma demonstração. Isso significa incluir todas as extensões CUDA, checkpoints do modelo e dependências, para que sua imagem rode totalmente offline na hora da inferência, sem downloads surpresa que quebrem a produção.


O que posso fazer por você:

  • Construir um Dockerfile de múltiplas etapas com versões fixas de CUDA e PyTorch
  • - Compilar extensões CUDA personalizadas a partir do zero quando os pacotes pip não forem suficientes
  • - Incluir checkpoints e pesos do modelo para que nada precise ser baixado na hora de rodar
  • - Verificar a imagem em um cold start real, isolado da rede, e não em um container aquecido
  • - Implantar e solucionar problemas em provedores de nuvem com GPU, e escolher o melhor se a sua primeira opção não servir

Por que me escolher:

  • Entrega de produção real: passou em 21 de 21 verificações de aceitação, testada offline com docker run sem conexão de rede
  • - Eu analiso o código fonte fornecido para encontrar dependências escondidas, não só o que aparece na superfície
  • - Mais de 9 anos em DevOps e infraestrutura, então cuido de toda a pipeline, não só do Dockerfile

Me envie uma mensagem primeiro com os detalhes do seu projeto.

Ferramentas:

Docker

Frameworks:

Ansible

Provedor de Nuvem:

Google Cloud Platform

•

DigitalOcean

Linguagem de programação:

Bash

•

Python

Especialidade:

Desenvolvimento

•

Configuração

Meu portfólio

Outros serviços de Engenharia de DevOps que eu ofereço