Eu vou testar seu chatbot de IA ou app de LLM por respostas erradas e respostas inseguras

Seu chatbot de IA, app LLM ou assistente RAG está pronto para usuários reais? Eu testo do jeito que os clientes usam, então respostas erradas, respostas inseguras e fluxos quebrados são encontradas antes do lançamento.

O QUE EU TESTO

- Respostas erradas ou inventadas, checadas com o seu conteúdo de origem

- Precisão do RAG: ele responde a partir dos seus documentos?

- Contexto multi-turno e fluxo de conversa

- Tentativas de prompt injection e jailbreak

- Tópicos sensíveis, tom e respostas seguras de fallback

- Tela de chat web no desktop e no celular

O QUE VOCÊ RECEBE

- Cada cenário marcado como pass ou fail, com gravidade

- Cada problema com o prompt, a resposta e evidência em captura de tela

- Um breve resumo de risco: pronto para lançá-lo ou não

- Premium: um pacote de testes Playwright reexecutável para retestar após cada mudança de modelo ou prompt

COMO FUNCIONA

1. Compartilhe o link do seu chatbot, acesso de teste e documentos de origem

2. Concordamos os cenários e o escopo

3. Eu testo e atribuo nota a cada cenário

4. Você recebe o relatório e um breve walkthrough

Tenho mais de 9 anos em QA, incluindo trabalho em um portal de chatbot de IA na área da saúde. Use apenas dados de teste, nunca dados reais de clientes ou pacientes.