Vou testar seu chatbot ou agente de IA para injeção de prompt


Sobre este Serviço
Tradução automática
A maioria dos conselhos de segurança de IA para por aí, em "adicione um filtro". Isso não impede um ataque a um agente.
Um chatbot gera texto, então o pior cenário é uma saída ruim. Um agente realiza ações, então o pior cenário é uma ação incorreta. Eu relato o que seu sistema pode fazer, não apenas o que ele diz.
O que eu testo:
- Injeção direta de prompt: sobrescrição de instruções, confusão de papéis, extração de prompt do sistema
- Injeção indireta: instruções hostis escondidas em documentos ou páginas que sua IA lê
- Uso indevido de ferramenta e chamadas de função: será que a entrada faz a IA chamar uma ferramenta que não deveria?
- Vazamento de dados: prompt do sistema, chaves, contexto de outros usuários
- Bypass de guardrail: quando um filtro é uma armadilha, não um controle
Você recebe um relatório escrito: cada descoberta confirmada com passos para reproduzir, severidade e uma solução específica. Escrito para engenheiros, não um relatório de scanner.
Eu também construo esses sistemas. Meu pipeline de agentes de código aberto defende contra injeções arquiteturalmente — sua etapa de extração não possui ferramentas de rede. Meu scanner secreto possui 108 padrões distribuídos em 805 testes.
Reconhecido no Programa de Recompensa por Vulnerabilidades do Google e pela UNICEF.
Me envie uma mensagem antes de fazer seu pedido e direi honestamente se está dentro do escopo.
Conheça mais sobre Md. Azmol Haque
AI Safety Security Researcher
- A partir deBangladesh
- Membro desdejan. de 2023
- Responde em aprox.:17 horas
Idiomas
Bengali, Inglês
Tradução automática
Meu portfólio
Perguntas frequentes
Tradução automática
Você vai quebrar meu chatbot ou deixá-lo em um estado ruim?
Não. Os testes são feitos em contas de teste contra dados não de produção, e eu não faço alterações no seu sistema. Se um ataque bem-sucedido acionar uma chamada de ferramenta, eu paro por aí e documento, ao invés de repetir.
E se nada funcionar — ainda assim recebo um relatório?
Sim, e isso é um bom resultado pelo qual vale a pena pagar. Você recebe a matriz completa de ataques: todas as famílias testadas, quantos prompts cada uma, e o que suas defesas detectaram. Saber quais ataques seu sistema já resiste mostra onde não gastar mais na próxima rodada.
Você precisa de acesso à produção ou dados de clientes?
Não. Uma conta de teste ou uma chave de API contra uma implantação de staging é suficiente. Nunca testo com dados reais de clientes ou um assistente ao vivo atendendo usuários reais.
Tenho apenas um chatbot simples, não um agente. Vale a pena?
Sim, embora o perfil de risco seja diferente. Sem ferramentas conectadas, as principais vulnerabilidades são divulgação de prompt de sistema, bypass de políticas e dano à reputação. Me envie uma mensagem com o que ele faz e eu te digo honestamente se o pacote Básico cobre você.
Você pode testar um produto de IA que eu não possuo?
Não. Preciso de autorização por escrito de quem o possui. Essa é uma regra que não faço exceções.
Como funciona o reteste gratuito?
Eu entrego o relatório primeiro e a encomenda é concluída nisso. O reteste pode ser resgatado por 30 dias depois — me envie uma mensagem quando suas correções estiverem no ar que eu verificarei e enviarei um relatório atualizado. Não é necessário fazer uma nova encomenda.

