agent-qa-result-triage
Analisa falhas em testes de agentes de IA. Ele examina os resultados, identifica a causa do erro e sugere os próximos passos. Ajuda a resolver problemas rapidamente.
O que ela faz
Esta ferramenta ajuda a entender por que um teste automático falhou. Ela olha as evidências deixadas pelo teste, como logs e arquivos, para dizer qual foi o problema, qual a chance de estar certo e o que fazer a seguir.
Quando usar
- ✓Quando um teste automático falha e você precisa saber o motivo.
- ✓Para ver detalhes dos testes, como logs e arquivos gerados.
- ✓Para comparar testes que falharam recentemente e ver se o problema se repete.
Exemplo do que pedir para a IA
“Analise a falha no teste automático do login e me diga o que aconteceu, qual a confiança e qual o próximo passo.”
Quer saber mais? Abra as seções abaixo.
Como usar
O jeito mais fácil: copie a mensagem abaixo e cole no Claude, ChatGPT, Cursor ou outra IA. Ela lê a skill e segue as instruções.
Link da skill
Mensagem pronta para colar
Como funciona
A ferramenta coleta informações do teste que falhou, como passos executados, arquivos e logs. Depois, ela usa essas informações para classificar o tipo de erro e sugerir uma solução.
Instalação
Jeito mais fácil: copie o link da skill e cole no Claude, ChatGPT ou Cursor pedindo para seguir as instruções.
No terminal (Claude Code, Codex, Cursor), na pasta do projeto:
npx skills add sickn33/agentic-awesome-skills --skill agent-qa-result-triageOu baixe só o arquivo:
curl -L https://raw.githubusercontent.com/sickn33/agentic-awesome-skills/main/plugins/agentic-awesome-skills-claude/skills/agent-qa-result-triage/SKILL.md -o SKILL.mdConteúdo técnico (SKILL.md)
Tradução do texto original do autor no GitHub. Os comandos e códigos estão como no original.
Triagem de Resultado de QA do Agente
Visão Geral
Classifique uma execução de QA do Agente que falhou com base em suas evidências registradas, em vez de adivinhar. Inspecione a execução, as etapas, os artefatos e os logs; escolha uma categoria fixa; e retorne a confiança, a propriedade provável e a próxima ação baseada em evidências.
Quando Usar
- Investigando uma execução de QA do Agente que falhou ou foi interrompida.
- Inspecionando artefatos de execução, resultados de etapas ou logs de execução.
- Comparando execuções relacionadas recentes para padrões de falha recorrentes.
- Decidindo se uma falha pertence a um proprietário de teste, produto, hook, runtime de navegador/mobile ou infraestrutura.
Fluxo de Trabalho
- Comece com
agent_qa_get_runpara o status da execução, contexto filho da suíte, etapas e tentativas. - Busque evidências antes de decidir:
agent_qa_get_run_artifactagent_qa_get_run_stepsagent_qa_get_run_logsagent_qa_get_run_execution_logs
- Chame
agent_qa_classify_failuree use sua categoria como a classificação padrão, a menos que evidências mais fortes a contradigam. - Compare execuções relacionadas recentes quando elas estiverem disponíveis na saída do classificador.
- Retorne um resultado de triagem conciso: categoria, confiança, evidências, área provável de correção e próxima ação.
- Para alterações de código, mude para
agent-qa-debug-fixapós a conclusão da triagem.
Categorias
Use exatamente uma categoria de references/triage-categories.md:
timeoutappium_startupbrowser_disconnectelement_not_foundassertion_failurehook_failureinfrastructureunknown_failure
Regras de Evidência
- Cite ou resuma evidências concretas de artefatos, logs ou etapas.
- Mencione seções de artefatos ausentes quando elas limitarem a confiança.
- Não invente capturas de tela, vídeos, logs ou contexto de memória que o MCP não retornou.
- Se o MCP não estiver disponível, use APIs REST do painel ou a saída do CLI de QA do Agente como fallback e declare quais evidências não estavam disponíveis.
- Redija credenciais, tokens de sessão, dados pessoais e conteúdo de aplicativos não relacionados do relatório.
Exemplo
{
"category": "element_not_found",
"confidence": "high",
"evidence": ["Step 4 could not resolve the described checkout button"],
"likely_fix_area": "test definition or changed product UI",
"next_action": "Inspect the captured UI context, then compare the current checkout screen"
}
Limitações
- A classificação é tão confiável quanto os artefatos e logs de execução retidos.
- Uma categoria de falha identifica a superfície de falha mais provável; ela não prova a causa raiz.
- Capturas de tela ausentes, contexto DOM/acessibilidade, logs do dispositivo ou execuções anteriores devem diminuir a confiança.
- Esta habilidade não modifica testes ou código de aplicativo; use
agent-qa-debug-fixpara um reparo autorizado.
Perguntas frequentes
O que são 'evidências'?
São os rastros que o teste deixa, como mensagens de erro nos logs, arquivos gerados ou resultados de cada passo.
O que significa 'confiança'?
É o quão certo a ferramenta está sobre a causa da falha. Uma confiança alta significa que ela tem certeza, uma baixa significa que pode haver outras explicações.
Essa ferramenta conserta o erro?
Não, ela apenas identifica o problema e sugere o que fazer. Para consertar, você precisará de outra ferramenta ou de um desenvolvedor.
Detalhes
Descrição original do autor
Triage failed Agent QA runs with MCP evidence, artifacts, logs, fixed failure categories, confidence, and actionable next steps.
Popularidade
- Estrelas no GitHub
- 48 mil
- Posição no ranking
- #2057
- Licença
- MIT
- Atualizada em
- 15/10/2026
Comentários
- …
Mais skills deste repositório
00-andruia-consultant
Ajuda seu agente a iniciar ou melhorar projetos de IA. Ele analisa código, sugere ferramentas e cria planos de ação em espanhol.
sickn33/agentic-awesome-skills
007
Faz seu agente realizar auditorias de segurança e modelagem de ameaças. É útil para proteger projetos contra ataques e vulnerabilidades.
sickn33/agentic-awesome-skills
10-andruia-skill-smith
Ajuda seu agente a criar ou melhorar ferramentas de IA. Ele define como as ferramentas funcionam, escreve a documentação e valida a estrutura.
sickn33/agentic-awesome-skills
20-andruia-niche-intelligence
Faz seu agente criar um resumo sobre um setor específico. É útil para entender o contexto, regras, padrões de uso e riscos de um projeto, usando fontes confiáveis.
sickn33/agentic-awesome-skills
Skills parecidas
agent-architecture-audit
Faz seu agente verificar se tudo está funcionando corretamente. Ele encontra e conserta problemas em sistemas de IA, garantindo que funcionem como esperado.
affaan-m/ECC
agent-eval
Ajuda seu agente a comparar diferentes ferramentas de programação de IA. Ele mede qual é mais rápido, barato e confiável para realizar tarefas específicas.
affaan-m/ECC
agent-harness-construction
Faz seu agente entender melhor como realizar tarefas. Ele otimiza as ferramentas e instruções que o agente usa para aumentar suas chances de sucesso.
affaan-m/ECC