Pular para o conteúdo
Skillpedia
Agentes48 mil · #2057

agent-qa-result-triage

Analisa falhas em testes de agentes de IA. Ele examina os resultados, identifica a causa do erro e sugere os próximos passos. Ajuda a resolver problemas rapidamente.

O que ela faz

Esta ferramenta ajuda a entender por que um teste automático falhou. Ela olha as evidências deixadas pelo teste, como logs e arquivos, para dizer qual foi o problema, qual a chance de estar certo e o que fazer a seguir.

Quando usar

  • ✓Quando um teste automático falha e você precisa saber o motivo.
  • ✓Para ver detalhes dos testes, como logs e arquivos gerados.
  • ✓Para comparar testes que falharam recentemente e ver se o problema se repete.

Exemplo do que pedir para a IA

“Analise a falha no teste automático do login e me diga o que aconteceu, qual a confiança e qual o próximo passo.”

Quer saber mais? Abra as seções abaixo.

Como usar

O jeito mais fácil: copie a mensagem abaixo e cole no Claude, ChatGPT, Cursor ou outra IA. Ela lê a skill e segue as instruções.

Link da skill

https://github.com/sickn33/agentic-awesome-skills/blob/main/plugins/agentic-awesome-skills-claude/skills/agent-qa-result-triage/SKILL.md

Mensagem pronta para colar

Use esta skill para me ajudar: https://github.com/sickn33/agentic-awesome-skills/blob/main/plugins/agentic-awesome-skills-claude/skills/agent-qa-result-triage/SKILL.md Leia o arquivo SKILL.md desse link e siga as instruções dele na minha tarefa.
Como funciona

A ferramenta coleta informações do teste que falhou, como passos executados, arquivos e logs. Depois, ela usa essas informações para classificar o tipo de erro e sugerir uma solução.

Instalação

Jeito mais fácil: copie o link da skill e cole no Claude, ChatGPT ou Cursor pedindo para seguir as instruções.

No terminal (Claude Code, Codex, Cursor), na pasta do projeto:

npx skills add sickn33/agentic-awesome-skills --skill agent-qa-result-triage

Ou baixe só o arquivo:

curl -L https://raw.githubusercontent.com/sickn33/agentic-awesome-skills/main/plugins/agentic-awesome-skills-claude/skills/agent-qa-result-triage/SKILL.md -o SKILL.md
Conteúdo técnico (SKILL.md)

Tradução do texto original do autor no GitHub. Os comandos e códigos estão como no original.

Triagem de Resultado de QA do Agente

Visão Geral

Classifique uma execução de QA do Agente que falhou com base em suas evidências registradas, em vez de adivinhar. Inspecione a execução, as etapas, os artefatos e os logs; escolha uma categoria fixa; e retorne a confiança, a propriedade provável e a próxima ação baseada em evidências.

Quando Usar

  • Investigando uma execução de QA do Agente que falhou ou foi interrompida.
  • Inspecionando artefatos de execução, resultados de etapas ou logs de execução.
  • Comparando execuções relacionadas recentes para padrões de falha recorrentes.
  • Decidindo se uma falha pertence a um proprietário de teste, produto, hook, runtime de navegador/mobile ou infraestrutura.

Fluxo de Trabalho

  1. Comece com agent_qa_get_run para o status da execução, contexto filho da suíte, etapas e tentativas.
  2. Busque evidências antes de decidir:
    • agent_qa_get_run_artifact
    • agent_qa_get_run_steps
    • agent_qa_get_run_logs
    • agent_qa_get_run_execution_logs
  3. Chame agent_qa_classify_failure e use sua categoria como a classificação padrão, a menos que evidências mais fortes a contradigam.
  4. Compare execuções relacionadas recentes quando elas estiverem disponíveis na saída do classificador.
  5. Retorne um resultado de triagem conciso: categoria, confiança, evidências, área provável de correção e próxima ação.
  6. Para alterações de código, mude para agent-qa-debug-fix após a conclusão da triagem.

Categorias

Use exatamente uma categoria de references/triage-categories.md:

  • timeout
  • appium_startup
  • browser_disconnect
  • element_not_found
  • assertion_failure
  • hook_failure
  • infrastructure
  • unknown_failure

Regras de Evidência

  • Cite ou resuma evidências concretas de artefatos, logs ou etapas.
  • Mencione seções de artefatos ausentes quando elas limitarem a confiança.
  • Não invente capturas de tela, vídeos, logs ou contexto de memória que o MCP não retornou.
  • Se o MCP não estiver disponível, use APIs REST do painel ou a saída do CLI de QA do Agente como fallback e declare quais evidências não estavam disponíveis.
  • Redija credenciais, tokens de sessão, dados pessoais e conteúdo de aplicativos não relacionados do relatório.

Exemplo

{
  "category": "element_not_found",
  "confidence": "high",
  "evidence": ["Step 4 could not resolve the described checkout button"],
  "likely_fix_area": "test definition or changed product UI",
  "next_action": "Inspect the captured UI context, then compare the current checkout screen"
}

Limitações

  • A classificação é tão confiável quanto os artefatos e logs de execução retidos.
  • Uma categoria de falha identifica a superfície de falha mais provável; ela não prova a causa raiz.
  • Capturas de tela ausentes, contexto DOM/acessibilidade, logs do dispositivo ou execuções anteriores devem diminuir a confiança.
  • Esta habilidade não modifica testes ou código de aplicativo; use agent-qa-debug-fix para um reparo autorizado.
Perguntas frequentes

O que são 'evidências'?

São os rastros que o teste deixa, como mensagens de erro nos logs, arquivos gerados ou resultados de cada passo.

O que significa 'confiança'?

É o quão certo a ferramenta está sobre a causa da falha. Uma confiança alta significa que ela tem certeza, uma baixa significa que pode haver outras explicações.

Essa ferramenta conserta o erro?

Não, ela apenas identifica o problema e sugere o que fazer. Para consertar, você precisará de outra ferramenta ou de um desenvolvedor.

Detalhes

Descrição original do autor

Triage failed Agent QA runs with MCP evidence, artifacts, logs, fixed failure categories, confidence, and actionable next steps.

repo: sickn33/agentic-awesome-skills

Popularidade

Estrelas no GitHub
48 mil
Posição no ranking
#2057
Licença
MIT
Atualizada em
15/10/2026

Essa skill é útil?

0

Entre para votar.

Comentários

  • …

Mais skills deste repositório

Skills parecidas