igoruehara/spec-driven/evals

Claude Code and agent skill by igoruehara/spec-driven

Trust tier 2
  • community
LLM review pending
Source check pending

Checking that the SKILL.md file is still in the repository.

Use para avaliar a fidelidade da implementação à spec — roda o eval que checa se cada AC-N é coberto por task e referenciado em teste, conta SPEC_DEVIATION e reporta um score por feature. Acione com /evals.

Install

npx vskill@latest install igoruehara/spec-driven/evals

SKILL.md

Skill: Evals de fidelidade spec→código

Mede se o que foi construído reflete a spec — a métrica de qualidade da saída do agente. Duas camadas: determinística (script) e de julgamento.

1. Camada determinística

node scripts/eval-spec-fidelity.mjs .

Reporta, por feature: AC totais, cobertos por task, referenciados em teste/código e SPEC_DEVIATION abertos. Falha (exit 1) se algum AC não tem task — rastreabilidade quebrada. Referência em teste é aviso até a feature ser implementada.

2. Camada de julgamento (o script não pega isso)

  • O teste de cada AC-N realmente exercita o Given/When/Then — ou só cita o ID num teste vazio?
  • A implementação cobre os casos de borda e respeitou o "Fora de escopo" da spec?
  • Os SPEC_DEVIATION abertos têm resolução (corrigir código ou atualizar a spec/ADR)?

Saída

Score por feature + os gaps. Complementa o /validar (UAT de uma feature) com uma visão de fidelidade do portfólio. O mesmo eval roda na CI (esteira.yml) — aqui é o complemento com julgamento.

Security

  • Security scanPassed, 100 of 100Pattern checks on the skill's files.
  • Model reviewNot runA model review is scheduled for the next rescan.

See the full security report

Quality evaluation

  • Task evaluationNot runNo evaluation yet. Run one in Skill Studio.

See evaluation results

Source

Popularity

7-day trend score
0

Not refreshed yet.

Works with

Any agent vskill installs to: 56 targets in all. These 39 have a page on this site.

  • Claude Code
  • Cursor
  • GitHub Copilot
  • Windsurf
  • Codex
  • Gemini CLI
  • Cline
  • Amp
  • Roo Code
  • Goose
  • Continue
  • Kilo Code
  • Junie
  • Trae
  • OpenHands
  • Qwen Code
  • AI Agent
  • Tabnine Chat
  • Sourcegraph Cody
  • Amazon Q
  • Firebase Genkit
  • Sweep
  • Devin
  • Phind
  • Mentat
  • Claude Desktop
  • Aider
  • GPT Pilot
  • Plandex
  • bolt.new
  • v0
  • Replit Agent
  • Anse
  • TypingMind
  • BetterChatGPT
  • LibreChat
  • Warp AI
  • Pieces
  • Fig AI
Embed badge
vskill VERIFIED badge
[![vskill VERIFIED](https://verified-skill.com/api/v1/skills/igoruehara/spec-driven/evals/badge)](https://verified-skill.com/skills/igoruehara/spec-driven/evals)

Something wrong with this skill or its page? Tell us.