Originalarbeiterreichbar
Spec Kit Agents: Context-Grounded Agentic Workflows
Die einzige gefundene Messung an einer spec-getriebenen Bauform, erschienen am 07.04.2026. 128 Durchgänge über 32 Aufgaben in fünf Projekten. Gegenstand der Messung sind Hooks, die jede Phase an Belegen aus dem Projekt erden. Über die Wirkung der Vorgabe selbst sagt der Versuch nichts. Die Verbesserung liegt bei 0,15 Punkten auf einer Skala von 1 bis 5, also 3 Prozent der Skala.
geprüft 24.09.2026
Worauf sich diese Seite beruft, wörtlich, abgerufen am 03.09.2026:
leading to hallucinated APIs and architectural violations
bestätigt 24.09.2026Read-only probing hooks ground each stage (Specify, Plan, Tasks, Implement) in repository evidence
bestätigt 24.09.2026We evaluate 128 runs covering 32 features across five repositories.
bestätigt 24.09.2026Context-grounding hooks improve judged quality by +0.15 on a 1-5 composite LLM-as-judge score
bestätigt 24.09.2026while maintaining 99.7-100 percent repository-level test compatibility
bestätigt 24.09.2026augmentation hooks improve baseline by 1.7 percent, achieving 58.2 percent Pass@1
bestätigt 24.09.2026