Kwaliteit

Sessies steekproefsgewijs toetsen aan instructies, skills en outputnormen.

Reviewkaarten
6
In wachtrij
3
Gem. score
4.0
0–5
Met opvolgtaak
0
Naleving bestandscontract
2/12
8 sessie(s) met kritieke afwijking
Gem. nalevingsscore
60
afwijkend
Meest voorkomende afwijking
14×
Verplicht bestand ontbreekt in het harnas van deze agent.

Score per criterium

  • Instructie-naleving
    4.0
  • Skill-toepassing
    4.0
  • Outputformaat
    3.3
  • Feitelijkheid
    4.3
  • Toon
    4.7
  • Efficiëntie
    3.7

Steekproefbeleid

  • Alle eigen contexten
    10%mislukt altijdVulcan

    Standaard steekproef; mislukte sessies altijd.

  • Klantcontexten
    25%mislukt altijdMens

    Hogere steekproef zolang klantformats nog wijzigen.

  • Nieuwe of gewijzigde agents
    100%mislukt altijdVulcan + mens

    Eerste 20 sessies na een uitrolwave volledig toetsen.

Hermes · ses-1041

Mens (mens) · aanleiding: steekproef · 11 aug 2026

beoordeeld4.0/5
  • Instructie-naleving3/5

    Stappenplan gevolgd, zelfcontrole zichtbaar in de logs.

  • Skill-toepassing5/5

    Skill correct getriggerd op basis van de trigger-conditie.

  • Outputformaat3/5

    Samenvatting overschrijdt de limiet van 5 bullets.

  • Feitelijkheid4/5

    Alle bedragen herleidbaar naar het bronsysteem.

  • Toon5/5

    Zakelijk-direct, conform tone of voice.

  • Efficiëntie4/5

    Tokengebruik 18% onder baseline voor dit sessietype.

Voldoet aan instructies en skills; geen actie nodig.

Dijkstra · ses-1038

Mens (mens) · aanleiding: steekproef · 11 aug 2026

beoordeeld3.8/5
  • Instructie-naleving4/5

    Escalatiedrempel uit soul.md correct toegepast bij stap 4.

  • Skill-toepassing3/5

    Twee skills gecombineerd zonder dubbel werk.

  • Outputformaat4/5

    Output volgt het voorgeschreven markdown-formaat.

  • Feitelijkheid5/5

    Alle bedragen herleidbaar naar het bronsysteem.

  • Toon4/5

    Zakelijk-direct, conform tone of voice.

  • Efficiëntie3/5

    Duur binnen norm voor dit sessietype.

Bruikbaar, maar output-formaat en bronvermelding aanscherpen.

Warden · ses-1032

Mens (mens) · aanleiding: steekproef · 13 aug 2026

beoordeeld4.2/5
  • Instructie-naleving5/5

    Escalatiedrempel uit soul.md correct toegepast bij stap 4.

  • Skill-toepassing4/5

    Skill correct getriggerd op basis van de trigger-conditie.

  • Outputformaat3/5

    Samenvatting overschrijdt de limiet van 5 bullets.

  • Feitelijkheid4/5

    Alle bedragen herleidbaar naar het bronsysteem.

  • Toon5/5

    Zakelijk-direct, conform tone of voice.

  • Efficiëntie4/5

    Tokengebruik 18% onder baseline voor dit sessietype.

Voldoet aan instructies en skills; geen actie nodig.