Evaluaties

Gemeten, niet beloofd.

Drie faalwijzen tellen het zwaarst in juridische AI: autoriteit verzinnen, afdrijven van de bron, en gelijke gevallen ongelijk behandelen. Deze pagina beschrijft hoe Constat elk van de drie meet, op het niveau van afgedwongen uitkomsten, eerlijk, inclusief de grenzen van wat gemeten wordt.

Hallucinatie

Nul is een poort, geen streven.

De renderpoort: Iedere verwijzing moet tegen haar officiële publieke bron verifiëren voordat zij op het scherm of in een export kan verschijnen. Een niet-geverifieerd citaat wordt niet gemarkeerd; het is technisch onmogelijk om weer te geven.
Veiligheidsvloeren in de evaluatiepoort: De goldset-evaluatie dwingt een hallucinatievloer van nul en een onthoudingsnauwkeurigheid van 1,0 af. Deze vloeren zijn identiek voor ieder modelniveau. Een wijziging die onder een vloer scoort, kan niet worden uitgerold.
Onthouding als ontwerp: Waar de geverifieerde basis dun is, onthoudt het platform zich en legt het de zaak aan de advocaat voor. Onthouding is een ontworpen, gemeten uitkomst, geen faalmodus.

Bronvastheid

Trouw aan de vastgepinde bron, of stil.

Woordelijke, hash-verankerde bronnen: Operatieve wetteksten komen byte-exact het corpus in, vastgepind met cryptografische hashes en counsel-ondertekening. Output citeert de vastgepinde tekst; een parafrase wordt nooit als de wet gepresenteerd.
Cliëntfeiten blijven cliëntfeiten: Feiten uit cliëntdocumenten worden altijd gelabeld als stellingen van de cliënt en kunnen nooit als recht worden gepresenteerd of ermee vermengd raken.
Termijnen worden berekend, nooit gegenereerd: Wettelijke termijnen komen uit counsel-ondertekende deterministische regels met zichtbare afleiding, nooit uit tekstgeneratie.

Bias

Counterfactueel, bij iedere wijziging.

De vraag die de suite stelt: verandert de uitkomst wanneer een kenmerk verandert dat er niet toe mag doen?

Counterfactuele scenariofamilies: Dezelfde juridische zaak wordt opnieuw voorgelegd met systematisch gevarieerde cliëntkenmerken: namen van verschillende herkomst, geslacht, rol en register. Op dit moment 58 scenariofamilies en 310 fixtures, meegroeiend met het corpus.
Een mergepoort, geen rapport: De vloer is nul strikte schendingen, verankerd in de ontwikkelpoort: een wijziging die haar breekt, kan niet worden samengevoegd.
De eerlijke grens: De suite dekt de tests die wij hebben geschreven; zij kan de afwezigheid van alle denkbare bias niet certificeren. Het onderliggende model erft de vooroordelen van zijn training; de verificatie- en onthoudingslagen beperken de gevolgen, zij nemen de oorzaak niet weg.

Wat deze pagina niet claimt

Interne metingen, als zodanig benoemd.

Dit zijn interne evaluatieresultaten, geen audits door derden; er bestaat nog geen externe benchmarkcertificering en die wordt ook niet gesuggereerd. Mechanismen worden hier beschreven op het niveau van afgedwongen uitkomsten, niet van implementatie. Familierecht blijft bewust buiten scope: het platform onthoudt zich volledig in plaats van een domein te bedienen waar fouten het moeilijkst te begrenzen zijn.

Lees de ethiekpagina Vraag ons het te bewijzen