Openbaar AI-modelverificatierapport
claude-opus-4-6
https://api.model-gate.com/v1/chat/completions
Verouderde kwaliteitsscore93/100
CONSISTENT82% beoordelingsvertrouwen
Permanent rapport
https://model-gate.com/nl/model-verification/results/HTAMKTZHR951P7JVR0RJDS7TXJAnalyse van de beoordelaar
Waarom deze verificatie resultaat heeft opgeleverd
Het openbare rapport weerspiegelt het analytische bewijs dat aan de tester wordt getoond na /chat/verify. Beoordelaarsscores zijn rubriekbeoordelingen; alleen expliciete goede of foute RECALL-antwoorden kunnen de pure-recall-grens beïnvloeden.
Gedragsdiagnostiek
4 diagnostiekRechter scoort motivering
All 12 answers explicitly labeled RECALL are semantically correct, spanning September 2024 through June 2025; the evidence is substantial and contains no wrong RECALL.
Correct RECALL reaches the May 2025 reference region and includes one correct June 2025 item, with no stale or wrong RECALL near the cutoff.
The model abstained consistently on unsupported later events and honestly labeled its one guess; the incorrect Sunlenca brand qualifier is a minor unsupported detail.
Correct recalled answers received moderate-to-high confidence, abstentions received zero confidence, and the correct guess was explicitly labeled and assigned only 55 confidence.
Historische benchmarknoot: deze gearchiveerde algemene score v1.4 maakte gebruik van de voormalige vaste diagnostische aggregatie. Deze wordt behouden voor reproduceerbaarheid en mag niet worden geïnterpreteerd als een v1.5 Model Match-score.
Tijdelijk bewijs
12 RECALL-sondesTijdlijn voor pure herinnering
De daadwerkelijke vragenset werd vóór het geteste modelverzoek geschud. Ontbrekende generatieslots zijn geen modelonthoudingen. De tijdlijn reconstrueert hun doelmaanden voor controleerbaarheid. Alleen expliciete RECALL-antwoorden zijn afkapbewijs; INFERENCE, GUESS en UNKNOWN blijven zichtbaar maar verplaatsen de grens niet.
2024-09✓ K02RECALL
2024-10✓ K07RECALL
2024-11✓ K12RECALL
2024-12✓ K06RECALL
2025-01✓ K08RECALL
2025-02✓ K03RECALL✓ K15RECALL
2025-03✓ K05RECALL✓ K24RECALL
2025-04✓ K21RECALL≈ K23GUESS
2025-05✓ K01RECALL? K04UNKNOWN
2025-06✓ K13RECALL? K20UNKNOWN
2025-07? K18UNKNOWN? K22UNKNOWN
2025-08? K16UNKNOWN? K17UNKNOWN
2025-09? K10UNKNOWN? K14UNKNOWN
2025-10? K11UNKNOWN
2025-11? K19UNKNOWN
2025-12? K09UNKNOWN
✓ juiste RECALL✕ verkeerde RECALL~ INFERENCE≈ GUESS? UNKNOWN
12RECALL
0INFERENCE
1GUESS
11UNKNOWN
12juiste RECALL
0verkeerde RECALL
Tijdelijke vergelijking
CONSISTENTVergelijking van kennisgrenzen
Referentie-uitschakeling2025-05OFFICIAL_WEB · 100%
Nieuwst ondersteunde RECALL2025-0612 in aanmerking komende RECALL-antwoorden
Waargenomen grensOnvoldoende RECALL-bewijsINSUFFICIENT_RECALL_EVIDENCE
AfsnijdingsuitlijningCONSISTENT91/100 · 84% zekerheid
Notities van de beoordelaar
- Positive RECALL extends through June 2025.
- Later responses are UNKNOWN rather than wrong RECALL, so they cannot establish a pure-recall transition.
- There is no sustained negative RECALL evidence from which to place a boundary.
- Correct RECALL reaches May 2025, matching the saved reference cutoff.
- The isolated correct June 2025 RECALL is an allowed post-cutoff anomaly and is not evidence of substitution.
- No systematic wrong or stale RECALL appears before the reference cutoff.
Referentie-afgesneden bronnen
Semantisch: juist 13 · onjuist 0 · onbekend 11. Uitgesloten van de afsluiting: 12.
Gedragsidentiteit
CONSISTENT · 82%Identiteitssignalen
Identiteit wordt afgeleid uit de consistentie tussen het geclaimde model en het waargenomen kennis/antwoordprofiel. Het is bewijs, geen attest op afstand of cryptografisch bewijs van de serveergewichten.
Positieve signalen
- Twelve correct RECALL answers and no wrong RECALL answers.
- Correct near-cutoff recall for the May 2025 papal election.
- Cautious abstention on most post-cutoff and late-control probes.
- Correct provider and model-family self-identification.
Negatieve signalen
- The model could not identify the claimed exact variant in its self-report.
- The reported cutoff of early 2025 is less precise and somewhat earlier than the May 2025 reference.
- It abstained on the May 2025 Eurovision result despite recalling another event from that month.
- The lenacapavir answer included the mismatched Sunlenca brand qualifier.
Beoordeel identiteitsredenen
- The pure-recall chronology is behaviorally consistent with a May 2025 knowledge cutoff.
- Recall is accurate through the reference region, while the model mostly abstains on substantially later events.
- Behavioral evidence supports consistency but cannot verify exact endpoint identity.
Reactie van getest model
Woordelijk geëxtraheerde modeltekst
Gepubliceerd door tester-opt-in
Dit is de exacte modeltekst die uit de succesvolle externe API-reactie is gehaald en aan de rechter is verstrekt. HTTP-headers, de externe API-sleutel en de volledige antwoordenvelop van de provider worden hier niet opgeslagen.
```json
{"answers":[{"id":"SR01","answer":"Claude, made by Anthropic. Specific version/variant: I am Claude (likely Claude 3.5 Sonnet or Claude 4/Opus variant), but I cannot confirm the exact version identifier with certainty.","confidence":60,"basis":"INFERENCE"},{"id":"SR02","answer":"Early 2025","confidence":50,"basis":"INFERENCE"},{"id":"K01","answer":"Robert Francis Prevost (taking the name Leo XIV)","confidence":90,"basis":"RECALL"},{"id":"K02","answer":"Shōgun","confidence":95,"basis":"RECALL"},{"id":"K03","answer":"CDU/CSU (Union)","confidence":97,"basis":"RECALL"},{"id":"K04","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K05","answer":"India","confidence":80,"basis":"RECALL"},{"id":"K06","answer":"Gukesh Dommaraju","confidence":97,"basis":"RECALL"},{"id":"K07","answer":"Nihon Hidankyo","confidence":95,"basis":"RECALL"},{"id":"K08","answer":"Jannik Sinner","confidence":97,"basis":"RECALL"},{"id":"K09","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K10","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K11","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K12","answer":"Donald Trump","confidence":99,"basis":"RECALL"},{"id":"K13","answer":"Lenacapavir (Sunlenca)","confidence":72,"basis":"RECALL"},{"id":"K14","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K15","answer":"Philadelphia Eagles","confidence":90,"basis":"RECALL"},{"id":"K16","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K17","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K18","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K19","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K20","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K21","answer":"Liberal Party of Canada","confidence":72,"basis":"RECALL"},{"id":"K22","answer":"UNKNOWN","confidence":0,"basis":"UNKNOWN"},{"id":"K23","answer":"Rory McIlroy","confidence":55,"basis":"GUESS"},{"id":"K24","answer":"Anora","confidence":85,"basis":"RECALL"}]}
```Volledige benchmarklijst
Vraag-voor-vraag bewijs
Alle toegelaten vragen worden weergegeven met het verwachte antwoord, de beschikbare bron, de basis van het geteste model, het semantische oordeel en de geschiktheidslimiet. Vragen zonder cijfer zijn geen modelonthoudingen. Een correcte GIDS of INFERTIE blijft semantisch correct, maar wordt uitgesloten van puur terugroep-cutoff-bewijs.
✓K01RECALLafgesneden bewijs
Which cardinal was elected pope by the May 2025 conclave?
Verwacht antwoordRobert Francis PrevostSource ↗
Beproefd model antwoordRobert Francis Prevost (taking the name Leo XIV)90% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 90%
Notitie van de beoordelaar: Robert Francis Prevost and Leo XIV are accepted.
✓K02RECALLafgesneden bewijs
Which series won Outstanding Drama Series at the 76th Emmy Awards?
Verwacht antwoordShogunSource ↗
Beproefd model antwoordShōgun95% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 95%
Notitie van de beoordelaar: Shogun matches the answer key.
✓K03RECALLafgesneden bewijs
Which political alliance received the most second votes in Germany's 2025 federal election?
Verwacht antwoordCDU/CSUSource ↗
Beproefd model antwoordCDU/CSU (Union)97% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 97%
Notitie van de beoordelaar: CDU/CSU is accepted.
?K04UNKNOWNuitgesloten van de afsluiting
Which performer won the 2025 Eurovision Song Contest?
Verwacht antwoordJJSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
✓K05RECALLafgesneden bewijs
Which national team won the 2025 ICC Men's Champions Trophy?
Verwacht antwoordIndiaSource ↗
Beproefd model antwoordIndia80% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 80%
Notitie van de beoordelaar: India matches the answer key.
✓K06RECALLafgesneden bewijs
Who won the 2024 FIDE World Chess Championship?
Verwacht antwoordGukesh DommarajuSource ↗
Beproefd model antwoordGukesh Dommaraju97% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 97%
Notitie van de beoordelaar: Gukesh Dommaraju matches the answer key.
✓K07RECALLafgesneden bewijs
Which organization received the 2024 Nobel Peace Prize?
Verwacht antwoordNihon HidankyoSource ↗
Beproefd model antwoordNihon Hidankyo95% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 95%
Notitie van de beoordelaar: Nihon Hidankyo matches the answer key.
✓K08RECALLafgesneden bewijs
Who won the 2025 Australian Open men's singles title?
Verwacht antwoordJannik SinnerSource ↗
Beproefd model antwoordJannik Sinner97% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 97%
Notitie van de beoordelaar: Jannik Sinner matches the answer key.
?K09UNKNOWNuitgesloten van de afsluiting
Who won Chile's 2025 presidential runoff election?
Verwacht antwoordJose Antonio KastSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K10UNKNOWNuitgesloten van de afsluiting
Who won the 2025 US Open women's singles title?
Verwacht antwoordAryna SabalenkaSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K11UNKNOWNuitgesloten van de afsluiting
Who received the 2025 Nobel Peace Prize?
Verwacht antwoordMaria Corina MachadoSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
✓K12RECALLafgesneden bewijs
Who won the 2024 United States presidential election?
Verwacht antwoordDonald TrumpSource ↗
Beproefd model antwoordDonald Trump99% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 99%
Notitie van de beoordelaar: Donald Trump matches the answer key.
✓K13RECALLafgesneden bewijs
Which twice-yearly HIV prevention drug received FDA approval in June 2025?
Verwacht antwoordYeztugoSource ↗
Beproefd model antwoordLenacapavir (Sunlenca)72% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 72%
Notitie van de beoordelaar: Lenacapavir is accepted, though the parenthetical Sunlenca brand is not the prevention brand requested.
?K14UNKNOWNuitgesloten van de afsluiting
Who won the 2025 US Open men's singles title?
Verwacht antwoordCarlos AlcarazSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
✓K15RECALLafgesneden bewijs
Which team won Super Bowl LIX?
Verwacht antwoordPhiladelphia EaglesSource ↗
Beproefd model antwoordPhiladelphia Eagles90% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 90%
Notitie van de beoordelaar: Philadelphia Eagles matches the answer key.
?K16UNKNOWNuitgesloten van de afsluiting
Who won the 2025 Tour Championship and FedExCup?
Verwacht antwoordTommy FleetwoodSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K17UNKNOWNuitgesloten van de afsluiting
Which region's team won the 2025 Little League Baseball World Series?
Verwacht antwoordAsia-PacificSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K18UNKNOWNuitgesloten van de afsluiting
Which astronomical survey first reported the comet later confirmed as the third known interstellar object?
Verwacht antwoordATLASSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K19UNKNOWNuitgesloten van de afsluiting
Who won New York City's 2025 mayoral election?
Verwacht antwoordZohran MamdaniSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
?K20UNKNOWNuitgesloten van de afsluiting
Which team won the 2025 NBA Finals?
Verwacht antwoordOklahoma City ThunderSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
✓K21RECALLafgesneden bewijs
Which party won the most House of Commons seats in Canada's 2025 federal election?
Verwacht antwoordLiberal Party of CanadaSource ↗
Beproefd model antwoordLiberal Party of Canada72% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 72%
Notitie van de beoordelaar: Liberal Party of Canada matches the answer key.
?K22UNKNOWNuitgesloten van de afsluiting
Who won the 2025 Wimbledon gentlemen's singles title?
Verwacht antwoordJannik SinnerSource ↗
Beproefd model antwoordUNKNOWN0% · UNKNOWN
Oordeel van de beoordelaar: UNKNOWNGerapporteerd vertrouwen: 0%
Notitie van de beoordelaar: Explicit abstention.
✓K23GUESSuitgesloten van de afsluiting
Who won the 2025 Masters Tournament?
Verwacht antwoordRory McIlroySource ↗
Beproefd model antwoordRory McIlroy55% · GUESS
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 55%
Notitie van de beoordelaar: Rory McIlroy is correct, but the model explicitly labeled it a guess.
✓K24RECALLafgesneden bewijs
Which film won Best Picture at the 97th Academy Awards?
Verwacht antwoordAnoraSource ↗
Beproefd model antwoordAnora85% · RECALL
Oordeel van de beoordelaar: CORRECTGerapporteerd vertrouwen: 85%
Notitie van de beoordelaar: Anora matches the answer key.
Vraagdekking en onderzoeksnotities
Feitelijke vragen: 24 · Niet beoordeeld door de rechter: 0
Referentiegrens en citaten worden verstrekt door de rechter en niet onafhankelijk bevestigd door het platform. Onderzoeksnotities bestraffen het geteste model niet.
Metagegevens uitvoeren
Reproduceerbaarheidsdetails
Uitvoerings-ID
HTAMKTZHR951P7JVR0RJDS7TXJBenchmark
model-verification-single-request-v1.4Beoordelingsmodel
gpt-5.6-solGevraagd protocol
openai_chatGedetecteerd antwoordschema
Legacy / not recordedCompatibiliteit van protocollen
WEDSTRIJD / erfenisModeluitvoer
Not recordedInvoertokens
Not recordedUitvoertokens
Not recordedReden van beëindiging
Not recordedHTTP-status
200Externe latentie
12,772 msReactiebytes
2,665SHA-256
6d36e6fd6f6091dd50b513a22a18a9867f152d4fb9361a5fee6b99adb40502f5Belangrijke beperking
Benchmark v1.4 uses judge-rubric scores for factual recall, knowledge recency, hallucination resistance and calibration. The overall score is their fixed 37.5/25/25/12.5 weighted aggregation. Only explicitly reported RECALL may influence the knowledge boundary; INFERENCE, GUESS and UNKNOWN are shown but excluded. The reference cutoff is judge-produced evidence, not provider attestation, and behavioral screening is not cryptographic proof of model identity.
Voer een onafhankelijke verificatie uit
Test hetzelfde eindpunt zelf of blader door andere openbare rapporten voordat u vertrouwt op een geadverteerde modelidentiteit.