| Strict-33-Verified & Strict-35 Gesamtmakro (37 Suiten) | Gesamtwertung über alle 33 objektiv verifizierbaren Suiten (10.050 Evals) bzw. alle 35 externen Suiten (10.350 Evals) inkl. 2 Cyber-Judge-Audits (10.440 Prüfungen) | 90,16 % Committee · 90,05 % (27B Solo) Strict-33 · 89,80 % Strict-35 | 86,06 % Strict-33 (9B v9.0) · 83,53 % Strict-33 (4B v9.0) · 100 % Cyber-Judge 72/18 | #1 und #2 unter allen 47 evaluierten Modellen (+0,67 pp auf Strict-33-Verified und +1,15 pp auf Strict-35 vor stärkster 27B-Referenz) |
|---|
| Post-Quanten-Kryptographie (NIST FIPS 203/204/205 & BSI TR-02102-1) | ML-KEM-768/1024, ML-DSA-65/87, SLH-DSA, hybrides X25519MLKEM768 & Erkennung gebrochener Verfahren | 100,00 % (300 / 300) Committee & 27B Solo | 100,00 % (300 / 300) auf 9B v9.0 und 4B v9.0 | Fehlerfreie PQC-Migrationsprüfung plus hybride RFC-8785-Audit-Quittungen auf allen vier SKOPION-v9.0-Stufen |
|---|
| SBOM/VEX-Lieferkette, EU Cyber Resilience Act & Rust/EVM-Formalbeweise (Wave 8) | CycloneDX v1.6 / SPDX v3.0 / OpenVEX / SLSA L3, EU-CRA (VO 2024/2847) Anhang I + ENISA-24h/72h-Meldung & Rust-unsafe-/EVM-Invarianten | 100,00 % SBOM/VEX (300/300) · 100,00 % EU-CRA (300/300) · 100,00 % Rust/EVM (300/300) | 100,00 % (900 / 900) über alle 3 Wave-8-Suiten auf 9B v9.0 und 4B v9.0 | Deterministische Call-Graph-Erreichbarkeit (OpenVEX), 24h-ENISA-Frühwarnprüfung (Art. 14 CRA) und Stacked/Tree-Borrows-Verifikation |
|---|
| 9-Sprachen-Parität & Finanz-KRITIS (SWIFT CSCF v2025 · ISO 20022 · DORA) | Semantische Parität über DE/PL/EN/FR/UK/NL/CS/ES/IT sowie ISO 20022 XML-Signatur-Integrität & PCI-DSS v4.0.1 | 100,00 % 9-Lang-Bench (300/300) · 100,00 % SWIFT/ISO-20022/DORA (300/300) | 100,00 % 9-Lang-Bench · 100,00 % SWIFT/ISO-20022/DORA (9B & 4B v9.0) | Volle 9-Sprachen-Deckung und deterministische Prüfung von DORA-Meldefristen (4h / 72h / 1M) sowie SWIFT-Zonentrennung |
|---|
| AppSec-Source-to-Sink, STIX 2.1 / MISP & Injection-Immunität | AST-Datenfluss-Triage, kryptographische Differenz-Beweise, OASIS STIX 2.1 / MISP JSON & Bidi-/Homoglyphen-Abwehr | 100,00 % AppSec · 100,00 % STIX/MISP · 100,00 % Injection-Abwehr (4.500 / 4.500 inkl. Wave-8 über 15 Spezial-Suiten) | 100,00 % (4.500 / 4.500) über sämtliche 15 Souveränitäts-, CRA-, SBOM/VEX-, AppSec- und Regulierungs-Suiten (9B & 4B v9.0) | Eliminiert Fehlalarme bei geschützten SQL-Kontexten und wehrt indirekte Prompt-Manipulationen zu 100 % ab |
|---|
| CTIBench (MCQA · VSP CVSS v3.1) & SecBench / CyberMetric | Threat Intelligence, MITRE ATT&CK / CWE, exakte FIRST.org-CVSS-v3.1-Gleichung und Netzwerkverteidigung | 100,00 % CTI-MCQA · 93,33 % CTIBench-RCM (CWE) · 95,33 % CyberMetric · 86,67 % CTIBench-VSP | 97,33 % CTI-MCQA · 86,00 % CTIBench-RCM (CWE) · 82,33 % CTIBench-VSP (9B v9.0) | +6,00 pp Sprung auf CTIBench-VSP durch symbolische CVSS-v3.1-Subscore- und Scope-Change-Verifikation (#1 im Feld) |
|---|
| ProcessBench-Math, JudgeBench (GPT & Claude) & CriticBench | Schrittweise Fehlerlokalisierung in Beweisen (PRM), 2-SAT/CSP-Logik sowie Programmier- und Mathematik-Kritik | 91,67 % ProcessBench · 79,00 % JB-GPT · 73,70 % JB-Claude · 92,67 % Critic-GSM8K | 86,67 % ProcessBench · 88,00 % Critic-GSM8K · 85,33 % Critic-Code (9B v9.0) | #1 auf JudgeBench-GPT (79,00 %), JudgeBench-Claude (73,70 %) und ProcessBench-Math (91,67 %) |
|---|
| EvalBiasBench & HaluBench-Grounded (Fakten- & Zahlen-Treue) | Resistenz gegen Längen-, Sykophantie- und Autoritäts-Fallen sowie mehrstufige RAG-Faktenprüfung | 97,50 % EvalBiasBench (+12,50 pp vs. v7.0) · 74,67 % HaluBench-Grounded (+21,34 pp vs. v4.0) | 93,93 % EvalBiasBench · 73,00 % HaluBench (9B v9.0) · 72,33 % HaluBench (4B v9.0) | #1 auf EvalBiasBench (97,50 % vs. 91,07 % beste externe 27B-Referenz und 81,43 % auf 72B-Referenz) |
|---|
| AllenAI RewardBench v1, RewardBench v2 & Arena-Hard-Auto | Stilbereinigte Präferenzbewertung, Out-of-Distribution-Reasoning, Code-Verifikation und Sicherheitsgrenzen | 96,00 % RewardBench v1 · 89,33 % RewardBench v2 · 91,00 % Arena-Hard · 95,20 % XSTest | 94,00 % RB-v1 · 85,67 % RB-v2 (9B v9.0) · 92,33 % RB-v1 (4B v9.0) | 99,97 % mittlere Positionskonsistenz über 12 paarweise gespiegelte Suiten (+4,78 pp vor externer 27B-Referenz) |
|---|