Zenodo
Das Label existiert bereits. Der attestierte strukturierte Befund als verification floor für die Überwachung radiologischer KI
By Florian Reiger-Ochsner.
Abstract
Die Überwachung eingesetzter KI-Systeme kann nur so genau wie ihre Referenz-Labels sein. Heute werden diese Labels nachträglich erzeugt, durch gesonderte Annotation oder durch Rekonstruktion aus dem Freitextbefund, immer mehr mit Sprachmodellen. Beide Wege entstehen außerhalb des Vorgangs, den sie beurteilen sollen. Dieses Konzeptpapier beschreibt den anderen Weg: Im Moment der Freigabe hat der Radiologe das Urteil, das die Überwachung zu rekonstruieren sucht, bereits gefällt. Ist der Befund strukturiert und codiert, wird ein vorgeschlagener Wert durch einen expliziten Attestierungsakt bestätigt, korrigiert oder abgelehnt, und der Akttyp wird mit Provenance aufgezeichnet. Das Referenz-Label entsteht dann nativ am Ort der Versorgung, zum Zeitpunkt der Freigabe. Die Unterscheidung nach Akttyp ist nicht neu, ein IHE-Profil codiert sie bereits. Der Beitrag liegt in einer Folgerung, die dort nicht gezogen wird: Ein passiv übernommenes Feld darf nicht als angenommen zählen. Das Verifikationssignal wird ausschließlich aus aktiv attestierten Werten gebildet, während das Durchwinken im Alltag erlaubt bleibt. Dieses Signal ist kein Ground Truth. Es spiegelt das Urteil des Befunders und ist gegen Automation Bias nicht immun, weshalb Verblindung als Konstruktionsfrage behandelt wird. Das Prinzip ist hersteller- und methodenneutral. Ein offenes Repository mit Vorlagen und Prüfwerkzeug begleitet den Beitrag. The label already exists. The attested structured report as a verification floor for monitoring radiological AI Post-deployment monitoring of clinical AI is only as accurate as its reference labels. Today these labels are produced after the fact, by separate annotation or by reconstruction from free-text reports, increasingly with large language models. Both arise outside the process they are meant to judge. This concept paper describes the alternative: at the moment of sign-off, the radiologist has already reached the judgement that monitoring seeks to reconstruct. When the report is structured and coded, a proposed value is confirmed, corrected or rejected by an explicit act of attestation, and the type of act is recorded with provenance. The reference label then arises natively at the point of care. Distinguishing these acts is not new, an IHE profile already codes them. The contribution lies in a consequence that is not drawn there: a field that was passively accepted must not count as accepted. The verification signal is formed from actively attested values only, while waving values through remains permitted in daily work. This signal is not ground truth. It reflects the radiologist's judgement and is not immune to automation bias, which is why blinding is treated as a matter of design. The principle is vendor- and method-neutral. An open repository with templates and a checking tool accompanies the paper.



