KI auf Abwegen: Wenn das Röntgenbild sagt, dass einer Bier trinkt

Künstliche Intelligenz birgt in der Medizin ein heikles Risiko: das «Shortcut Learning». Dabei liefern Algorithmen völlig akkurate Ergebnisse – die völlig falsch sind.

, 13. Dezember 2024 um 23:00
letzte Aktualisierung: 21. Januar 2025 um 08:51
image
Symbolbild: Elevate on Unsplash
Der Einsatz von künstlicher Intelligenz (KI) im Gesundheitswesen wird zunehmend selber zum Thema: Was kann die Künstliche Intelligenz leisten, was die Fachkräfte nicht können? Und wo sind beginnt der Fehlerbereich? Bekannt ist, dass KI Anomalien erkennt, die ein Mensch kaum durchschauen kann, und Muster durchschaut, die für das blosse Auge unsichtbar sind.
Doch wie zuverlässig ist die KI am Ende? Dieser Frage ging nun ein Team des Dartmouth-Hitchcock Medical Center in den USA nach. Ins Zentrum der Studie geriet dabei ein heikles Phänomen: «Shortcut learning». Lernen in der Schnelldurchwahl. Das heisst: AI-Systeme können genaue Ergebnisse liefern – die aber potenziell überflüssig oder sogar falsch sind.
  • Hill, B.G., Koback, F.L. & Schilling, P.L. «The risk of shortcutting in deep learning algorithms for medical imaging research», in: «Scientific Reports» 14, 29224. November 2024.
  • doi.org/10.1038/s41598-024-79838-6
Mit einer Analyse von mehr als 25'000 Röntgenaufnahmen des Knies stellten die Forscher fest, dass die KI Feinheiten und Störfaktoren aufnahm – um daraus Merkmale «vorherzusagen», die gar keinen medizinischen Bezug hatten. Das System ging also dermassen ins Detail, dass es am Ende Korrelationen sichtete, wo keine sind, und sich daraus etwas zusammenbastelte.
So meinte die KI genau erkennen zu können, dass ein Knie-Patient eher gebratene Bohnen mag und Bier trinkt – oder nicht. Solche Vorhersagen haben keine klinische Grundlage. Aber in ihrer Detailgenauigkeit kombinierten die Algorithmen falsche Schlussfolgerungen.
«Das geht viel weiter als die Verzerrungen («bias»), die man wegen Details bei Herkunft oder Geschlecht macht», sagt Brandon Hill, ein Mitautor der Studie. Der Experte für Machine Learning fügt an: «Wir fanden heraus, dass der Algorithmus sogar dazu neigen kann, das Jahr zu behaupten, in dem eine Röntgenaufnahme gemacht wurde. Das ist bösartig: Wenn Sie ihn hindern, etwas Bestimmtes zu lernen, lernt er einfach etwas anderes, was er davor noch ignoriert hat. Das kann wirklich zu fragwürdigen Behauptungen führen. Man muss sich bewusst werden, wie leicht das bei dieser Technik geschieht.»
Nötig sind also strenge Bewertungsstandards – denn blindes Vertrauen in Algorithmen kann schwerwiegende Fehlinterpretationen nach sich ziehen. Die Forscher weisen darauf hin, dass KI nicht wie ein Mensch wahrnimmt oder konzeptualisiert.
Es sei «fast wie bei einer ausserirdischen Intelligenz», erklärt Hill: Sie löst Aufgaben nach ihren eigenen, für Menschen oft undurchschaubaren Regeln – was einen kritischen Ansatz bei ihrem Einsatz in der Medizin unabdingbar macht.
  • künstliche intelligenz
  • forschung
Artikel teilen

Loading

Kommentar

Mehr zum Thema

image

Unfaire Behandlung? Beim Herzstillstand spielt das Geschlecht eine Rolle

Eine grosse Schweizer Studie zeigt bedenkliche Unterschiede: Frauen kommen nach einem Herzstillstand seltener auf die Intensivstation, werden laxer behandelt und sterben eher als Männer.

image

Diese Studien könnten demnächst die Medizin verändern

Experten kürten für das Fachmagazin «Nature Medicine» jene klinischen Studien, die demnächst die Landschaft neu prägen könnten – darunter ein Projekt von Novartis.

image

Musik ist ein chirurgisches Hilfsmittel

Wer nach einer Operation Musik zu hören bekommt, benötigt weniger Schmerzmittel, hat weniger Ängste – und auch sonst bessere Werte. Am US-Chirurgenkongress wurden dazu vielversprechende Ergebnisse präsentiert.

image

2025 im Zeichen der KI: Drei wichtige Trends für das Gesundheitswesen

Der Wissenschaftsverlag Wolters Kluwer hat herausgearbeitet, wo Künstliche Intelligenz die Medizin in nächster Zeit speziell prägen könnte. Schwerpunkte liegen auf smarter Ausbildung und auf der Patientensicherheit.

image

Gemeinsam erfolgreich: Medinside wächst um über 70 Prozent

In eigener Sache: Medinside erlebte 2024 als Jahr des Wachstums und Erfolgs. Mit Ihrer Unterstützung bauten wir unsere Position als führende Plattform für Gesundheitsprofis weiter aus.

image

BFS-Studie: Milliarden für Forschung und Entwicklung

2023 investierten Schweizer Privatunternehmen knapp 18 Milliarden Franken in Forschung und Entwicklung. Gesundheit bleibt der wichtigste Fokus.

Vom gleichen Autor

image

Freispruch nach Verlust eines Auges

Ein Rechtsstreit zwischen einem Neurochirurgen und seiner Patientin zeigt: Die schriftliche Einwilligung zum Eingriff ist enorm wichtig.

image

Ein Genfer an der Spitze der Europäischen Gesellschaft für Koloproktologie

Frédéric Ris, Spezialist für Kolorektalchirurgie am Genfer Kantonsspital HUG, wurde zum Präsidenten der ESCP gewählt. Er ist der erste Schweizer in diesem Amt.

image

«Einige erkannten ihre eigene Geschichte»

Machtspiele, sexuelle Übergriffe, Schweigen: In einem TV-Film berichteten Ärztinnen aus der Romandie von Missständen in den Spitälern. Die Chirurginnen reagieren.