KI auf Abwegen: Wenn das Röntgenbild sagt, dass einer Bier trinkt

Künstliche Intelligenz birgt in der Medizin ein heikles Risiko: das «Shortcut Learning». Dabei liefern Algorithmen völlig akkurate Ergebnisse – die völlig falsch sind.

, 13. Dezember 2024 um 23:00
letzte Aktualisierung: 21. Januar 2025 um 08:51
image
Symbolbild: Elevate on Unsplash
Der Einsatz von künstlicher Intelligenz (KI) im Gesundheitswesen wird zunehmend selber zum Thema: Was kann die Künstliche Intelligenz leisten, was die Fachkräfte nicht können? Und wo sind beginnt der Fehlerbereich? Bekannt ist, dass KI Anomalien erkennt, die ein Mensch kaum durchschauen kann, und Muster durchschaut, die für das blosse Auge unsichtbar sind.
Doch wie zuverlässig ist die KI am Ende? Dieser Frage ging nun ein Team des Dartmouth-Hitchcock Medical Center in den USA nach. Ins Zentrum der Studie geriet dabei ein heikles Phänomen: «Shortcut learning». Lernen in der Schnelldurchwahl. Das heisst: AI-Systeme können genaue Ergebnisse liefern – die aber potenziell überflüssig oder sogar falsch sind.
Mit einer Analyse von mehr als 25'000 Röntgenaufnahmen des Knies stellten die Forscher fest, dass die KI Feinheiten und Störfaktoren aufnahm – um daraus Merkmale «vorherzusagen», die gar keinen medizinischen Bezug hatten. Das System ging also dermassen ins Detail, dass es am Ende Korrelationen sichtete, wo keine sind, und sich daraus etwas zusammenbastelte.
So meinte die KI genau erkennen zu können, dass ein Knie-Patient eher gebratene Bohnen mag und Bier trinkt – oder nicht. Solche Vorhersagen haben keine klinische Grundlage. Aber in ihrer Detailgenauigkeit kombinierten die Algorithmen falsche Schlussfolgerungen.
«Das geht viel weiter als die Verzerrungen («bias»), die man wegen Details bei Herkunft oder Geschlecht macht», sagt Brandon Hill, ein Mitautor der Studie. Der Experte für Machine Learning fügt an: «Wir fanden heraus, dass der Algorithmus sogar dazu neigen kann, das Jahr zu behaupten, in dem eine Röntgenaufnahme gemacht wurde. Das ist bösartig: Wenn Sie ihn hindern, etwas Bestimmtes zu lernen, lernt er einfach etwas anderes, was er davor noch ignoriert hat. Das kann wirklich zu fragwürdigen Behauptungen führen. Man muss sich bewusst werden, wie leicht das bei dieser Technik geschieht.»
Nötig sind also strenge Bewertungsstandards – denn blindes Vertrauen in Algorithmen kann schwerwiegende Fehlinterpretationen nach sich ziehen. Die Forscher weisen darauf hin, dass KI nicht wie ein Mensch wahrnimmt oder konzeptualisiert.
Es sei «fast wie bei einer ausserirdischen Intelligenz», erklärt Hill: Sie löst Aufgaben nach ihren eigenen, für Menschen oft undurchschaubaren Regeln – was einen kritischen Ansatz bei ihrem Einsatz in der Medizin unabdingbar macht.
Artikel teilen
  • Share
  • Tweet
  • Linkedin
  • Whatsapp
  • Telegram
Kommentar

2 x pro Woche
Abonnieren Sie unseren Newsletter.

oder

Was ist Ihr Beruf?

Wo arbeiten Sie?*

undefined
undefined

*Diese Angaben sind freiwillig. Sie bleiben im Übrigen anonym.
Warum bitten wir Sie darum? Medinside bietet Ihnen die Informationen und Beiträge kostenlos. Das bedeutet, dass wir auf Werbung angewiesen sind. Umgekehrt bedeutet es idealerweise auch, dass Ihnen auf Medinside möglichst nur Werbung gezeigt wird, die zu Ihnen passt und die Sie interessant finden könnten.
Wenn wir durch solche Erhebungen Angaben über das allgemeine Profil des Medinside-Publikums gewinnen, nützt dies allen: Ihnen, liebe Leserinnen und Leser, uns und unseren Kunden. Vielen Dank!


Mehr zum Thema

image

Studie: Herzmedikament könnte Metastasen stoppen

Ein Forscherteam von ETH, USB, USZ und KSBL fand heraus, dass das etablierte Herzmedikament Digoxin bei Brustkrebs Metastasen verhindern könnte.

image

CHUV: Aus Spenderstuhl wird Medizin

Das Universitätsspital Lausanne ist das erste Schweizer Spital mit Swissmedic-Zulassung zur Herstellung eines Medikaments aus Fäkalbakterien.

image

2025 im Zeichen der KI: Drei wichtige Trends für das Gesundheitswesen

Der Wissenschaftsverlag Wolters Kluwer hat herausgearbeitet, wo Künstliche Intelligenz die Medizin in nächster Zeit speziell prägen könnte. Schwerpunkte liegen auf smarter Ausbildung und auf der Patientensicherheit.

image

Gemeinsam erfolgreich: Medinside wächst um über 70 Prozent

In eigener Sache: Medinside erlebte 2024 als Jahr des Wachstums und Erfolgs. Mit Ihrer Unterstützung bauten wir unsere Position als führende Plattform für Gesundheitsprofis weiter aus.

image

BFS-Studie: Milliarden für Forschung und Entwicklung

2023 investierten Schweizer Privatunternehmen knapp 18 Milliarden Franken in Forschung und Entwicklung. Gesundheit bleibt der wichtigste Fokus.

image

Forschung und Praxis: Synergien für die Zukunft

Dr. Patrascu erklärt im Interview die Verbindung von Forschung und Praxis an der UFL. Er beschreibt die Vorteile des berufsbegleitenden Doktoratsprogramms in Medizinischen Wissenschaften und zeigt, wie die UFL durch praxisnahe Forschung und individuelle Betreuung Karrierechancen fördert.

Vom gleichen Autor

image

Covid: Eine Patentlösung für Pflegeheime gab es nicht

Die Pflegeheime standen in der Pandemie an vorderster Front. In Genf ging nun eine Studie der Frage nach: Was hätten sie besser machen können?

image

Pflege plus Integration: Freiburg startet Pilotprojekt

Der Kanton reagiert auf den Pflegepersonal-Mangel mit einer Spezial-Ausbildung: Sie verbindet Sprachunterricht mit beruflichem Einstieg in Pflegeheimen.

image

HSM: Neue Leistungsaufträge für Gynäkologie

Zwölf Schweizer Spitäler haben neu einen Leistungsauftrag für hochspezialisierte Medizin im Bereich komplexer gynäkologischer Tumoren erhalten.