Im Forschungsprojekt DAIOR arbeitet das Fraunhofer IPA zusammen mit Partnern daran, den Operationssaal der Zukunft mithilfe von Künstlicher Intelligenz (KI) und roboterassistierter Telechirurgie zu realisieren. Dabei sollen chirurgische Daten aus multimodalen Quellen mit KI-Methoden kontinuierlich analysiert werden, um Operationen in Echtzeit zu unterstützen.
Daten zu nutzen, um medizinisches Personal bei der Behandlung oder bei der Operation eines Patienten zu unterstützen, ist das Ziel des Projekts DAIOR. Das Akronym ist die Abkürzung für »Distributed Artificial Intelligence for the Operating Room«: Durch die Analyse von Daten, Optimierung von Workflows und die Nutzung von Erfahrungswerten aus früheren Operationen sollen Algorithmen trainiert werden. Auf diese Weise kann KI dem klinischen Personal in Echtzeit und standortunabhängig helfen, die Versorgung der Patienten und Patientinnen zu verbessern. In dem interdisziplinären Konsortium mit Fachkompetenzen aus Medizin und Technik arbeitet das Fraunhofer-Institut für Produktionstechnik und Automatisierung IPA zusammen mit dem Institute of Image-Guided Surgery (IHU) in Strasbourg und dem Bosch Digital Innovation Hub (KTBW) am Bosch Health Campus (Stuttgart). Das Projekt wird durch das Bundesministerium für Bildung und Forschung gefördert.
Die Nutzung medizinischer Daten ist meist auf einen Standort begrenzt. Behandlungen sind standortabhängig, da es im Gesundheitswesen kaum Möglichkeiten zum Datenaustausch gibt. Eine weitere Herausforderung sind die verschiedenen Formate der Daten wie Bilder, Texte und Videos. Diese erschweren es, Zusammenhänge zu erkennen und für die Behandlung von Patientinnen und Patienten zu nutzen. Damit das nicht so bleibt, werden im Projekt DAIOR KI-Modelle mit verteilten Lernansätzen mit dem lokal verfügbaren Wissen trainiert.
»Das Wissen kann so anderweitig verwendet werden, ohne dass sensible Daten den jeweiligen Standort verlassen«, sagt Johannes Horsch, Leiter Medizintechnische Assistenzsysteme am Fraunhofer IPA. So werde verteiltes Wissen gebündelt und ortsunabhängig verfügbar gemacht. »Durch die Methoden des föderalen Lernens können in DAIOR Trainingsdaten aus verschiedenen Standorten, sogar über Ländergrenzen hinweg genutzt werden, während die Daten an den Standorten verbleiben und so gleichzeitig der Schutz für die Daten von Patientinnen und Patienten sichergestellt ist.«
Die Zusammenarbeit zwischen Fraunhofer IPA und IHU Strasbourg ist durch das seit dem Jahr 2022 laufende Gemeinschaftsprojekt »5G-OR« bereits erfolgreich etabliert. Die dort implementierte 5G-Infrastruktur wird genutzt, um Operationen aus der Ferne durchzuführen. Für die ortsübergreifende roboterassistierte Telechirurgie wird in DAIOR ein KI-Modell entwickelt, das Verzögerungen in der Datenkommunikation auf beiden Seiten kompensieren kann, indem es die darauffolgenden Schritte voraussagt. »Das funktioniert ähnlich wie unser Gehirn«, erklärt Horsch. »Unser Gehirn berechnet ständig unmittelbar mögliche Szenarien. Genauso agiert auch die KI.« Diese werde kontinuierlich in Echtzeit mit Daten versorgt und sei daher in der Lage, die nächsten Schritte vorherzusagen und Operateurinnen und Operateuren zu assistieren.
Mit dieser roboterassistierten Telechirurgie könnten schon bald Operationen standortunabhängig über das Internet durchgeführt werden. Damit wird es möglich, freie OP-Kapazitäten flexibel zu nutzen: Operationen können schneller durchgeführt und Patienten besser medizinisch versorgt werden. »Das ist ein Meilenstein in der Versorgung von Patienten, besonders in der Notfallmedizin, bei der es oft auf Sekunden ankommt, beispielsweise bei einem Herzinfarkt oder Schlaganfall«, so Horsch. Außerdem kommt den Patienten zugute, dass das klinische Personal mehr Zeit für die Behandlung zur Verfügung hat.
Neben dem Gemeinschaftsprojekt »5G-OR« ist DAIOR bereits die zweite langjährige Kooperation zwischen Fraunhofer IPA und IHU Strasbourg. DAIOR vertieft die deutsch-französische Zusammenarbeit und stärkt den internationalen Technologie- und Wissenstransfer.
Das multidisziplinäre IHU Strasbourg forscht an innovativen bildgesteuerten Therapien für die Patientenversorgung. Es entwickelt minimal-invasive Präzisionseingriffe, die durch Technologien der virtuellen Realität, Robotik und Künstlichen Intelligenz optimiert werden. Neuartige von der IHU angelegte Patientenpfade, die die »Reise« des Patienten (engl. Patient Journey) durch das Krankenhaus von der Aufnahme bis zur Entlassung beschreibt, führen zu einer beschleunigten Diagnose, ambulanten statt stationären Operationen und einer verbesserten postoperativen Rehabilitation.
Klinische Gesundheitstechnologien und Robotik gehören zu den strategischen Themenbereichen des Fraunhofer IPA. Das Institut sieht in der KI die Möglichkeit, insbesondere Chirurginnen und Chirurgen durch intelligente Assistenzsysteme stärker zu unterstützen und Teilschritte der Operationen zu automatisieren. Dabei wurde die Telechirurgie als wichtiger Meilenstein identifiziert, da diese bereits die zur Automatisierung notwendige Infrastruktur umfasst und es erlaubt, große Datenmengen der Interventionen zu sammeln.
Das Bosch Digital Innovation Hub (KTBW) ist eine agile Innovations- und Implementierungseinheit am Bosch Health Campus (Stuttgart) mit engen, langjährigen und erfolgreichen Kooperationen mit beiden zuvor genannten Institutionen und jahrelangen Vernetzungen in das Mannheimer und Strasbourger Ökosystem. Sie hat das Ziel, die Umsetzungsrate von Forschungsprojekten insbesondere im Bereich digitaler und KI-Innovationen im Gesundheitswesen zu erhöhen und fungiert dabei als Katalysator für KI- und digitale Gesundheitsinnovationen und innovative Versorgungskonzepte.
Projekt: »DAIOR – Distributed Artificial Intelligence for the Operating Room« (zu Deutsch: »Verteilte Künstliche Intelligenz für den Operationssaal«)
Projektlaufzeit: 01.07.2023 bis 30.06.2027
Projektpartner: Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V., Robert Bosch Gesellschaft für medizinische Forschung mbH – Koordinierungsstelle Telemedizin Baden-Württemberg (KTBW), Institut Hospitalo-Universitaire de Strasbourg
Fördervolumen: 1 284 017 €
Fördergeber: Bundesministerium für Bildung und Forschung
Fraunhofer-Institut für Produktionstechnik und Automatisierung IPA