Forschungsidee
Um die in den Projekten A1-A5 erlangten multimodalen Sensordaten intraoperativ nutzen zu können, ist eine enge Verknüpfung der Projekte im Schwerpunkt B vorgesehen. Der intraoperative Informationsgewinn ist in eine übergeordnete prä- und postoperative Lernschleife eingebettet, welche die Zuverlässigkeitsaussagen stetig verbessern soll. Hierbei ist es essentiell, die intraoperativen Ergebnisse anhand des histopathologischen Schnellschnitts zu validieren.
Zusätzlich zu den multimodalen Sensoren aus den Projekten A1-A5 wird das vorhandene intraoperative Kamerabild zur dynamischen bildgestützten Positionierung genutzt, das den Operateur bei der Ausrichtung der Instrumente unterstützt.
Der datengetriebenen multimodalen Sensorfusion werden neben den reinen Sensorsignalen auch zugehörige Ortsinformationen sowie vorverarbeitete Gewebeparameter übergeben.