Dieser Beitrag behandelt im Schwerpunkt die Entwicklung eines Laserscanners auf Basis eines stereovision 3D Lokalisiersystems zur intraoperativen robotergeführten Erfassung der Patientenoberfläche zur Patientenregistrierung und Navigation als Teil eines modularen Chirurgieassistenzsystems. Weiterhin wird ein eigens entwickeltes Verfahren zur schnellen Durchführung einer Hand-Auge Kalibrierung vorgestellt, mit welcher das entwickelte optische System robotergeführt eingesetzt werden kann. Die Verbindung des optischen Systems mit einem Roboterarm stellt hierbei eine Alternative zu den derzeitig verwendeten Methoden zur intraoperativen Registrierung dar.
Der Messbereich für einen Laserscanner resultiert aus dem Abstand zwischen dem Linienlasermodul und der Kamera, sowie dem eingestellten Triangulationswinkel. Bei der Kalibrierung des Laserscanners ist darauf zu achten, dass der Messbereich hinreichend groß genug gewählt wird, dass keine Gefahr für den Patienten durch das robotergeführte System besteht.
Für die Versuche wurde der Laserscanner mit einem Triangulationswinkel von 30° und einem Abstand von 182mm zwischen der zum laserscanning verwendeten Kamera des Stereosystems, mit einer Sensorgröße von 1024x768 Pixel, und dem Linienlasermodul kalibriert. Der hieraus resultierende Messbereich des Laserscanners beginnt für diese Einstellungen bei 210mm vor der Kamera und endet bei 660mm vor der Kamera. Zur Unterdrückung von einfallendem Hintergrundlicht, welches die Messung verfälschen oder gänzlich unmöglich machen kann, wird ein optischer Bandpassfilter verwendet, der nur Licht mit einer Wellenlänge von 650nm passieren lässt. Dies entspricht der Wellenlänge des verwendeten Linienlasermoduls. In den mit aufgesetztem Filter aufgenommenen Bildern lässt sich die auf den Patienten aufprojizierte Laserlinie schwellwertbasiert identifizieren.
Der Laserscanner wird mittels einer Stativkupplung an dem Roboterarm befestigt und anschließend eine Hand-Auge Kalibrierung durchgeführt. Mittels der Hand-Auge Kalibrierung wird die Transformationsmatrix zwischen den Koordinatensystemen des Laserscanners und dem TCP des Roboterarms ermittelt (Abb. 1b). Dies ist notwendig, da der Roboterarm für die Bewegung des Laserscanners über die zu erfassende Fläche des Patienten verantwortlich ist, die Bewegungsrichtung aber durch das Koordinatensystem des Laserscanners vorgegeben wird (Abb. 1a). Durch die ermittelte Transformationsmatrix kann diese in das Robotersystem umgerechnet werden.
Auf Basis einer schon im modiCAS System vorhandenen Kalibrierroutine wurde für Hand-Auge Kalibrierung eine eigene Lösung entwickelt, auf die hier allerdings aus Platzgründen nicht detaillierter eingegangen werden kann. Vorbereitend ist einmalig eine Abgleichbewegung des Roboterarms außerhalb des Operationssaals erforderlich, deren Ergebnis in der modiCAS Software abgespeichert wird und anschließend für jede Durchführung einer Hand-Auge Kalibrierung zur Verfügung steht.
Für die Durchführung der Hand-Auge Kalibrierung wird das Kamerasystem in seiner Funktion als 3D Lokalisiersystem verwendet, da für die Kalibrierung die Verwendung von Referenzgebern erforderlich ist. Dies stellt hier kein Problem dar, da das Koordinatensystem des 3D Lokalisiersystems deckungsgleich mit dem Koordinatensystem des Laserscanners ist. Die eigentliche Hand-Auge Kalibrierung kann schnell (t < 2min) und unter sehr beengten Platzverhältnissen, also auch innerhalb des Operationssaals, durchgeführt werden, da hierzu keine Bewegungen des Roboterarms notwendig sind. 3
Um die Funktionsweise und die Genauigkeit der robotergeführten Oberflächenerfassung mittels des entwickelten Systems zu demonstrieren, wurden für den Versuch drei künstliche Landmarken an einem Plastikschädel befestigt. Als Landmarken wurden hierzu weiß lackierte Aluminiumkegel verwendet, die mittels einer Klebefläche aufgebracht wurden. Diese sind in den aufgenommenen 3D Punktwolken leicht zu identifizieren und zu extrahieren. Für die Messreihen wurden jeweils eine Landmarke auf den Nasenrücken, eine oberhalb der linken Augenbraue und eine and der rechten Schläfe angebracht [Abb. 2].
Anschließend wurde der Plastikschädel, mit im Gesicht aufgeklebten Landmarken, mehrfach und aus verschiedenen Beobachtungswinkeln mittels des Laserscanners abgetastet und digitalisiert. In den daraus entstandenen 3D Punktwolken wurden die Abstände der einzelnen Landmarken zueinander mittels der Software ermittelt und diese Ergebnisse im Anschluss mit Referenzwerten, die mittels Messschieber am Plastikschädel aufgenommenen wurden, verglichen. Die Distanz zwischen dem Laserscanner und dem Plastikschädel betrug bei den Messreihen ca. 400mm. Die Ergebnisse der aus der Software ermittelten Abstände der Landmarken zueinander und Gegenüberstellung mit den manuell aufgenommenen Referenzwerten sind in Tabelle 1 dargestellt.
Nach mehrmaliger Durchführung des Laserscans aus verschiedenen, zufällig gewählten Beobachtungswinkeln zu dem mit den künstlichen Landmarken versehenen Plastikschädels kamen folgende Resultate zustande: Landmarken 1;2 1;3 2;3
Manuelle Abstandsmessung 45,8 mm 69,8 mm 107,5 mm
Abstandsmessung in der 3D Punktwolke bei 5 Messreihen 45,7 mm 69,4 mm 107,4 mm 45,6 mm 69,6 mm 107,4 mm 45,8 mm 69,7 mm 107,5 mm 45,6 mm 69,8 mm 107,1 mm 45,9 mm 69,9 mm 107,8 mm Die erste Spalte der Tabelle mit der Bezeichnung “Landmarken“ gibt hierbei an zwischen welchen künstlichen Landmarken die Messungen durchgeführt wurden. Die Nummern repräsentieren hierbei die in Abb. 2 markierten aufgeklebten künstlichen Landmarken an dem Plastikschädel. Die Werte der der Spalte mit der Bezeichnung “Manuellen Abstandsmessung“ zeigen die ermittelten Abstände zwischen den in Spalte 1 angegebenen Landmarken mittels eines handgeführten Messschiebers und dienen hierbei als Referenzmessung für die aus der Software ermittelten Abstände zwischen den künstlichen Landmarken. Als Referenzpunkte für die Abstandsmessungen wurden hierbei die Spitzen der aufgeklebten Landmarken verwendet. Im dritten Abschnitt der Tabelle werden die aus den 3D Darstellungen der aufgenommenen Punktwolken ermittelten Abstände zwischen den jeweiligen Landmarken dargestellt. 4
Wie in Tabelle 1 zu sehen ist, ist die maximale Abweichung zwischen den mit dem Laserscanner und den manuell ermittelten Daten kleiner als 1mm. Ursache für die auftretenden Abweichungen zwischen den ermittelten Werten ist die Verwendung einer Vielzahl von verschiedenen Transformationsmatrizen der einzelnen Systemkomponenten. Hierbei nehmen die Transformationsmatrizen des Roboterarms und des 3D Lokalisiersystems, welches zur Hand-Auge Kalibrierung verwendet wird, Einfluss auf die Genauigkeit des anschließenden Laserscans. Eine weitere Ursache für Abweichungen kann eine Messungenauigkeit des Laserscanners, sowie die Synchronisation zwischen den Positionsdaten des Roboterarms und den vom Laserscanner aufgenommenen Datensätzen sein. Derzeit liegt der Fokus der Arbeit darauf, diese Fehlerquellen zu minimieren um die Präzision des Gesamtsystems zu erhöhen.
Parallel dazu werden Testreihen durchgeführt um zu ermitteln wie genau sich reale Haut erfassen lässt. Dazu wurden Probanden mittels des Laserscanners erfasst um den Einfluss verschiedener Hautfarben, sowie verschiedener Hauttypen zu untersuchen. An einem Verfahren zur Genauigkeitsmessung an realen Testpersonen wird noch gearbeitet, da sich herausgestellt hat, dass die Verwendung von aufgeklebten künstlichen Landmarken hierzu, wie in diesem Beitrag beschrieben, durch den Skinshift an der Testperson sehr schwierig ist.
In diesem Beitrag wurde die Entwicklung eines robotergeführten optischen Systems zur intraoperativen Navigation und Erfassung der Patientenoberfläche zur anschließenden Registrierung hier mit dem Schwerpunkt Patientenregistrierung vorgestellt. Anhand des beschriebenen Versuchs wurde gezeigt, dass die aus den aufgenommenen Daten des Laserscanners rekonstruierten 3D Punktwolken korrekt skaliert dargestellt werden und somit in weiteren Versuchen zur Patientenregistrierung mittels Surface-Matching verwendet werden können.
Dieses System stellt eine Alternative zu den derzeit verwendeten Systemen zur intraoperativen Erfassung von Patientendaten zu Registrierung dar. In weiterführenden Arbeiten wird ein geeignetes Verfahren zum Surface-Matching zwischen den intraoperativ mittels des Laserscanners gewonnen Patientendaten und den aus der präoperativen Bildgebung extrahierten Patientendaten untersucht. Zusätzlich dazu wird die bessere Verzahnung des 3D Lokalisiersystems mit dem Laserscanner untersucht. 6