Skip to main content

2019 | OriginalPaper | Buchkapitel

Proposal and Evaluation of AR-Based Microscopic Brain Surgery Support System

verfasst von : Masanao Koeda, Sana Nishimoto, Hiroshi Noborio, Kaoru Watanabe

Erschienen in: Human-Computer Interaction. Recognition and Interaction Technologies

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

In this study, we describe an augmented reality (AR) support system that superimposes a three-dimensional computer graphics (3DCG) brain model image on an intraoperative microscopic image using simultaneous localization and mapping (SLAM). First, we extract regions such as tumor and blood vessel from computed tomography (CT) images or magnetic resonance images (MRI) of real patients, where data is stored in the digital imaging and communications in medicine (DICOM) format. Then, the entire brain and identified regions are converted into three-dimensional computer graphics (3DCG) model with a standard triangulated language (STL) format. The motion of the camera is estimated from the surgical video using SLAM. Based on the movement, the 3DCG brain model can be moved according to the movement of the real brain. Finally, we verified the estimation accuracy of the camera movement using SLAM.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
5.
Zurück zum Zitat Nonaka, M., Chikayama, Y., Kayaki, M., Koeda, M., Tachibana, K., Noborio, H.: A useful robotic-mechanical system for measuring a surgical area without obstructing surgical operations by some surgeon. In: Kurosu, M. (ed.) HCI 2018. LNCS, vol. 10902, pp. 43–52. Springer, Cham (2018). https://doi.org/10.1007/978-3-319-91244-8_4CrossRef Nonaka, M., Chikayama, Y., Kayaki, M., Koeda, M., Tachibana, K., Noborio, H.: A useful robotic-mechanical system for measuring a surgical area without obstructing surgical operations by some surgeon. In: Kurosu, M. (ed.) HCI 2018. LNCS, vol. 10902, pp. 43–52. Springer, Cham (2018). https://​doi.​org/​10.​1007/​978-3-319-91244-8_​4CrossRef
6.
Zurück zum Zitat Mur-Artal, R., Tardós, J.D.: ORB-SLAM2: an open-source SLAM system for monocular, stereo and RGB-D cameras. IEEE Trans. Robot. 33(5), 1255–1262 (2017)CrossRef Mur-Artal, R., Tardós, J.D.: ORB-SLAM2: an open-source SLAM system for monocular, stereo and RGB-D cameras. IEEE Trans. Robot. 33(5), 1255–1262 (2017)CrossRef
7.
Zurück zum Zitat Rublee, E., Rabaud, V., Konolige, K., Bradski, G.R.: ORB: an efficient alternative to SIFT or SURF. In: Proceedings of the 2011 International Conference on Computer Vision, pp. 2564–2571 (2011) Rublee, E., Rabaud, V., Konolige, K., Bradski, G.R.: ORB: an efficient alternative to SIFT or SURF. In: Proceedings of the 2011 International Conference on Computer Vision, pp. 2564–2571 (2011)
8.
Zurück zum Zitat Mitsuhashi, N., Fujieda, K., Tamura, T., Kawamoto, S., Takagi, T., Okubo, K.: BodyParts3D: 3D structure database for anatomical concepts. Nucleic Acids Res. 37, D782–D785 (2009)CrossRef Mitsuhashi, N., Fujieda, K., Tamura, T., Kawamoto, S., Takagi, T., Okubo, K.: BodyParts3D: 3D structure database for anatomical concepts. Nucleic Acids Res. 37, D782–D785 (2009)CrossRef
Metadaten
Titel
Proposal and Evaluation of AR-Based Microscopic Brain Surgery Support System
verfasst von
Masanao Koeda
Sana Nishimoto
Hiroshi Noborio
Kaoru Watanabe
Copyright-Jahr
2019
DOI
https://doi.org/10.1007/978-3-030-22643-5_36

Neuer Inhalt