Skip to main content

2018 | OriginalPaper | Buchkapitel

Immersive Virtual Reality Utilizing Hand Gesture Capture as a Replacement for Traditional Controls

verfasst von : James L. Gibson, Duncan Anthony Coulter

Erschienen in: Intelligent Information Processing IX

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

Current virtual reality systems are more immersive than other traditional forms of digital entertainment, but the handheld controllers they use detract from what would otherwise be a truly immersive experience. This paper outlines a project implemented to overcome this issue by creating a spell-casting game in which everything is controlled by the user’s hand gestures. The implemented game made use of optical capture of the user’s hands using a Leap Motion controller attached to the front of a virtual reality headset. The captured gesture data was passed through a neural network for precise gesture classification in real-time, and the correct sequence of classified gestures created a spell effect in the game. The user was able to cast 10 different spells utilizing various combinations of a set of 14 different gestures.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
1.
Zurück zum Zitat Draskovic, D., et al.: A software agent for social networks using natural language processing techniques. In: Telecommunications Forum, Issue 24 (2016) Draskovic, D., et al.: A software agent for social networks using natural language processing techniques. In: Telecommunications Forum, Issue 24 (2016)
2.
Zurück zum Zitat Jung, K., Kanga, H., Lee, C.W.: Recognition-based gesture spotting in video games. Pattern Recognit. Lett. 25, 1701–1714 (2004)CrossRef Jung, K., Kanga, H., Lee, C.W.: Recognition-based gesture spotting in video games. Pattern Recognit. Lett. 25, 1701–1714 (2004)CrossRef
3.
Zurück zum Zitat Lavanya Varshini, M., Vidhyapathi, C.: Dynamic fingure gesture recognition using KINECT. s.l. IEEE (2016) Lavanya Varshini, M., Vidhyapathi, C.: Dynamic fingure gesture recognition using KINECT. s.l. IEEE (2016)
5.
Zurück zum Zitat Naglot, D., Kulkarni, M.: Real time sign language recognition using the leap motion controller. s.l. IEEE (2017) Naglot, D., Kulkarni, M.: Real time sign language recognition using the leap motion controller. s.l. IEEE (2017)
6.
Zurück zum Zitat Pambudi, R., Ramadijanti, N., Basuki, A.: Psychomotor game learning using skeletal tracking method with leap motion technology. s.l. IEEE (2016) Pambudi, R., Ramadijanti, N., Basuki, A.: Psychomotor game learning using skeletal tracking method with leap motion technology. s.l. IEEE (2016)
7.
Zurück zum Zitat Pinheiro, M., Kybic, J., Fua, P.: Geometric graph matching using monte carlo tree search. IEEE Trans. Pattern Anal. Mach. Intell. PP(99) (2016) Pinheiro, M., Kybic, J., Fua, P.: Geometric graph matching using monte carlo tree search. IEEE Trans. Pattern Anal. Mach. Intell. PP(99) (2016)
8.
Zurück zum Zitat Xu, D., Xiao, X., Wang, X., Wang, J.: Human action recognition based on Kinect and PSO-SVM by representing 3D skeletons as points in lie group. s.l. IEEE (2016) Xu, D., Xiao, X., Wang, X., Wang, J.: Human action recognition based on Kinect and PSO-SVM by representing 3D skeletons as points in lie group. s.l. IEEE (2016)
9.
Zurück zum Zitat Yeh, W., Tseng, T., Hsieh, J., Tsai, C.: Sign language recognition system via Kinect: number and english alphabet. s.l. IEEE (2016) Yeh, W., Tseng, T., Hsieh, J., Tsai, C.: Sign language recognition system via Kinect: number and english alphabet. s.l. IEEE (2016)
10.
Zurück zum Zitat Yin, Q., Wang, S., Miao, Y., Xin, D.: Chinese natural language processing based on semantic structure tree. s.l. IEEE (2015) Yin, Q., Wang, S., Miao, Y., Xin, D.: Chinese natural language processing based on semantic structure tree. s.l. IEEE (2015)
11.
Zurück zum Zitat Zhong, H., et al.: A similarity graph matching approach for instance disambiguation. s.l. IEEE (2016) Zhong, H., et al.: A similarity graph matching approach for instance disambiguation. s.l. IEEE (2016)
12.
Zurück zum Zitat Zhou, F., De la Torre, F.: Factorized graph matching. IEEE Trans. Pattern Anal. Mach. Intell. 38(9), 1774–1789 (2015)CrossRef Zhou, F., De la Torre, F.: Factorized graph matching. IEEE Trans. Pattern Anal. Mach. Intell. 38(9), 1774–1789 (2015)CrossRef
Metadaten
Titel
Immersive Virtual Reality Utilizing Hand Gesture Capture as a Replacement for Traditional Controls
verfasst von
James L. Gibson
Duncan Anthony Coulter
Copyright-Jahr
2018
DOI
https://doi.org/10.1007/978-3-030-00828-4_28