Skip to main content

2018 | OriginalPaper | Buchkapitel

Seeing the Unseen: Locating Objects from Reflections

verfasst von : Jing Wu, Ze Ji

Erschienen in: Towards Autonomous Robotic Systems

Verlag: Springer International Publishing

Aktivieren Sie unsere intelligente Suche, um passende Fachinhalte oder Patente zu finden.

search-config
loading …

Abstract

Inspired by the ubiquitous use of reflections in human vision system, in this paper, we present our first step exploration of using reflections to extend the FOV of cameras in computer vision applications. We make use of a stereo camera, and establish mathematical models for locating objects from their mirror reflections. We also propose a pipeline to track and locate moving objects from their reflections captured in videos. Experimental results demonstrated the efficiency and effectiveness of the proposed method, and verified the potential use of reflections in locating non-line of sight (NLOS) objects.

Sie haben noch keine Lizenz? Dann Informieren Sie sich jetzt über unsere Produkte:

Springer Professional "Wirtschaft+Technik"

Online-Abonnement

Mit Springer Professional "Wirtschaft+Technik" erhalten Sie Zugriff auf:

  • über 102.000 Bücher
  • über 537 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Maschinenbau + Werkstoffe
  • Versicherung + Risiko

Jetzt Wissensvorsprung sichern!

Springer Professional "Technik"

Online-Abonnement

Mit Springer Professional "Technik" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 390 Zeitschriften

aus folgenden Fachgebieten:

  • Automobil + Motoren
  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Elektrotechnik + Elektronik
  • Energie + Nachhaltigkeit
  • Maschinenbau + Werkstoffe




 

Jetzt Wissensvorsprung sichern!

Springer Professional "Wirtschaft"

Online-Abonnement

Mit Springer Professional "Wirtschaft" erhalten Sie Zugriff auf:

  • über 67.000 Bücher
  • über 340 Zeitschriften

aus folgenden Fachgebieten:

  • Bauwesen + Immobilien
  • Business IT + Informatik
  • Finance + Banking
  • Management + Führung
  • Marketing + Vertrieb
  • Versicherung + Risiko




Jetzt Wissensvorsprung sichern!

Literatur
2.
Zurück zum Zitat Chen, Z., Hong, Z., Tao, D.: An experimental survey on correlation filter-based tracking. CoRR abs/1509.05520 (2015) Chen, Z., Hong, Z., Tao, D.: An experimental survey on correlation filter-based tracking. CoRR abs/1509.05520 (2015)
3.
Zurück zum Zitat Diamant, Y., Schechner, Y.Y.: Overcoming visual reverberations. In: Proceedings of CVPR (2008) Diamant, Y., Schechner, Y.Y.: Overcoming visual reverberations. In: Proceedings of CVPR (2008)
4.
Zurück zum Zitat Farid, H., Adelson, E.: Separating reflections from images by use of independent component analysis. J. Opt. Soc. Am. A 16(9), 2136–2145 (1999)CrossRef Farid, H., Adelson, E.: Separating reflections from images by use of independent component analysis. J. Opt. Soc. Am. A 16(9), 2136–2145 (1999)CrossRef
5.
Zurück zum Zitat Guo, X., Cao, X., Ma, Y.: Robust separation of reflection from multiple images. In: Proceedings of CVPR, pp. 2195–2202 (2014) Guo, X., Cao, X., Ma, Y.: Robust separation of reflection from multiple images. In: Proceedings of CVPR, pp. 2195–2202 (2014)
6.
Zurück zum Zitat Heide, F., Hullin, M.B., Gregson, J., Heidrich, W.: Low-budget transient imaging using photonic mixer devices. ACM Trans. Graph. (TOG) 32(4), 1–10 (2013). Article No. 45 Heide, F., Hullin, M.B., Gregson, J., Heidrich, W.: Low-budget transient imaging using photonic mixer devices. ACM Trans. Graph. (TOG) 32(4), 1–10 (2013). Article No. 45
7.
Zurück zum Zitat Jenkins, R., Kerr, C.: Identifiable images of bystanders extracted from corneal reflections. PLOS ONE 8(12), 1–5 (2013) Jenkins, R., Kerr, C.: Identifiable images of bystanders extracted from corneal reflections. PLOS ONE 8(12), 1–5 (2013)
9.
Zurück zum Zitat Nishino, K., Belhumeur, P., Nayar, S.: Using eye reflections for face recognition under varying illumination. In: Proceedings of ICCV (2005) Nishino, K., Belhumeur, P., Nayar, S.: Using eye reflections for face recognition under varying illumination. In: Proceedings of ICCV (2005)
10.
Zurück zum Zitat Nishino, K., Nayar, S.K.: Eyes for relighting. ACM Trans. Graph. (TOG) 23(3), 704–711 (2004). 2004 Proceedings of ACM SIGGRAPHCrossRef Nishino, K., Nayar, S.K.: Eyes for relighting. ACM Trans. Graph. (TOG) 23(3), 704–711 (2004). 2004 Proceedings of ACM SIGGRAPHCrossRef
11.
Zurück zum Zitat O’Brien, J.F., Farid, H.: Exposing photo manipulation with inconsistent reflections. ACM Trans. Graph. (TOG) 31(1), 1–11 (2012). Article No. 4 O’Brien, J.F., Farid, H.: Exposing photo manipulation with inconsistent reflections. ACM Trans. Graph. (TOG) 31(1), 1–11 (2012). Article No. 4
12.
Zurück zum Zitat Pandharkar, R., Velten, A., Bardagjy, A., Lawson, E.: Estimating motion and size of moving non-line-of-sight objects in cluttered environments. In: Proceedings of CVPR, pp. 265–272 (2011) Pandharkar, R., Velten, A., Bardagjy, A., Lawson, E.: Estimating motion and size of moving non-line-of-sight objects in cluttered environments. In: Proceedings of CVPR, pp. 265–272 (2011)
14.
Zurück zum Zitat Schechner, Y.Y., Nayar, S.K.: Generalized mosaicing: polarization panorama. IEEE Trans. Pattern Anal. Mach. Intell. 27(4), 631–636 (2005)CrossRef Schechner, Y.Y., Nayar, S.K.: Generalized mosaicing: polarization panorama. IEEE Trans. Pattern Anal. Mach. Intell. 27(4), 631–636 (2005)CrossRef
15.
Zurück zum Zitat Szeliski, R., Avidan, S., Anandan, P.: Layer extraction from multiple images containing reflections and transparency. In: Proceedings of CVPR (2000) Szeliski, R., Avidan, S., Anandan, P.: Layer extraction from multiple images containing reflections and transparency. In: Proceedings of CVPR (2000)
16.
Zurück zum Zitat Torr, P.H.S., Zisserman, A.: MLESAC: a new robust estimator with application to estimating image geometry. Comput. Vis. Image Underst. 78(1), 138–156 (2000)CrossRef Torr, P.H.S., Zisserman, A.: MLESAC: a new robust estimator with application to estimating image geometry. Comput. Vis. Image Underst. 78(1), 138–156 (2000)CrossRef
17.
Zurück zum Zitat Velten, A., Willwacher, T., Gupta, O., Veeraraghavan, A., Bawendi, M.G., Raskar, R.: Recovering three-dimensional shape around a corner using ultrafast time-of-flight imaging. Nat. Commun. 3, 745+ (2012) Velten, A., Willwacher, T., Gupta, O., Veeraraghavan, A., Bawendi, M.G., Raskar, R.: Recovering three-dimensional shape around a corner using ultrafast time-of-flight imaging. Nat. Commun. 3, 745+ (2012)
18.
Zurück zum Zitat Yang, L., Liu, J., Tang, X.: Depth from water reflection. IEEE Trans. Image Process. 24(4), 1235–1243 (2015)MathSciNetCrossRef Yang, L., Liu, J., Tang, X.: Depth from water reflection. IEEE Trans. Image Process. 24(4), 1235–1243 (2015)MathSciNetCrossRef
19.
Zurück zum Zitat Yano, T., Shimizu, M., Okutomi, M.: Image restoration and disparity estimation from an uncalibrated multi-layered image. In: Proceedings of CVPR, pp. 247–254 (2010) Yano, T., Shimizu, M., Okutomi, M.: Image restoration and disparity estimation from an uncalibrated multi-layered image. In: Proceedings of CVPR, pp. 247–254 (2010)
20.
Zurück zum Zitat Zhang, Z., Isola, P., Adelson, E.H.: SparkleVision: seeing the world through random specular microfacets. In: Proceedings of CVPR Workshops (2015) Zhang, Z., Isola, P., Adelson, E.H.: SparkleVision: seeing the world through random specular microfacets. In: Proceedings of CVPR Workshops (2015)
Metadaten
Titel
Seeing the Unseen: Locating Objects from Reflections
verfasst von
Jing Wu
Ze Ji
Copyright-Jahr
2018
DOI
https://doi.org/10.1007/978-3-319-96728-8_19