Machine Learning, Deep Learning, 3D Scene Reconstruction, Semantic Segmentation, Scene Compression
Translated keywords:
Machine Learning, Deep Learning, 3D Szenen Rekonstruktion, Semantische Segmentierung, Szenen Komprimierung
TUM classification:
DAT 760; DAT 770
Abstract:
Leveraging deep learning, we propose in this work an approach to tackle the problem of 3D scene reconstruction from single color images in indoor spaces. We rely here on synthetic data and show how to tackle the hard problem of sim2real transfer. Besides a 3D scene reconstruction, we further provide a semantic segmentation of the current viewport.
Translated abstract:
In dieser Arbeit wird mittels des Einsatzes von tiefen neuronalen Netzen ein Ansatz zur Bewältigung des Problems der dreidimensionalen Szenenrekonstruktion aus einzelnen Farbbildern in Innenräumen vorgestellt. Hierbei wird auf synthetische Daten zurückgegriffen und es wird aufgezeigt, wie die Herausforderungen des Sim2Real-Transfers bewältigt werden können. Zusätzlich zur 3D-Szenenrekonstruktion wird eine semantische Segmentierung des aktuellen Sichtfensters generiert.