Detailed data about urban land-use, like building functions, is useful to governments for resource planning. To detect building functions, satellite imagery could be too course. In this work, individual buildings from 42 cities are classified with multilingual tweets and fused with high-resolution remote sensing imagery. After fusing the modalities, an overall accuracy of 75% can be achieved. The remote sensing and text features seem complementary and data fusion can improve the results.
Translated abstract:
Genaue Daten über Gebäudefunktionen sind für lokale Regierungen wichtig, um Ressourcen planen zu können. Satellitenbilder könnten zur Bestimmung dieser Funktionen zu grob aufgelöst sein. Daher werden in dieser Arbeit individuelle Gebäude aus 42 Städten zusätzlich mit mehrsprachigen Tweets klassifiziert und mit hochauflösenden Luftbildern fusioniert. Dadurch wird eine Genauigkeit von 75% erreicht. Bild- und Textmerkmale scheinen komplementär. Deshalb kann die Fusion die Ergebnisse verbessern.