Forschung / 2026
Render to BIM — BIM-Modellierung auf Basis generativer Renderings
Entwürfe aus generativen Bildern als bearbeitbare Objekte in das ursprüngliche BIM übertragen.
- Ort
- München, Deutschland, Zürich, Schweiz
- Typologie
- Forschung
- Status
- Laufende gemeinsame Forschung
- Jahr
- 2026
Generative KI kann aus einer BIM-Ansicht rasch räumliche Varianten erzeugen. Neu dargestellte Möbel existieren jedoch noch nicht im Modell. Diese Forschung verbindet generatives Rendering, 3D-Objektrekonstruktion und räumliche Registrierung, um die Entwurfsinformationen eines ausgewählten Bildes in das ursprüngliche BIM zu übertragen.
Die ursprüngliche Kamera und architektonische Elemente bilden die räumliche Referenz für Massstab, Orientierung und Position rekonstruierter Objekte. Diese werden als IFC-Einrichtungselemente gespeichert. Ziel ist es, die visuelle Entwurfssuche mit der anschliessenden Modellprüfung und Entwurfsentwicklung zu verbinden.
Vom bildbasierten Entwurf zum Modell
Konventionelles Rendering zeigt bereits modellierte Informationen. Generatives Rendering schlägt hingegen Möbel und räumliche Anordnungen vor, die zunächst nur im Bild existieren. Für Mengenermittlung oder die Prüfung von Bewegungsflächen müssen die Objekte erkannt, als 3D-Geometrie rekonstruiert und im Koordinatensystem des ursprünglichen Modells platziert werden.

Ein integrierter Ablauf mit drei Modulen
Zunächst werden eine unmöblierte BIM-Ansicht, ihre Kameraparameter und eine Tiefenkarte für die generative Entwurfssuche gespeichert. Anschliessend werden Objekte des ausgewählten Renderings als einzelne Instanzen segmentiert und als Meshes rekonstruiert. Zuletzt wird die geschätzte Tiefe am BIM kalibriert, Platzierungskandidaten werden bewertet und die Ergebnisse als IFC exportiert.

Objektrekonstruktion mit und ohne Szenenkontext
Die Untersuchung vergleicht Hunyuan3D-2.1 mit isolierten Objektausschnitten und SAM 3D Objects, das die gesamte Szene sowie eine Objektmaske verwenden kann. Bei nur einer Ansicht erschweren Verdeckungen und am Bildrand abgeschnittene Objekte die Rekonstruktion unsichtbarer Geometrie. Eine zusätzliche SAM-3D-Bedingung mit Objektausschnitten trennt Modellunterschiede vom Einfluss des Szenenkontexts.

Tiefenkalibrierung am ursprünglichen BIM
MoGe-2 schätzt die monokulare Tiefe des ausgewählten Renderings. Korrespondierende Pixel auf architektonischen Elementen wie Wänden und Böden kalibrieren die Schätzung anhand der metrischen Tiefe des ursprünglichen BIM. Eine globale Skalierungs- und Verschiebungsabbildung wird mit einer monotonen stückweise linearen Abbildung anhand zurückgehaltener Referenzpixel verglichen. Die gespeicherte Kamera überführt die kalibrierte Tiefe in sichtbare Oberflächenpunkte im BIM-Koordinatensystem.

Objektplatzierung anhand ergänzender Informationen
Drei Kandidaten nutzen ergänzende Informationen: Depth OBB passt eine Box an sichtbare Oberflächenpunkte an, die Rekonstruktionspose verwendet die vom Rekonstruktionsmodell geschätzte Pose, und FoundationPose rendert ein Mesh zum Vergleich mit der Beobachtung. Die Auswahl bewertet erklärte Tiefe abzüglich Verletzungen des freien Raums. Das Mesh wird unter Erhaltung seiner Proportionen als IfcFurnishingElement gespeichert, einschliesslich Quellansicht, Schätzverfahren und Konsistenzwerten.

Vorläufige Ergebnisse: Form- und Platzierungsgenauigkeit
Tabelle 6 des Entwurfs berichtet für SAM 3D Objects mit Szene und Maske mediane Form-F-scores@5cm von 0.77–0.84 über die Renderer. In Tabelle 7 erreicht Depth OBB mit geschätzter Tiefe eine [email protected] von 43.4–59.6%; mit der Tiefe des ursprünglichen Modells sind es 78.8%. Die Kennzahlen bewerten die ausgerichtete Form beziehungsweise die Platzierung im Modell und dürfen nicht gleichgesetzt werden. Die Ergebnistabellen nennen 99 Objekte pro Renderer, während die Datensatztabelle noch unvollständige Werte enthält; ein endgültiger Datensatzumfang wird hier daher nicht angegeben.
Potenzial und Grenzen
Das Verfahren erzeugt eine erste BIM-Repräsentation zur Prüfung und Korrektur durch Entwerfende. Es erstellt kein vollständig fertiges BIM ohne Eingriff. Die Evaluation nutzt korrekte Instanzmasken und stilistisch veränderte möblierte Ansichten; Fehler automatischer Segmentierung und die freie Möblierung leerer Räume sind nicht erfasst. Geneigte oder wandmontierte Objekte, verdeckte Geometrie und Tiefenfehler generierter Bilder bleiben offene Aufgaben.
Mitwirkende
- Mitautoren: Suhyung Jang, Seunghoon Lee, André Borrmann
- Rolle: Erstellung von Validierungsbildern
- Institutionen: Technical University of Munich, ETH Zürich
- Grundlage: Generative Rendering-Based BIM Authoring, bereitgestellter Preprint
- Laufende Forschung: vorläufige Ergebnisse, keine abgeschlossene Publikation oder endgültige Validierung.