Von echten Straßen zu virtuellen Welten: Wie Pocket 3D 3DGS- und Robotersimulationen unterstützt

Das Erstellen einer überzeugenden virtuellen Straße ist in der Regel eine arbeitsintensive Aufgabe. Künstler und Entwickler müssen Gebäude, Straßen, Bürgersteige, Schilder, Vegetation und Stadtmöbel modellieren, Texturen hinzufügen und jedes Objekt anordnen, um die Komplexität einer realen städtischen Umgebung wiederzugeben.

Für ein Spiel, ein VR-Erlebnis, eine Digital-Twin-Präsentation oder eine Robotersimulation kann diese Arbeit wesentlich länger dauern, als das anfängliche Konzept vermuten lässt. Selbst nach umfangreicher Modellierung kann die resultierende Umgebung immer noch künstlich wirken, da kleine Unregelmäßigkeiten der realen Welt vereinfacht oder entfernt wurden.

Pocket 3D ermöglicht es Kreativen und Ingenieuren, mit einer realen Straße anstelle einer leeren digitalen Szene zu beginnen. Das tragbare System erfasst Lasermetrie und Panoramaaufnahmen, während der Bediener die Umgebung durchläuft. Die Daten können dann zu Punktwolken, Mesh, BIM und fotorealistischen 3D Gaussian Splatting Modellen verarbeitet werden.

Dies schafft einen direkten Weg von der Realitätserfassung zur Entwicklung virtueller Szenen. Anstatt jedes sichtbare Detail manuell nachzubauen, können Teams eine bestehende Straße erfassen und die resultierenden Daten für Visualisierung, räumliches Design, KI-Forschung und Real2Sim-Workflows anpassen.

Warum sind realistische Stadtszenen manuell so teuer zu bauen?

Eine reale Straße enthält Tausende von visuellen und geometrischen Details. Gebäude sind nicht perfekt symmetrisch, Bordsteine ändern ihre Höhe, Schilder neigen sich in unterschiedlichen Winkeln, Oberflächen zeigen Abnutzungserscheinungen, Vegetation wächst unregelmäßig und Objekte verdecken sich teilweise gegenseitig.

Diese Unvollkommenheiten machen die Umgebung wiedererkennbar, erschweren aber auch die manuelle Rekonstruktion. Ein Modellierer kann die wesentlichen Gebäudeformen wiedergeben, während er die kleineren räumlichen Hinweise übersieht, die beeinflussen, wie eine Person – oder ein Roboter – die Szene versteht.

Die manuelle Produktion erzeugt auch mehrere separate Aufgaben:

• Messen oder Schätzen der Straßen-Geometrie

• Modellieren von Gebäuden und Objekten am Straßenrand

• Erfassen und Aufbereiten von Texturen

• Positionieren von Assets im richtigen Maßstab

• Überprüfen der Szene anhand von realen Referenzen

• Optimieren für die Zielplattform

Pocket 3D eliminiert nicht jede Phase der virtuellen Szenenproduktion. Es ändert den Startpunkt, indem eine leere Szene durch erfasste reale Daten ersetzt wird.

Wie verwandelt Pocket 3D eine Straße in eine 3DGS-Szene?

Der Bediener trägt Pocket 3D in einem langsamen und stabilen Tempo durch die ausgewählte Straße. Sein Lasersensor erfasst die dreidimensionale Struktur der Umgebung, während eine kompatible Panoramakamera visuelle Informationen aus derselben Umgebung aufnimmt.

Kompatible Panoramakameras, die für das System aufgeführt sind, umfassen:

• DJI Osmo 360

• Insta360 X4

• Insta360 X4 Air

• Insta360 X5

Die Kamera ist nicht im Lieferumfang des Pocket 3D Hauptgeräts enthalten.

Das System unterstützt kontrolliertes Scannen über eine ungefähre Reichweite von 20–30 Metern. Während der Erfassung bieten eine magnetische Telefonhalterung und mobile Software eine Echtzeitvorschau, sodass der Bediener den Fortschritt überwachen und Bereiche identifizieren kann, die möglicherweise eine zusätzliche Abdeckung benötigen.

Nachdem die Daten verarbeitet wurden, rekonstruiert 3D Gaussian Splatting die erfasste Straße als fotorealistische Szene. Benutzer können sich durch das Ergebnis bewegen und die Umgebung aus Perspektiven betrachten, die nicht als feste Fotos oder Videobilder präsentiert wurden.

Das Ergebnis ist besonders nützlich, wenn visueller Realismus und schnelle Szenenerstellung wichtiger sind als die manuelle Erstellung jedes Objekts als editierbares Polygonmodell.

Warum kombiniert man Lasermetrie mit Panoramaaufnahmen?

Die rein visuelle Rekonstruktion kann in visuell reichen Umgebungen gut funktionieren, aber städtische Straßen enthalten oft wiederholende Fenster, ähnliche Wände, gleichförmige Gehwege, reflektierende Oberflächen, Schatten und große Belichtungsänderungen. Diese Bedingungen können die Bildanpassung und die Berechnung der Kameraposition erschweren.

Pocket 3D verwendet einen professionellen Lasersensor, um die räumliche Struktur der Szene mit zentimetergenauer Präzision zu erfassen. Die laserbasierte Trajektorie bildet eine geometrische Grundlage für die Organisation der Panoramaaufnahmen, die im 3DGS-Training verwendet werden.

Diese Kombination adressiert zwei verschiedene Kundenbedürfnisse:

• Laserdaten bewahren Maßstab und räumliche Beziehungen

• Panoramaaufnahmen liefern Farbe, Textur und visuellen Realismus

Die Laserkomponente macht eine gute Bilderfassung nicht überflüssig. Beleuchtung, bewegliche Objekte, Verdeckung und Wetter können das Aussehen des 3DGS-Ergebnisses immer noch beeinflussen. Das Modell ist jedoch weniger ausschließlich von visuellen Merkmalen für seine räumliche Positionierung abhängig.

Was macht einen Straßenscan für die Real2Sim-Entwicklung nützlich?

Real2Sim beschreibt den Prozess der Übertragung einer realen Umgebung in eine Simulation. Dies kann KI- und Robotik-Teams helfen, Systeme in Szenen zu testen, die die Komplexität tatsächlicher Einsatzorte enthalten.

Eine manuell erstellte Demonstrationswelt kann eine flache Straße, mehrere einfache Hindernisse und vorhersehbare Gebäudeformen enthalten. Eine erfasste Straße kann Bordsteine, Masten, Treppen, schmale Lücken, Schilder, unebene Oberflächen, Vegetation, Eingänge und andere Details umfassen, die die Wahrnehmung und Navigation beeinflussen.

Pocket 3D-Straßendaten können eine Quellumgebung für Folgendes bereitstellen:

• Forschung zur Navigation von Lieferrobotern

• Routensimulation für Patrouillenroboter

• Tests zur urbanen Wahrnehmung

• Studien zur Interaktion mit Gehwegen und Bordsteinen

• Demonstrationen zur Routenplanung

• Forschung zum Szenenverständnis

• Entwicklung synthetischer Daten

• Experimente mit verkörperter KI

Der Rohscan ist nicht automatisch ein vollständiger Robotersimulator. Entwickler müssen möglicherweise die Geometrie bereinigen oder vereinfachen, relevante Objekte kennzeichnen, Kollisionseigenschaften definieren, bewegliche und feste Elemente trennen und die Szene in ihre ausgewählte Simulationsplattform importieren.

Sein Wert liegt darin, dass die reale Struktur bereits erfasst wurde. Das Entwicklungsteam kann sich auf die Vorbereitung der Daten für Training und Tests konzentrieren, anstatt die gesamte Straße manuell neu zu erstellen.

Wie unterstützen mehrere Ausgaben verschiedene Entwicklungsphasen?

Eine Straße kann von technischen Teams, 3D-Künstlern und Projektbeteiligten genutzt werden, aber diese Gruppen benötigen nicht unbedingt dieselbe Ausgabe.

Punktwolken für räumliche Referenz

Punktwolken bewahren messbare Straßengeometrie und können Entwicklern helfen, Dimensionen, Entfernungen und Objektpositionen zu verstehen. Sie dienen auch als technische Referenz bei der Vorbereitung einer Simulationsumgebung.

Mesh für die Szenenintegration

Mesh-Modelle erstellen verbundene Oberflächen aus der erfassten Geometrie. Je nach Ziel-Workflow können Teams das Mesh weiterverarbeiten oder für Visualisierung, Design oder Simulation optimieren.

BIM für Bauprojekte

Architektur- und Digital-Twin-Teams können BIM-bezogene Ausgaben verwenden, wenn sie die Straßenerfassung mit Gebäude- oder Infrastruktur-Workflows verbinden.

3DGS für visuellen Realismus

Das 3DGS-Modell bietet die intuitivste Darstellung der erfassten Straße. Es eignet sich gut für virtuelle Erkundungen, Präsentationen, filmische Inhalte, Umweltreferenzen und Erlebnisse, bei denen Benutzer sich am ursprünglichen Ort präsent fühlen müssen.

Die Verfügbarkeit mehrerer Ausgaben aus einer Erfassung ermöglicht es, die realistische 3DGS-Szene zur Kommunikation zu nutzen, während Punktwolken- oder Mesh-Daten für die technische Entwicklung erhalten bleiben.

Können 3DGS-Straßenmodelle VR-, AR- und Spieleentwicklung unterstützen?

Virtuelle Erlebnisse benötigen oft wiedererkennbare Umgebungen, ohne die Produktionskosten, jede Straße von Grund auf neu zu modellieren. Pocket 3D kann Entwicklern helfen, reale Orte als Ausgangsmaterial für digitale Szenen zu erfassen.

Potenzielle Anwendungen umfassen:

• Virtuelle Touren durch Geschäfts- oder Kulturstraßen
• Referenzen realer Orte für Spiellevel
• VR-Erkundungs- und Trainingserlebnisse
• AR-Planungs- und Designpräsentationen
• Filmische Übergänge durch reale Umgebungen
• Standortarchive für die Medienproduktion
• Visuelle Hintergründe für virtuelles Storytelling

Der erforderliche Optimierungsaufwand hängt von der Ziel-Engine, dem Gerät und dem Interaktionsdesign ab. Ein hochauflösendes Modell, das für die Desktop-Visualisierung vorgesehen ist, kann einen anderen Produktionsprozess durchlaufen als eines, das für ein mobiles AR-Erlebnis konzipiert ist.

Pocket 3D beschleunigt die Phase der Realitätserfassung, aber die Entwickler bleiben dafür verantwortlich, das Ergebnis an die Leistungs- und Formatanforderungen ihrer endgültigen Plattform anzupassen.

Wie können Digital-Twin-Teams fotorealistische Straßenmodelle nutzen?

Urbane digitale Zwillinge werden oft als technische Systeme diskutiert, die Karten, Gebäude, Infrastruktur, Sensoren und Betriebsdaten enthalten. Obwohl diese Ebenen wichtig sind, können nicht-technische Stakeholder sie bei ausschließlicher Darstellung als Diagramme oder abstrakte Modelle nur schwer interpretieren.

Eine fotorealistische Straßenszene kann einen ausgewählten Bereich leichter verständlich machen. Projektteams können 3DGS nutzen, um bestehende Bedingungen darzustellen, den Kontext einer geplanten Entwicklung zu zeigen oder einen intuitiven visuellen Einstiegspunkt in eine größere Digital-Twin-Plattform zu schaffen.

Pocket 3D kann Digital-Twin-Projekte unterstützen, indem es Folgendes bereitstellt:

• Detaillierte Straßengrundszenen
• Visuelle Aufzeichnungen vor Bau oder Renovierung
• Kontext für vorgeschlagene städtische Veränderungen
• Realistische Umgebungen für öffentliche oder Kundenpräsentationen
• Wiederverwendbare räumliche Assets für die spätere Plattformentwicklung

Es sollte nicht als vollständiger digitaler Zwilling der Stadtverwaltung betrachtet werden. GIS-Ebenen, Datenbanken, Sensor-Feeds, Simulationslogik und Echtzeit-Updates müssen möglicherweise noch über andere Systeme integriert werden. Pocket 3D liefert die erfasste physische Umgebung, auf die diese Systeme verweisen oder die sie anreichern können.

Warum ist die Echtzeit-Vorschau bei der 3DGS-Erfassung wichtig?

Verdeckung ist eine der größten Herausforderungen beim Scannen von Straßen. Geparkte Fahrzeuge können Ladenfronten verdecken, Bäume können Schilder verdecken, und eine einzige Gehroute kann die Seiten von Stadtmöbeln oder Eingängen nicht vollständig erfassen.

Die mobile Echtzeit-Vorschau hilft dem Bediener, die Abdeckung während des Scans zu überwachen. Wenn ein wichtiger Bereich unvollständig erscheint, kann die Route angepasst werden, bevor der Standort verlassen wird.

Dies ist besonders wichtig für 3DGS, wo fehlende Ansichtspunkte die visuelle Kontinuität der finalen Szene beeinträchtigen können. Das Planen zusätzlicher Durchgänge um Schlüsselobjekte kann vollständigere Quelldaten liefern und das Risiko reduzieren, während der Verarbeitung größere Lücken zu entdecken.

Betreiber sollten auch in Betracht ziehen, Fußgänger und Fahrzeuge zu bewegen. Eine belebte Straße kann immer noch erfasst werden, aber übermäßige Bewegung kann zu inkonsistenten visuellen Informationen führen. Die Wahl eines geeigneten Zeitpunkts und die Beibehaltung einer bewussten Route können das Endergebnis verbessern.

Wie hilft ein Ein-Klick-Workflow Kreativ- und Forschungsteams?

Reality Capture wird weniger nützlich, wenn jeder Datensatz eine komplizierte Kombination nicht verwandter Tools erfordert, bevor er überprüft werden kann.

Pocket 3D enthält die SLAM GO Post Software zur Datenverarbeitung. Ihr Ein-Klick-Workflow wurde entwickelt, um den Übergang von der Feldsammlung zu Punktwolken- und Modellergebnissen zu vereinfachen.

Die Software beinhaltet eine lebenslange kostenlose Nutzung und kostenlose Updates. Für Studios, Universitäten und Forschungsteams, die wiederholte Experimente erwarten, können dadurch die langfristigen Kosten vorhersehbarer werden, indem jährliche Gebühren für den enthaltenen Verarbeitungsworkflow vermieden werden.

Spezialisierte Projekte erfordern möglicherweise weiterhin zusätzliche Software für Bearbeitung, Optimierung, Simulation oder Bereitstellung. SLAM GO Post verwaltet den Kern-Pocket 3D-Verarbeitungsworkflow, während Kunden die Ergebnisse entsprechend ihrer Zielplattform weiterverwenden können.

Wer kann von der Erfassung virtueller Straßen profitieren?

Dieser Workflow ist besonders relevant für:

• KI- und Robotikingenieure

• Real2sim- und Embodied-AI-Forscher

• VR/AR-Entwicklungsteams

• Game Designer und Umgebungs-Künstler

• Entwickler von Digital-Twin-Plattformen

• Architekten und Studios für urbane Visualisierung

• Film- und digitale Content-Ersteller

• Universitäten und Forschungseinrichtungen

• Kultur- und Tourismusorganisationen

Teams sollten definieren, ob ihre Priorität messbare Geometrie, fotorealistische Visualisierung, Simulationskompatibilität oder eine Kombination von Ausgaben ist. Diese Entscheidung beeinflusst die Scan-Route, Bildbedingungen, Nachbearbeitung und die finale Datenvorbereitung.

Reale urbane Komplexität in die digitale Entwicklung bringen

Echte Straßen enthalten ein Detailniveau, das durch manuelle Modellierung allein schwer zu reproduzieren ist. Pocket 3D erfasst diese Komplexität direkt und kombiniert zentimetergenaue Lasergeometrie mit Panoramaaufnahmen und 3DGS-Rekonstruktion.

Aus einem kontrollierten Straßenscan können Kunden Punktwolken für die räumliche Referenz, Mesh- und BIM-Ausgaben für die weitere Entwicklung sowie fotorealistische 3DGS-Modelle für Visualisierung und virtuelle Erkundung generieren. Eine mobile Echtzeit-Vorschau unterstützt die Feldabdeckung, während SLAM GO Post eine Ein-Klick-Verarbeitung mit lebenslanger kostenloser Nutzung und Updates bietet.

Für Entwickler, die Robotersimulationen, digitale Zwillinge von Städten, VR-Erfahrungen, Spiele oder visuelle Inhalte erstellen, bietet Pocket 3D eine praktische Möglichkeit, mit einer realen Umgebung zu beginnen. Anstatt jede Straße, Fassade, Beschilderung und jeden Gehweg von Grund auf neu zu erstellen, können Teams die Straße einmal erfassen und in eine wiederverwendbare digitale Grundlage für verschiedene kreative und technische Workflows umwandeln.