In het kort
- Eén telefooncamera kan nu live een kamer in 3D reconstrueren op 20 fps, zonder lidar of speciale opstelling.
- De kosten van ruimtelijke opnames zijn in ~18 maanden ingestort, waardoor mapping verschuift van gecentraliseerde projecten naar crowdsourced bijproduct.
- Dat Apple Gaussian splatting naar Maps brengt, laat zien dat mapping opschuift van foto's van plekken naar de plekken zelf.
- Goedkope 3D-reconstructie met één camera kan lidar vervangen in robotperceptie, wat de kosten voor embodied AI verlaagt.
- Zodra representaties dicht genoeg worden, doet het onderscheid tussen een kaart en een kopie van de wereld er niet meer toe.
Eén telefooncamera kan nu een kamer in 3D reconstrueren met 20 frames per seconde. Live, over lange opnames, end-to-end. Geen lidar. Geen rig. Eén camera, streamend.
Twee jaar geleden had die zin absurd geklonken. Ruimtelijke capture betekende dure lidar-plus-RGB-scanners, zorgvuldige sweeps en uren nabewerking voordat je iets verkenbaars had. Nog dit voorjaar was de eerlijke conclusie in het veld dat distributie van 3D Gaussian splats zo goed als opgelost was (je kon een grote indoor scan naar een browser streamen en er in real time doorheen lopen), terwijl capture de bottleneck bleef. Goede resultaten vereisten nog steeds hardware die de meeste mensen nooit zullen aanraken.
Die bottleneck lost op. En het loont om even stil te staan bij wat er gebeurt als hij weg is.
De capture-curve, samengeperst
Dit is het traject, allemaal binnen grofweg de laatste achttien maanden.
Niantic bracht collaboratieve splat-capture naar telefoons en een gedeelde kaart, waarmee iedereen alles in 3D kan vastleggen en aan een plek kan koppelen. World Labs' Marble ging van het genereren van 3D-scènes die je tot uitgestrekte omgevingen kon samenvoegen naar het reconstrueren van echte locaties uit een handvol foto's — zestien iPhone-foto's van een steegje in Shinjuku werden binnen minuten een volledig verkenbare 3D-wereld. NVIDIA's Lyra schrapte de handmatige stitching-stap voor grootschalige verkenbare werelden volledig. Een open-source repo neemt nu elke stadsnaam en spuugt een 3D-model uit met gebouwen en straten uit OpenStreetMap, MIT-gelicenseerd, geen login. SuperSplat voegde automatische voxel collision toe, waarmee elke splat solide, beloopbare geometrie wordt op 5 cm resolutie — sterker gecomprimeerd dan een mesh, maar solide genoeg om doorheen te bewegen.
En in juni kondigde Apple op WWDC aan dat Gaussian splatting naar Apple Maps komt.
Elk van deze stappen is op zichzelf bescheiden engineering. Samen beschrijven ze één curve: de kosten om een echte plek om te zetten in een verkenbare digitale plek dalen richting nul, en het apparaat dat het doet zit al in een paar miljard broekzakken.
de kosten om een echte plek om te zetten in een verkenbare digitale plek dalen richting nul, en het apparaat dat het doet zit al in een paar miljard broekzakken.
Wat mensen doen met gratis capture
Over de vraag hoeft niemand te speculeren. Mensen zijn nu al bezig echte plekken te crowdsourcen tot verkenbare splats — kathedralen, steegjes, pleinen — en delen ze in tools als SuperSplat. Loop de Stephansdom binnen vanachter je bureau. Het is nu nog rommelig en hobbyistisch, zoals het vroege Wikipedia rommelig en hobbyistisch was. Maar de contouren zijn zichtbaar: een next-gen kaart waar je in kunt stappen, stukje bij beetje gebouwd door wie er toevallig staat met een telefoon.
De historische parallel is Street View. Google reed jarenlang met camera-auto's over elke weg op aarde om een fotografische index van de planeet te bouwen. Dat was een gecentraliseerd, kapitaalintensief project omdat capture duur was. Als capture één camera en een paar seconden kost, ontstaat dezelfde index als bijproduct van mensen die ergens zijn. Dat Apple splats in Maps stopt is het institutionele signaal dat mapping deze kant op gaat: van foto's van plekken naar de plekken zelf, in geometrie.
De tweede klant: machines
Onder de consumentenkant zit een stillere implicatie. Een live 3D-reconstructie vanuit één camera is precies wat een robot nodig heeft om de ruimte te begrijpen waar hij doorheen beweegt. Perceptie is een van de hardnekkige bottlenecks in embodied AI geweest, en het hardware-antwoord was vaak lidar: precies, duur, energievretend. Als een gewone camerastream in real time dichte, persistente 3D-structuur kan produceren, wordt de perceptie-stack voor huishoud- en magazijnrobots radicaal goedkoper.
En de gecrowdsourcete kaart voedt daar weer in terug. Een robot die een gebouw binnenkomt dat al is vastgelegd, begint met een voorsprong. Hij laadt de ruimte. Machine-leesbare 3D-modellen van steden zijn de verbindende laag tussen de wereld van bits en de wereld van atomen — ik schreef in 2024 dat ik door een stad kon lopen en dat model voortdurend in mijn hoofd zag. Het verschil is dat het model nu daadwerkelijk begint te bestaan, en dat gewone telefoons het bouwen.
Van foto naar kopie
Een handige manier om dit vast te houden: kaarten zijn altijd compressies geweest. Een wegenatlas comprimeert geografie tot lijnen. Street View comprimeert haar tot foto's. Een splat-kaart comprimeert nauwelijks nog — hij behoudt de geometrie, het licht, steeds vaker de fysica. Op een gegeven moment is de representatie dicht genoeg dat het onderscheid tussen "een kaart van de plek" en "een kopie van de plek" er voor de meeste toepassingen niet meer toe doet. Toerisme, vastgoed, verzekeringen, robotica, games, herinnering zelf: allemaal draaien ze op de kopie zodra die bestaat.
Dit patroon hebben we eerder gezien. Eerst mappen we, dan voorspellen we, dan handelen we. Spatial computing zat een decennium vast in dure, gedeeltelijke mapping. De capture-kosten zijn zojuist ingestort, en de mapping-fase gaat zichzelf afmaken, één telefoon per keer.
De interessante vraag is allang niet meer óf er een walk-in kopie van de wereld gebouwd wordt. De vraag is wie hem beheert, en wat toestemming krijgt om erdoorheen te bewegen.