Lumen

2020 wurde am iPad Pro erstmals die hintere Kamera um einen LIDAR-Sensor erweitert. Dieser machte es möglich Referenzpunkte für Distanzen in einem Kamerabild zu erzeugen.

Aus diesen Referenzpunkten lies sich eine Punktewolke generieren, welche einen 3D Raum darstellen kann.

Lumen war eine Technologiestudie und eine der ersten Apps, welche ein 3D-Modell des Raumes erzeugen konnte.

Hier ist ein Video von Lumen, ein Foto vom gescannten 3D-Raum und von der internen Objektklassifikation mittels KI.

Die Punkteauswahl für das 3D-Modell könnte noch durch von gängige Algorithmen verbessert werden. Dies ist mit diesem Showcase jdoch noch nicht passiert.

Ein Beispiel aus einem Paper wäre diese Methode.