Smartphones sind ein wahnsinnig beeindruckendes, sich ständig weiterentwickelndes Stück Technologie – sie sind über Videoanrufe, Spiele und das Surfen im Internet hinausgegangen und werden jetzt für fortschrittlichere Zwecke verwendet. Insbesondere KIRI Innovations – ein in Shenzhen ansässiges Unternehmen – nutzt die Neural Radiance Field (NeRF)-Technologie, um neue Fortschritte in der fotorealistischen 3D-Scan-und Bildgebungstechnologie unter Verwendung von Mobiltelefonhardware zu entwickeln.
NeRF auf Smartphones
Vor diesem Hintergrund hat das Team von KIRI Innovations angekündigt, dass es NeRF auf Android-Telefone und iPhones mit oder ohne LiDAR bringen wird. Mit der KIRI Engine-App hat KIRI 3D-Scanning-Optionen für Nicht-LiDAR-Benutzer verfügbar gemacht, die auf mobilen Geräten aufgrund der Herausforderungen, die mit der Entwicklung von Apps für solche Zwecke verbunden sind, angesichts der Vielfalt von Android-Geräten auf verschiedenen Märkten oft fehlen und Hersteller.
Mit NeRF-Technologie, Benutzer werden in der Lage sein, realistische 3D-Bilder zu rendern, die aus verschiedenen Blickwinkeln betrachtet werden können, indem sie ein Objekt oder eine Umgebung mit ihren Mobilgeräten scannen. Da es einfach zu bedienen ist, bietet es ein enormes Potenzial in Bereichen, die von fotorealistischen 3D-Visualisierungen profitieren, wie Bildungsinhalte, medizinische Forschung, Tourismus, Spiele und mehr.
Peter Yang, Mitbegründer von KIRI Innovations, beschreibt NeRF als „ein Algorithmus, der Lichtwege abruft und darstellt, wie sie von Oberflächen reflektiert werden, um sie in eine komplexe, hochdetaillierte und realistische 3D-Szene zu übersetzen.“ Darüber hinaus sagt Mitbegründer und CEO Jack Wang, dass „es einige Zeit dauern könnte, bis die Leute NeRF verstehen und annehmen. Aber sobald es verstanden ist, glaube ich nicht, dass irgendjemand, einschließlich uns selbst, bereit ist für das, was NeRF freischalten wird. Das ist super aufregend, wir können es kaum erwarten zu sehen, was die Leute mit dieser auf ihren Handys verfügbaren Technologie machen!“
Mit der App zielt KIRI darauf ab, den Benutzern eine Freemium-Preisstruktur ohne bestimmte Paywalls zu bieten Dateiformate, keine Wasserzeichen und freier Zugriff auf die meisten Funktionen der App wie In-App-Zuschneiden und „Kamera-Pose“. Derzeit befindet sich die App in der Entwicklung, obwohl KIRI plant, seine Software – insbesondere seinen NeRF-Scan-Workflow – während der CES 2023 vorzuführen.
„Camera Pose“ für nerfstudio
At Im Moment hat KIRI Innovations seine neue Software „Camera Pose“ auf den Markt gebracht, um NeRF-fähige Daten nach Nerfstudio zu exportieren. Die Open-Source-API wurde von Forschern und Mitwirkenden entwickelt, die seit 2020 an NeRF arbeiten. Camera Pose ist derzeit auch die erste und einzige Option für Smartphones, die kein LiDAR benötigt, und ist derzeit die einzige Option für alle Android-und iPhones (iOS 13 und höher), die 1080p-Videos aufzeichnen können. Darüber hinaus können seine Daten etwa doppelt so schnell verarbeitet werden wie die Daten von aktuellen, kostenlosen PC-basierten Optionen.
Wie viele der Funktionen der KIRI Engine 3D-Scanning-App ist Camera Pose für alle Benutzer kostenlos verfügbar mit einem KIRI Engine-Konto. Ziel ist es, mehr Forscher, Ersteller von Inhalten, Studenten und Enthusiasten in die Lage zu versetzen, mehr über die NeRF-Technologie und ihr Potenzial für zukünftige Anwendungen zu erforschen und zu erfahren.
Der 3D-Scanner KIRI Engine steht zum Download auf der Google Play Store und iOS App Store.