Tech

Doly ermöglicht es Ihnen, 3D-Produktvideos von Ihrem iPhone zu generieren

AniML, das französische Startup hinter einer neuen 3D-Capture-App namens Doly, möchte so etwas wie den PhotoRoom für Produktvideos schaffen. Wenn Sie Sneaker auf einem Online-Marktplatz verkaufen oder Instagram-Werbung für Ihre direkt an Verbraucher gerichteten Waren erstellen müssen, hilft Ihnen Doly, 3D-Modelle mit Ihrem Telefon zu generieren und sie in professionell aussehende Produktvideos zu verwandeln.

Die Erstellung von Videos ist berüchtigt schwierig, das Generieren eines 3D-Modells ist noch schwieriger. Aus diesem Grund hat sich das AniML-Team darauf konzentriert, die Erfahrung zu vereinfachen. Sie wollen die 3D-Erfassung zu einer Mainstream-Technologie machen, indem sie sie in einer iPhone-App verpacken.

So funktioniert die 3D-Erfassung mit Doly: Der Benutzer richtet seine Telefonkamera auf das Produkt und bewegt sich physisch um es herum, um es in 3D zu erfassen. Im Hintergrund greift die App Standbilder ab und sendet sie in die Cloud. AniML hat eine Rekonstruktionspipeline aufgebaut, die etwas namens Gaussian Splatting verwendet, um diese Bilder in ein realistisches 3D-Modell zu verwandeln.

3D-Modelle werden traditionell mit einer Sammlung von Punkten im 3D-Raum, einigen auf diese Oberflächen projizierten 2D-Texturen und Beleuchtungseffekten erstellt. Gaussian Splatting ist eine völlig neue Rendering-Pipeline, die die Schätzung einer 3D-Punktwolke aus einem Satz von 2D-Bildern mithilfe eines vorab trainierten KI-Modells beinhaltet.

„Unser Ausgangspunkt war eine technologische Entdeckung: KI war gerade in der 3D-Welt angekommen. Daher haben Leute bei Facebook, aber noch mehr bei Google, Forschungen betrieben und ein ziemlich wichtiges Forschungspapier zu etwas namens NeRF geschrieben“, erzählte Rémi Rousseau, Mitbegründer und CEO von AniML, TechCrunch. „Es handelt sich um ein neues Paradigma, in dem Sie versuchen, 3D durch maschinelles Lernen erzeugen zu lassen.“

„Sie arbeiten nicht mehr mit polygonbasiertem 3D, sondern sind jetzt in neuronalem 3D“, fügte er hinzu.

Gaussian Splatting ist nicht genau dasselbe wie NeRF, aber es ist eine Art Nachfahre der 3D-Modellierungstechnologie, wie Rousseau erzählt.

Das ist also der technische Teil. AniML konzentrierte sich dann darauf, einen Anwendungsfall zu finden, der Benutzer von Tag eins an begeistern könnte. E-Commerce-Unternehmen waren die offensichtliche Wahl für ein Erstellungstool für 3D-Modelle.

Was bietet die App noch? Nach der Erfassung eines 3D-Modells können Doly-Benutzer eine Vorlagenbibliothek durchsuchen, um eine 3D-Szene für ihr Objekt auszuwählen, in das es integriert werden soll. Dies kann eine einfache 3D-Rotation mit einem einfarbigen Hintergrund oder etwas Dramatischeres in Bezug auf das Marketing-Staging sein, wie die Kamera, die sich langsam dem Objekt nähert und zu verschiedenen Winkeln wechselt.

Wenn ein Kunde mit dem Ergebnis zufrieden ist, besteht die Möglichkeit, das Video über die App zu kaufen und für die Verwendung anderweitig herunterzuladen.

Bildnachweis: AniML

Rousseau gründete zuvor zwei VR-Unternehmen - darunter Mimesys, ein Startup, das 2019 von Magic Leap übernommen wurde. Sein Mitbegründer Pierre Pontevia hat ebenfalls eine interessante Erfolgsgeschichte, da er ein Unternehmen an den 3D-Tools-Riesen Autodesk und ein anderes an die 3D-Content-Entwicklungsplattform Unity verkauft hat.

Bisher hat AniML 2 Millionen US-Dollar aufgebracht, wobei Adjacent die Seed-Runde anführt. Das Startup nahm auch am AI Grant teil, dem von Nat Friedman und Daniel Gross geleiteten Startup-Beschleuniger. Ebenfalls investieren Kima Ventures und mehrere Angel-Investoren, darunter Julien Chaumond von Hugging Face; Nicolas Steegman und François Lagunas, die zuvor Stupeflix gegründet haben; Alban Denoyel von Sketchfab-Ruhm; Bertrand Schmitt; Thibaud Elziere; und Vincent Nallatamby. Wir haben auch erfahren, dass Bpifrance einen Teil dieser Runde mit einem Zuschuss beigetragen hat.

Es wird interessant sein zu sehen, ob große Marken, Weiterverkäufer von gebrauchten Waren und andere E-Commerce-Profis 3D-gerenderte Videos für bevorstehende Kampagnen und Online-Listings annehmen. Aber es ist bereits schön zu sehen, dass Sie dank künstlicher Intelligenz möglicherweise kein professionelles Videoaufnahmestudio benötigen, um überzeugende Produktvisuals zu erstellen.

Related Articles

Back to top button Back to top button