Doly, 아이폰으로 3D 상품 비디오를 제작할 수 있는 앱

새로운 3D 캡처 앱 Doly를 개발한 프랑스 스타트업 AniML은 일종의 상품 비디오용 Photoroom을 만들고자 합니다. 온라인 마켓플레이스에서 운동화를 판매하거나 직접 소비자에게 판매하는 제품에 대한 인스타그램 광고를 만들어야 하는 경우 Doly를 사용하면 휴대폰으로 3D 모델을 생성하고 전문적인 상품 비디오로 변환할 수 있습니다.

2024년 5월 27일 오후 1:00- 4달 전TECHCRUNCH.COM- Romain Dillet

Doly, 아이폰으로 3D 상품 비디오를 제작할 수 있는 앱

요약생성

바쁠 때는 리얼라이즈가 내용을 요약해 드려요.

AniML은 새로운 3D 캡처 앱인 Doly를 개발한 프랑스 스타트업으로 일종의 Photoroom의 상품 비디오 버전을 만들고자 합니다. 온라인 마켓플레이스에서 운동화를 판매하거나 직접 소비자에게 판매하는 제품에 대한 인스타그램 광고를 만들어야 하는 경우 Doly를 사용하면 휴대폰으로 3D 모델을 생성하고 전문적인 상품 비디오로 변환할 수 있습니다.

비디오 제작은 notoriously hard하지만 3D 모델을 생성하는 것은 더욱 어렵습니다. 그래서 AniML 팀은 경험을 단순화하는 데 집중했습니다. 이들은 3D 캡처를 주류 기술로 만들고자 하며, 아이폰 앱으로 포장하여 시작합니다.

Doly를 사용한 3D 캡처는 다음과 같이 작동합니다. 사용자가 제품을 향해 휴대폰 카메라를 가리키고 실제로 움직입니다 3D로 캡처합니다. 백그라운드에서 앱은 스틸 이미지를 캡처하여 클라우드로 전송합니다. AniML은 이러한 이미지를 사실적인 3D 모델로 변환하기 위해 가우시안 스플래팅이라는 기술을 사용하여 재구성 파이프라인을 구축했습니다.

3D 모델은 일반적으로 3D 공간에 있는 점들의 집합, 이러한 표면 위에 투영된 2D 텍스처, 조명 효과로 만들어집니다. 가우시안 스플래팅은 사전 학습된 AI 모델을 사용하여 2D 이미지 세트에서 3D 점 클라우드를 추정하는 완전히 새로운 렌더링 파이프라인입니다.

“우리의 출발점은 기술적인 발견이었습니다. AI가 3D 세계에 막 도착했습니다. 그래서 Facebook, 특히 Google의 사람들이 연구를 진행했고, NeRF라고 불리는 것에 대한 상당히 중요한 연구 논문을 발표했습니다.”라고 AniML의 공동 창업자 겸 CEO인 Rémi Rousseau는 TechCrunch에 말했습니다. “이는 머신 러닝이 작업을 수행하도록 함으로써 3D를 재구성하려는 새로운 패러다임입니다.”

“더 이상 폴리곤 기반 3D에서 작업하지 않고 이제는 신경망 기반 3D에서 작업하고 있습니다.”라고 그는 덧붙였습니다.

가우시안 스플래팅은 NeRF와 정확히 같지는 않지만, Rousseau의 말대로 일종의 후손 3D 모델링 기술입니다.

이것이 기술적인 부분입니다. AniML은 그런 다음 사용자를 하루부터 사로잡을 수 있는 사용 사례를 찾는 데 집중했습니다. e커머스 기업은 3D 모델을 위한 제작 도구에 대한 명백한 선택이었습니다.

앱에서 제공하는 다른 기능은 무엇일까요? 3D 모델을 캡처한 후 Doly 사용자는 템플릿 라이브러리를 탐색하여 개체를 통합할 3D 장면을 선택할 수 있습니다. 이는 단순한 3D 회전과 흰색 배경이 될 수도 있고, 마케팅 스테이징 측면에서 카메라가 천천히 개체에 접근하고 다른 각도로 전환되는 것과 같은 더욱 극적인 효과를 낼 수도 있습니다.

고객이 결과에 만족하면 앱에서 비디오를 구매하여 다른 곳에서 사용할 수 있도록 다운로드할 수 있습니다.

이미지 출처: AniML

Rousseau는 이전에 VR 회사를 두 곳 설립했습니다. 2019년 Magic Leap에 인수된 Mimesys가 그중 하나입니다. 그의 공동 창업자인 Pierre Pontevia도 3D 도구 거대 기업인 Autodesk에 회사를 매각했고, 3D 콘텐츠 개발 플랫폼인 Unity에 또 다른 회사를 매각하는 등 흥미로운 이력을 가지고 있습니다.

AniML은 지금까지 Adjacent가 시드 라운드를 주도한 200만 달러를 모금했습니다. 이 스타트업은 또한 Nat Friedman과 Daniel Gross가 이끄는 스타트업 엑셀러레이터인 AI Grant에 참여했습니다. Hugging Face의 Julien Chaumond, 이전에 Stupeflix를 설립한 Nicolas Steegmann과 François Lagunas, Sketchfab으로 유명한 Alban Denoyel, Bertrand Schmitt, Thibaud Elziere, Vincent Nallatamby 등의 엔젤 투자자들도 투자했습니다. Bpifrance가 이 라운드의 일부에 보조금으로 기여했다는 이야기도 있습니다.

대기업, 중고 판매업체, 기타 e커머스 전문가들이 앞으로의 캠페인과 온라인 목록에 3D 렌더링 비디오를 수용할지 여부를 보는 것은 흥미로울 것입니다. 하지만 인공 지능 덕분에 전문적인 비디오 녹화 스튜디오가 없이도 매력적인 상품 비주얼을 만들 수 있다는 것은 이미 멋진 일입니다.

AI 뉴스레터를 출시합니다! 6월 5일에 인박스에서 받아보려면 여기 에서 가입하세요.