요약생성
바쁠 때는 리얼라이즈가 내용을 요약해 드려요.
3D 캐릭터 애니메이션을 처음부터 만드는 작업은 일반적으로 복잡한 소프트웨어와 모션 캡처 도구를 사용해야 하기 때문에 많은 시간과 비용이 소요됩니다. 카트휠은 기본적인 애니메이션을 텍스트로 설명하는 것만큼 간단하게 만들어 AI로 기본 동작을 생성하고 크리에이터가 더욱 표현력 있는 작업에 집중할 수 있도록 지원합니다.
“애니메이션 작업을 시작한 이후로 새로운 기술이 많이 등장하지 않았습니다.”라고 스타트업의 공동 설립자이자 CEO이자 애니메이터이기도 한 조나단 자비스는 말했습니다. “수많은 버튼과 옵션이 있는 커다란 ‘빈 화면' 문제가 있습니다. 때로는 결과물을 보기도 전에 몇 시간 동안 작업을 해야 하는 경우도 있습니다.”
카트휠은 애니메이터가 장면이나 캐릭터를 만들 때 걸음을 옮기거나 파리를 쫓거나 앉는 것과 같은 기본적인 동작에 너무 많은 시간을 할애하지 않도록 처음부터 기본적인 동작까지의 단계를 건너뛰도록 설계되었습니다.
“저희는 모션 캡처 설정이나 키프레임을 통해 직접 애니메이션을 만드는 것과 같은 동작을 훨씬 빠르게 생성할 수 있도록 지원합니다. 머릿속에 있는 동작을 빠르게 꺼내서 움직이게 하는 것만으로도 큰 가치가 있습니다. 그런 다음 수정할 수 있습니다.”라고 자비스는 덧붙였습니다.
인터페이스는 의도적으로 캐릭터와 텍스트 상자만으로 구성되어 매우 간단합니다. 텍스트 상자에 원하는 내용을 입력하면 1~2분 안에 기본적이지만 자연스러운 애니메이션이 생성되며, 이를 일반적인 3D 편집 제품군으로 내보낼 수 있습니다.
또한 웹사이트에서 이 권투 애니메이션이나 혼자 왈츠를 추는 작은 친구와 같이 실시간 3D 예제를 확인할 수 있습니다.
공동 설립자이자 최고 과학 책임자인 앤드류 카는 이들이 구축한 모델이 완전히 독창적이라고 말했습니다.
“저희는 윤리적으로 조달된 여러 데이터 소스와 자체 라벨러가 라벨링한 동작을 보유하고 있습니다.”라고 그는 설명했습니다. “동작은 행렬로 표현되며, 이는 문헌에서 잘 알려진 사실입니다. 자세, 시간, 속도 등이 포함된 행렬입니다. 따라서 동작 행렬을 동작에 대한 텍스트 설명과 연결하고 이미지나 비디오를 생성하는 것과 같은 방식으로 동작-언어 쌍에 대한 표준적인 학습을 수행합니다.”
이미지 출처: 카트휠
카는 생성되는 애니메이션이 “평균적으로 약 80% 정도 완성된 수준”이라고 추정했습니다. 자비스는 인상적이고 전문적인 수준의 결과물을 만들어낼 수 있지만 “때로는 실패하기도 한다”고 말했습니다. 하지만 특히 여러 아티스트가 하나의 프로세스에서 작업하고 사소한 수정 사항도 계속해서 수정해야 하는 환경에서는 기존 애니메이션 워크플로우보다 훨씬 빠르고 간단합니다.
이들이 사용하는 모델은 크기가 크지 않기 때문에 실행 비용이 저렴하고 로컬에서 호스팅할 수도 있습니다.
“사실 정말 대단한 일입니다.”라고 카는 말했습니다. “비디오 모델의 경우 초당 60프레임으로 모든 프레임에 대해 2000×2000픽셀을 예측해야 하는데, 이는 처리해야 할 양이 너무나 방대합니다. 저희가 예측하는 것은 그보다 한 자릿수 이상 작기 때문에 CPU나 구형 GPU에서도 실행할 수 있으며 모델을 더 빠르게 학습시킬 수 있습니다.”
카트휠 공동 설립자 조나단 자비스(왼쪽)와 앤드류 카.
이미지 출처: 카트휠
자비스는 언젠가는 새로운 애니메이션이나 수정된 애니메이션을 즉석에서 렌더링할 수 있게 될 것이라고 제안했습니다. 이는 게임에서 캐릭터가 일반적으로 제한된 동작과 대사만을 사용할 수 있는 상호 작용성을 위한 궁극적인 목표입니다. 카메라 움직임과 각도와 같은 것도 직관적으로 설명할 수 있으며, 비인간 캐릭터도 개발 중입니다. 하지만 스타트업은 가장 일반적으로 필요한 인간 애니메이션에 먼저 집중하고 있습니다.
이는 원더 다이내믹스가 애니메이터나 아티스트를 대체하는 것이 아니라 기본적인 애니메이션 작업의 반복적인 노동을 건너뛰는 데 중점을 두고 3D 캐릭터 삽입 프로세스를 크게 단순화한 것과 비슷합니다. 업계 전반적으로 크리에이터가 창작에 더 집중할 수 있도록 시간을 절약해 주는 AI 기반 도구를 수용하고 있습니다. 어쨌든 오토데스크는 2주 전 원더 다이내믹스를 인수하면서 이러한 움직임을 보여주었습니다.
스타트업이 이제 막 시작하는 시점에 궁극적인 운명에 대해 추측하는 것은 다소 부적절해 보일 수 있지만, 카트휠도 마찬가지로 경쟁 우위를 점할 수 있는 유망하고 강력한 기능으로 인수될 수 있습니다. 하지만 플랫폼에 구애받지 않는 도구로 자리매김하여 전문 애니메이터에게 더욱 다양한 서비스를 제공할 수도 있습니다.
어느 쪽이든, 카트휠은 Accel이 주도하고 Khosla Ventures, Human Ventures, Heretic VC, MVP Ventures, Correlation Ventures, Pelion VC가 참여한 560만 달러 규모의 시드 라운드 투자를 유치했습니다.
현재 카트휠은 애니메이터가 작업에 활용하는 여러 가지 프로슈머 유형 앱 중 하나로서 역할을 수행하게 되어 기쁩니다. 베타 버전에 가입하여 직접 테스트해 볼 수 있습니다.
“AI가 창의적인 작업을 대체한다는 생각이 있는데, 창의적인 작업을 하는 사람으로서 그건 말도 안 됩니다! AI는 더 많은 애니메이션, 더 많은 동작, 한 사람이 더 많은 일을 할 수 있도록 이끌어줍니다.”라고 자비스는 말했습니다. “그리고 결국에는 우리가 상상도 못한 놀라운 일을 해낼 대형 스튜디오로까지 이어질 것입니다. 하지만 픽사와 휴대폰으로 게임을 하는 사람들 사이에는 수많은 단계가 있으며, 바로 그 단계에서 창의적인 작업의 대부분이 이루어집니다.”