Atomos ATOMOSphere, PlanckOne FoleyAI 연동…영상 분석으로 포리 사운드 자동 생성

Atomos(부스: 7.B19)는 자사의 클라우드 플랫폼인 ATOMOSphere와 Mocha Chai Laboratories가 개발한 PlanckOne FoleyAI의 연동을 발표했다. 이를 통해 영상 제작자와 사운드 엔지니어는 ATOMOSphere 워크스페이스에 저장된 영상을 PlanckOne FoleyAI로 보내 영상에 동기화된 포리(Foley) 사운드 소재를 생성할 수 있게 된다.

PlanckOne FoleyAI는 단일 샷이나 장면부터 편집이 완료된 전체 작품까지 영상을 분석할 수 있다. 화면 내의 액션, 소재, 환경을 식별하여 발소리, 옷깃 스치는 소리, 충격음 등 영상에 동기화된 포리 사운드를 생성한다.

ATOMOSphere는 비디오 전문가, 사진작가, 콘텐츠 크리에이터를 위해 설계된 클라우드 기반 제작 에코시스템으로, 미디어 업로드, 저장, 편집, 공유, 리뷰, 협업 등을 지원한다.

이번 연동으로 사용자는 ATOMOSphere 워크스페이스에서 동영상을 직접 PlanckOne FoleyAI로 전송하여 분석할 수 있다. 이 과정에서는 오디오 스템(분리된 음성 소재)이나 참조음이 필요 없으며, 영상에 포함된 시각 정보만을 사용한다.

PlanckOne FoleyAI는 몇 시간 안에 영상에 동기화된 포리 사운드 소재의 시작점을 생성할 수 있다. 기존에는 수주의 준비나 포리 스테이지 확보가 필요한 경우도 있었던 공정을 단축할 수 있다고 한다. 생성된 오디오는 발소리, 옷깃 스치는 소리, 충격음 등 개별적으로 편집 가능한 독립적인 레이어로 제공된다.

Atomos의 CEO인 피터 바버(Peter Barber)는 다음과 같이 코멘트했다.

Mocha Chai Laboratories의 CEO인 차이 이웨이(Chai Yi-Wei)는 다음과 같이 코멘트했다.

생성 후에도 사운드 디자이너는 각 포리 사운드 소재를 개별적으로 조정할 수 있다. 각 레이어의 타이밍, 무게감, 질감을 믹스의 다른 부분에 영향을 주지 않고 변경할 수 있으며, 캐릭터의 움직임이나 작품의 창의적인 방향성에 맞춰 미세 조정이 가능하다.

Atomos에 따르면 PlanckOne FoleyAI는 오픈소스 대규모 언어 모델(LLM)을 활용하여 구축되었으며, Mocha Chai Laboratories가 보유한 사운드 라이브러리와 실제 포스트 프로덕션 데이터를 사용하여 훈련되었다. 기존 편집 파이프라인에 직접 통합할 수 있도록 설계되어 제작팀은 현재 워크플로우를 크게 변경하지 않고 도입할 수 있다고 한다.

Mocha Chai Laboratories의 테크니컬 리드인 리 준한(Lee Jun-Han)은 다음과 같이 코멘트했다.

이번 연동으로 ATOMOSphere는 미디어 저장, 리뷰, 협업 외에도 클라우드상의 영상 소재와 AI를 활용한 음성 포스트 프로덕션을 직접 연결하는 역할을 담당한다. 편집팀과 사운드팀은 영상 소재에서 편집 가능한 포리 세션 구축으로 더 신속하게 전환하고, 이후 창의적인 작업에 활용할 수 있는 오디오 소재를 얻게 될 것이다.

PlanckOne FoleyAI는 현재 베타 버전이며, IBC2026의 Atomos 부스에서 전시되고 있는 ATOMOSphere와의 연동은 기술 프리뷰가 될 예정이다. 향후 네이티브 버전과 구독 서비스 제공을 계획하고 있다고 한다.