Smode Tech, ‘SMODE R15’ 공개: OpenTrackIO, Livegrade 연동 및 생성 AI 기능 강화

R15의 주요 업데이트

OpenTrackIO 지원

버추얼 프로덕션 관련하여 주목할 부분은 OpenTrackIO 지원이다. OpenTrackIO는 SMPTE의 RIS-OSVP 그룹에서 개발한 오픈소스 프로토콜로, 카메라 트래킹 및 렌즈 정보를 렌더링 시스템으로 전송하여 버추얼 프로덕션 시스템 간의 상호 운용성을 높이는 것을 목표로 한다.

R15는 OpenTrackIO를 지원하여 카메라 및 렌즈 정보, 위치/자세, 타이밍 등의 데이터를 실시간으로 수신할 수 있게 되었다. 물리 공간과 가상 공간의 동기화 정밀도를 높여 인카메라 VFX, 세트 익스텐션 등 카메라 움직임과 연동되는 버추얼 프로덕션 활용이 예상된다.

Pomfort Livegrade와의 실시간 색상 연동

촬영 현장 워크플로우 측면에서는 Pomfort Livegrade와의 연동도 추가되었다. 네트워크상의 Livegrade에서 수행한 색상 조정을 SMODE로 실시간 반영하고 SMODE의 레이어에 적용할 수 있다. 촬영 현장에서 Livegrade로 색상 조정을 진행하면서 그 결과를 SMODE 레이어에 바로 반영할 수 있어, 버추얼 프로덕션에서의 색상 관리 워크플로우 효율화에 기여한다.

StreamDiffusion의 생성 AI 기능 강화

R15는 실시간 이미지 생성 기술인 ‘StreamDiffusion’과의 통합도 강화되었다. SMODE에 입력된 카메라 영상이나 일러스트 등을 기반으로 텍스트 프롬프트로 지정한 이미지를 실시간으로 반영할 수 있다.

예를 들어 인물 영상에 “fire dancing, realistic, burning man, skeleton”과 같은 프롬프트를 입력하면, 인물의 모습과 움직임을 따라가면서 지정한 비주얼을 반영한 생성 영상을 만들어낼 수 있다. 프롬프트는 미리 설정하는 것뿐만 아니라 현장에서 입력 및 변경도 가능하다.

더불어 R15는 ControlNet을 통합하여 입력 영상의 포즈, 윤곽선, 깊이 등의 정보를 활용하면서 생성 결과를 더욱 세밀하게 제어할 수 있게 되었다. ‘StreamV2V’, ‘Similar Image Filter’, ‘TorchCompile’ 등도 추가되어 실시간 생성 관련 기능이 확장되었다. StreamDiffusion의 CUDA Tensorにおける 알파 채널도 지원한다.

Alembic 형식 3D 객체 가져오기 가능

3D 콘텐츠 처리 기능도 확장되었다. Alembic 형식 지원으로 Houdini, Cinema 4D, Blender, Maya 등에서 제작한 애니메이션 3D 지오메트리 및 Geometry Cache를 SMODE로 직접 불러올 수 있다.

외부 3DCG 소프트웨어에서 제작한 복잡한 애니메이션이나 형태 변화를 SMODE의 실시간 콘텐츠로 가져올 수 있어, 영상 제작 및 버추얼 프로덕션에서의 3D 워크플로우 선택지가 넓어진다.

텍스트 표현 및 레이아웃 기능 강화

콘텐츠 제작 관련 기능에서는 텍스트 표현도 강화되었다. 커닝, 스케일, 스큐, 폰트 조정, 표시 문자 수 제어 텍스트 마스크, 수직 정렬 등을 지원하여 텍스트를 활용한 레이아웃 및 애니메이션을 더욱 유연하게 제작할 수 있다.

또한 Content Map 및 2D Scene Mapping에서는 콘텐츠를 정확하게 배치하기 위한 ‘Canvas Guides’와 스냅 기능을 추가했다. 수평/수직 눈금자에서 가이드를 배치하고 레이어 또는 매핑 요소를 붙여, 여러 영상이나 그래픽을 효율적으로 정렬할 수 있다. 세밀한 위치 조정을 시각에만 의존할 필요가 없어 복잡한 레이아웃 구축 시 작업성이 향상되었다.

일상적인 조작성도 개선

기능 추가뿐만 아니라 SMODE를 일상적으로 사용할 때의 조작성도 개선되었다. 시작 화면의 ‘Quick Start Panel’이 새롭게 단장되어 최신 기능, 튜토리얼, 프로젝트 등에 더 쉽게 접근할 수 있게 되었다.

상단 바도 새롭게 단장되어 워크스페이스 전환, 렌더링 및 트랜스코딩 등의 작업, 영상 출력, 조작/편집 이력 등에 직접 접근할 수 있게 되었다. 연결된 SMODE 서버 간 이동도 개선되었으며, 제작 중 자주 사용하는 기능에 대한 접근을 통합하여 일상적인 운영 효율화를 꾀하고 있다.