버추얼 프로덕션은 할리우드에서 빠르게 성장하고 있으며, 이 포맷에 대한 열기는 전문 시청각(AV) 분야로까지 확산되고 있습니다. 라이브 콘서트부터 제품 출시, e스포츠 대회 등 다양한 분야에서 블록버스터급 하이브리드 이벤트 경험을 제공하기 위해, 이 방식을 채택하는 AV 팀이 늘고 있습니다.

두 가지에 적용되는 기술은 비슷하지만 접근 방식은 다릅니다. 온셋 환경에서는 카메라를 마음대로 촬영이나 일시 정지 및 재설정하여 포스트 프로덕션에서 문제를 해결할 수 있지만, 라이브 환경에서는 두 번째 기회가 없습니다. 이머시브 디자인 스튜디오는 가상 프로덕션에 사용되는 게임 엔진과 LED 벽 기술을 활용하여, 라이브 이벤트 프로덕션을 지원하는 CANVAS 플랫폼으로 틈새시장을 개척했습니다. 이 회사는 최근 이러한 이벤트 방송에서 일관된 룩을 구현하는 것을 우선순위로 삼았고, 이에 따라 라이브 그레이딩에 Assimilate Live Look과 함께 AJA ColorBox를 사용하기 시작했습니다. 이머시브 디자인 스튜디오의 공동 창립자이자 CEO인 토마스 소텐스(Thomas Soetens)와 이야기를 나누며 자세한 내용을 알아보았습니다.

이머시브 디자인 스튜디오를 어떻게 설명하시겠습니까?
저희는 하이브리드 클라우드 및 온프레미스 프로덕션 플랫폼인 CANVAS로 가장 잘 알려진 소프트웨어 개발 및 디자인 회사입니다. 실시간 게임 엔진과 클라우드 기술을 비디오 캡처, 재생 툴, AI 신경망과 결합하여 몰입감 넘치는 시청자 경험을 보장합니다. 클라이언트가 게임 엔진이나 미디어 서버 경험 없이도 플랫폼을 활용할 수 있도록 성능 리소스를 분산하여 개발했습니다.

CANVAS는 언리얼 엔진 가상 프로덕션 워크플로우와 유사한 로직을 활용하지만 훨씬 더 유연하고 라이브 환경을 위해 설계되었습니다. 우리는 지속적인 프로덕션 워크플로우를 용이하게 하기 위해 플랫폼을 설계했으며, 이벤트 방송을 해야 하는 경우 CANVAS를 사용하면 여러 날 연속으로 8시간 이상 방송할 수 있습니다. 때로는 수십만 명의 시청자에게 온라인으로 스트리밍 하기도 합니다. 이 모든 것이 양방향으로 상호작용하므로 시청자는 스튜디오에 있는 진행자와 대화할 수 있고 그 반대의 경우도 가능합니다.

주요 고객은 누구이며, 고객과의 상호작용은 어떻게 이루어집니까?
저희는 CANVAS 서버, CANVAS iPad 앱, CANVAS Studio 앱, CANVAS 멀티뷰어, CANVAS 스트리밍 기술을 배포하는 다양한 고객과 협력하고 있으며, 각 인터페이스는 고객마다 고유합니다. 회의실 솔루션을 사용하는 고객은 아이스링크에서 프로젝션 매핑을 하는 고객과 다른 요구 사항과 선호도를 가질 가능성이 높기 때문에, CANVAS 플랫폼에 새로운 클라이언트를 등록하면 그들이 실행하고자 하는 경험을 바탕으로 인터페이스를 구축하고 사용자를 지정을 합니다. 고객 중 하나인 WORRE Studios는 주요 브랜드와 디자이너를 위해 여러 흥미로운 프로덕션을 수행했습니다. 또한 최근에는 다양한 카메라 브랜드를 활용한 라이브 방송이 필요한 이벤트를 프로덕션했는데, AJA ColorBox로 통일된 룩을 만들 수 있도록 지원했습니다.

프로젝트에 AJA ColorBox를 사용하기로 결정한 이유는 무엇입니까?
저희는 끊임없이 아이디어를 브레인스토밍하고 테스트하고 있습니다. 이 프로젝트에 대해 고민하고 LUT 작업을 시작했을 때, 시네마 카메라와 AJA ColorBox 및 Assimilate Live Looks을 함께 사용하면 부하를 줄일 수 있다는 것을 깨달았습니다. Assimilate를 사용하면 다양한 카메라에서 실시간으로 LUT를 쉽게 처리하고 수정할 수 있다는 것을 알았습니다. 의견이 일치하자마자 여러 대의 ColorBox를 주문하고 소프트웨어를 다운로드하는 것은 일주일도 채 되지 않았습니다.

프로젝트와 워크플로우에 대해 자세히 알려주세요.
WORRE Studios는 각각 폭 60피트, 높이 14.5피트, 총 38K의 해상도를 자랑하는 4개의 대형 LED 벽으로 구성된 원형 LED 무대를 갖추고 있습니다. 이 공간은 이벤트에 몰입할 수 있는 최대 350명의 대면 청중을 수용할 수 있을 뿐만 아니라 50만 명의 잠재적 가상 Zoom 참석자를 수용할 수 있는 규모입니다. Fortune 선정 500대기업, 유명 인사 등이 라이브 하이브리드 대면 및 가상 이벤트를 위해 이 CANVAS 기반 시설을 사용했습니다. CANVAS는 LED 벽에 경험을 출력하지만, 이 프로젝트의 경우처럼 스튜디오에서 일어나는 모든 일의 라이브 스트리밍을 프로덕션하여 배포하기도 합니다.

워크플로우는 비교적 간단합니다. 10대의 서로 다른 카메라에서 비디오 믹서를 통해 AJA ColorBox 유닛으로 피드를 출력합니다. 컬러 컨버터는 팀이 적용하고자 하는 사전 지정된 LUT으로 색상의 룩앤필을 통합하는 데 도움이 되었습니다. 컬러 컨버터는 모든 카메라와 스위처 사이에 매우 간단한 방식으로 배치되어 지연 시간이 거의 없고 매우 편리한 키트였습니다. 장치를 구성하고 네트워크를 통해 장치와 통신하기만 하면 믿을 수 없을 정도로 강력한 결과를 얻을 수 있었습니다. 또한 이 장치는 매우 작고 휴대성이 뛰어나 어디에나 배치하고 배치할 수 있고 브라우저 기반 web UI를 통해 원격으로 엑세스할 수 있다는 점에서 매우 좋았습니다.

이 프로젝트에서는 LED 벽, 스피커, 가상 프로덕션 배경이 상호 작용하는 모든 곳에서 할리우드 수준의 시청 경험을 보장하기 위해 일관된 룩을 유지하는 것이 중요했습니다. 화이트 포인트 조정과 색상 간의 균일한 밸런스를 넘어 카메라 보정을 지원하기 위해 룩업 테이블(LUT)을 도입한 것도 바로 이 때문입니다. 저희는 멀리 떨어져 있는 관객이 마치 영화 속에 있는 듯한 느낌을 받을 수 있도록 만들고 싶었습니다.

영화에서 컬러 그레이딩이 포스트 프로세싱의 일부인 것처럼, 저희는 경험을 전달하기 위해 라이브 방식으로 컬러 그레이딩을 사용했습니다. 이 접근 방식을 통해 훨씬 더 강력한 제어가 가능했습니다. 또한 카메라를 통합하고 이 이벤트와 카메라 세트에 대한 컬러 그레이딩 결정에 따라 쇼의 전체 룩앤필 맞춤화했습니다.

어떤 어려움에 직면했습니까?
우리가 구축하거나 지원하는 모든 경험은 시청자와 공유할 때 균일하게 보여야 합니다. 하지만 이번 프로젝트와 같이 각기 다른 카메라 유형으로 작업하는 프로젝트에서는 이 점이 어려울 수 있습니다. 여러 카메라 모델과 브랜드, 그리고 LUT와 보정에 대한 각기 다른 접근 방식을 학습하는 것은 효율적이지 않다는 것을 알고 있었습니다. 이때 ColorBox가 큰 도움이 되었습니다. 어시뮬레이트 라이브 룩과 결합하여 다양한 카메라 유형의 영상을 짧은 지연 시간으로 통합하고 컬러 그레이딩할 수 있는 중앙 집중식 방법을 제공했습니다. 샷 간에 룩앤필을 바꾸고 모든 카메라 소스가 궁극적으로 동일하게 보이도록 만들 수 있었습니다. 여러 컬러박스에 여러 LUT를 배포하고, 테스트하고, 매끄럽게 통합하여 일관된 프로그램 결과물을 만들 수 있었으며, 유연성이 매우 뛰어났습니다.

AJA Gear를 처음 사용하셨습니까?
아니요, KONA I/O 카드부터 FS frame synchronizers, Mini-Converters 등 수년간 AJA Gear를 사용해왔습니다. 심지어 BRIDGE NDI 3G도 사용하기 시작했습니다. CANVAS는 수백 개의 NDI 스트림을 인제스트할 수 있기 때문에 대부분의 고객이 SDI-NDI 인코딩/디코딩 요구 사항을 위한 셋 앤 포겟 솔루션으로 이를 사용하고 있습니다. ColorBox는 신뢰할 수 있고 불필요한 복잡성을 도입하지 않고도 해야 할 일을 해냅니다. 항상 간결하고 집중력이 뛰어나며 시간이 지나도 견딜 수 있는 제품이 바로 AJA의 마법입니다.

우리는 예술적 결정과 관객 경험을 극대화하는 마찰 없는 실행을 안정적으로 지원하다는 CANVAS 플랫폼 기술의 비전과 시너지 효과를 발휘하기 위해 AJA를 선택했습니다.

AJA ColorBox 소개
AJA ColorBox는 LUT 기반 컬러 변환을 수행하도록 설계된 강력한 비디오 처리 장치로, AJA 컬러 파이프라인을 통해 고급 수준의 컬러 과학은 물론 Colorfront, ORION-CONVERT, BBC 및 NBCU LUT를 포함한 여러 룩 관리 접근 방식을 제공합니다. 12G-SDI 입력/출력 및 HDMI 2.0 출력을 지원하는 AJA ColorBox는 최대 4K/UltraHD 60p 10비트 YCbCr 4:2:2 및 30p 12비트 RGB 4:4:4 출력이 가능하여 라이브 프로덕션, 온셋 프로덕션 및 포스트 프로덕션 작업에 완벽합니다. ColorBox의 브라우저 기반 사용자 인터페이스를 사용하면 이더넷을 통해 직접 연결하든 타사 WiFi 어댑터를 통해 연결하든 색 처리 설정을 간편하게 조정할 수 있습니다.

AJA BRIDGE NDI 3G 소개
BRIDGE NDI 3G는 3G-SDI에서 NDI로, NDI에서 3G-SDI로 고밀도 변환을 제공하는 1RU 게이트웨이로, 멀티 채널 HD 및 4K/UltraHD 모두에 사용할 수 있습니다. 플러그 앤 플레이 어플라이언스로 기존 NDI 또는 SDI 워크플로우에 추가할 수 있도록 설계된 BRIDGE NDI 3G는 뛰어난 변환 성능과 유연성을 제공하며, AV 사용, 보안 및 감시, 방송, e스포츠, 엔터테인먼트 공연장 및 고품질의 효율적인 NDI 인코딩 및 디코딩이 필요한 다양한 시설에서 원격으로 완벽하게 제어할 수 있습니다.

AJA Video Systems,Inc.에 대하여

1993년부터 AJA Video는 비디오 인터페이스 기술, 변환기, 디지털 비디오 레코딩 솔루션 및 전문 카메라의 선두 제조업체로, 전문 방송, 비디오 및 포스트 프로덕션 시장에 고품질, 비용 효율적인 제품을 공급하고 있습니다. AJA 제품은 캘리포니아주 그래스 밸리에 있는 당사 시설에서 설계 및 제조되며 전 세계 리셀러 및 시스템 통합업체의 광범위한 세일즈 채널을 통해 판매됩니다.