라우드어바웃(Roundabout), 파일 크기가 증가하는 시대의 스토리지 및 데이터 관리에 대해 논의

2023년  11월  16

가상 프로덕션, UltraHD, 하이 다이나믹 레인지(HDR) 워크플로우는 관객 경험을 새로운 차원으로 끌어올리고 있지만, 그 이면에는 프로덕션에 수반되는 대용량 파일을 저장, 관리, 액세스 등 안전하게 공유하는 방법을 찾아야 하는 크리에이티브 시설과 포스트 하우스에 새로운 과제를 안겨주고 있습니다. 항상 한 발 앞서가는 로스앤젤레스에 본사를 둔 포스트 프로덕션 라운드어바웃 엔터테인먼트의 엔지니어링 팀을 이끌고 있는 기술 부사장인 제임스 얀(James Jan)은 최근 AJA Diskover Media Edition 데이터 관리 소프트웨어를 사용하여 팀이 이러한 문제를 어떻게 해결하고 있는지에 대해 이야기해 주었습니다.

라운드어바웃은 무슨 일을 합니까?
우리는 인기 스트리밍 시리즈를 위한 복원 마스터링부터 색 보정까지 모든 것을 전문으로 하는 종합 포스트 하우스입니다. 오래된 영화를 많이 복원하며, 먼지 제거와 색 보정 작업도 많이 하지만 수많은 스트리밍 콘텐츠에 대한 포스트 작업도 수행하기 때문에 많은 상호 운용 가능한 마스터 포맷(IMF) 결과물과 오디오 더빙이 필요합니다.

당신의 배경과 역할에 대해 자세히 알려주십시오.
저는 18년 전 딜럭스(Deluxe)의 시스템 관리자로 근무를 시작한 후 여러 직책과 회사를 거치며 빠르게 성장했습니다. 현재 저는 라운드어바웃의 기술 담당 부사장으로 약 7년간 근무하고 있습니다. 또한, 주로 엔지니어링 IT와 디지털 전송 부서인 IOTC를 담당하고 있고, 저는 새로운 기술을 연구하고 이를 활용해 회사를 더욱 발전시킬 수 있는 방법을 찾는 데 많은 시간을 보냅니다.

라운드어바웃에서 근무하면서 기술과 워크플로우가 어떻게 발전하는 것을 보셨습니까?
제가 라운드어바웃에 처음 입사했을 때 이 시설은 이제 막 컬러 부서를 개설한 오디오 하우스였습니다. 회사는 새로운 포스트 작업으로 인해 MPA(Motion Picture Association) 및 TPN(Trusted Partner Network) 요구 사항을 준수해야 했기 때문에 SAN(Storage Area Network)과 추가 보안 조치에 막 투자하기 시작했었습니다. 저는 전환을 도왔고 보안, 안정성 및 성능에 중점을 두고 네트워크에 다양한 기술을 도입하기 시작했습니다.

그 이후로 포스트 산업이 HD에서 4K, 심지어 8K로 이동함에 따라 스토리지 및 네트워크 기술이 빠르게 발전했습니다. 고해상도 워크플로우의 채택과 함께 파일 크기가 증가함에 따라 오늘날 우리와 같은 포스트 하우스에는 더 빠르고 높은 고용량 스토리지 시스템이 필수가 되었습니다. 처음에는 스피닝 디스크로 시작하여 Solid State Drive(SSD)로 전환했고, 현재는 Nonvolatile Memory Express(NVME) 스토리지를 검토하고 있습니다. 대부분의 스토리지는 SAN 연결형이며 계속 증가하고 있고, 이는 엔지니어링 팀이 비용을 낮추기 위해 열심히 노력하고 있습니다. 인공지능(AI)은 새로운 가능성을 열어주고 있으며, 아직은 새로운 분야이기 때문에 조심스럽게 발을 들여놓기 시작했습니다.

어떤 스토리지 및 미디어 자산 관리 솔루션을 사용합니까?
앞서 언급했듯이, 저희는 NAS와 SAN 스토리지를 많이 사용하고 있으며, 사내에서 사용 가능한 클라우드 솔루션과 같은 독점적인 분산 파일 시스템을 사용하고 있습니다. 또한, 모든 스토리지와 분산 파일 시스템을 인덱싱(indexing)하는 데 AJA Diskover Media Edition을 사용하며, 누적 약 30페타바이트(Petabyte)의 미디어 파일을 보유하고 있습니다.

AJA Diskover Media Edition을 어떻게 사용하고 있으며 왜 선택했는지 자세히 알려주십시오.
30페타바이트의 데이터를 저장한다는 것은 관리하고 찾아야 하는 파일 수가 엄청나게 많다는 뜻입니다. 저희는 모든 파일을 관리하고 기본적인 검색을 위해 AJA Diskover Media Edition을 사용합니다. 또한, ElasticSearch는 백엔드에서 작동하여 30페타바이트의 데이터를 모두 검색하므로 이전에는 검색에 몇 시간이 걸렸던 파일을 몇 초 안에 찾을 수 있습니다.

엄격한 보안 요건 때문에 운영 네트워크에 클라이언트를 둘 수 없고 파일 액세스가 필요한 경우가 많이 있지만, 이 문제는 Diskover를 통해 극복할 수 있었습니다. 웹 인터페이스를 통해 해당 사용자와 우리 팀은 실제 파일의 무결성을 손상 시키지 않고 파일 사본에 액세스할 수 있습니다. 이전에는 불가능했던 파일 복사 및 이동, 프록시 생성, 오디오 파일 변환을 지원하는 독점 스크립트를 작성할 수 있는데, 사용자 정의 가능한 소프트웨어 덕분에 이러한 작업을 수행할 수 있었습니다. 이전에는 엔지니어링 팀이 웹 GUI를 처음부터 다시 구축해야 했기 때문에 시간이 많이 걸리고 인증이 포함되지 않았습니다. 하지만, Diskover를 사용하면 보안 요구 사항을 준수하기 위해 Lightweight Directory Access Protocol(LDAP) 인증을 지원하여 신속하게 작업을 수행할 수 있었습니다.

시설에 보안이 중요한 이유는 무엇입니까?
우리 포스트 팀은 아직 공개되지 않은 콘텐츠를 다루는 경우가 많습니다. 파일이 유출되면 고객의 신뢰를 잃게 되고, 이는 다시 회복하기 어렵습니다. 그렇기 때문에 프로덕션 네트워크와 고객이 액세스하는 네트워크를 분리하여 모든 사람이 모든 콘텐츠에 직접 액세스하지 못하도록 하는 것이 매우 중요합니다. 또한, 사용자가 콘텐츠에 액세스할 때 적절한 인증을 거쳤는지 확인해야 하며, Diskover는 두 가지 유형의 사용자를 위한 안전한 설정을 보장하는 데 필수적이었습니다.

소프트웨어를 위해 어떤 종류의 스크립트를 개발했습니까?
우리가 작성한 첫 번째 스크립트 중 하나는 프록시 생성을 위한 것이었습니다. 프로덕션 및 기업 스케줄링 팀은 파일을 선택하고 “프록시 생성”을 클릭할 수 있습니다. 그러면 스크립트가 정보를 트랜스코드 팜으로 보내면 프록시가 생성되어 출력됩니다. 또한, Diskover를 사용하기 전에는 프록시 요청을 생성하고 이행하는 데 많은 커뮤니케이션이 필요했습니다.

새로운 설정으로 작업 방식이 어떻게 바뀌었습니까?
이제 미디어 파일 검색이 매우 빨라졌습니다. 파일이 데이터베이스에 색인된 파일이라도 몇 분 또는 몇 초 만에 찾을 수 있어 매우 편리해졌습니다. 또한, 한 사용자는 파일이 필요하지만 파일 내용의 일부만 알고 있을 때, 알고 있는 내용을 입력하기 시작하자 거의 즉각적으로 결과가 나타나는 것을 보았고 정말 놀라웠습니다.

Diskover는 모든 파일을 스캔하고 해당 파일에 대한 관련 정보를 즉시 저장하는 데 사용하는 미디어 정보 하베스트 플러그인(Harvest Plugin)을 포함한 광범위한 플러그인 네트워크를 제공합니다.파일을 검색하고 해상도, 색 공간 및 사용 가능한 모든 관련 메타데이터 정보를 쉽게 이해할 수 있기 때문에 매우 유용합니다.

향후에는 사용자가 파일 생성을 위해 Xytech Diskover 플러그인에서 파일을 쉽게 찾을 수 있는 더 복잡한 프로그램도 도입할 계획입니다. 이렇게 하면 워크플로우가 더 간단하고 원활해져 플랫폼을 활용하는 라운드어바웃 팀 간의 많은 번거로움을 없앨 수 있습니다.

AJA Diskover Media Edition으로 작업한 경험을 설명해주십시오.
Diskover는 안전하고 빠르며 사용하기 쉽기 때문에 보통 10분 정도만 인터페이스를 살펴보면 팀원들은 빠르게 사용할 수 있습니다. AJA의 Diskover 팀은 환상적이었고 모든 문의에 신속하게 응답해 주었으며, 저희는 현지에 있기 때문에 직접 방문하여 설치 또는 업그레이드를 안내해 주기도 했습니다. 작년에 추가된 Xytech 통합과 같이 새로운 기능으로 플랫폼을 지속적으로 업데이트하고 있다는 점도 큰 장점입니다. 또한, 정기적으로 속도와 안정성을 업데이트하는데, 예를 들어 스캔에 캐싱 기능을 추가하여 파일 스캔 및 인덱싱 속도가 빨라졌으며, 업그레이드할 때마다 더 많은 가치가 추가되어 매우 만족스럽습니다.

앞으로 스토리지와 데이터 관리가 어떻게 발전할 것으로 보십니까?
8K가 곧 출시되면 더 많은 데이터가 생성될 것이고, 이는 곧 스토리지 요구 사항이 계속 증가할 것이며, 라운드어바웃과 같은 시설에서는 데이터를 더 빠르게 저장, 액세스 및 관리할 수 있는 방법이 필요하게 될 것입니다. 이를 위해 AJA Diskover Media Edition은 계속해서 유용하게 사용될 것입니다. 또한, 현재 업계에서는 AI에 대해 많은 논의가 이루어지고 있으며, 이는 분명 스토리지 및 데이터 관리 기술과 접근 방식에 영향을 미칠 잠재력이 있다고 생각합니다. 하지만 AI와 관련해서는 아직 알려지지 않은 부분이 많으며 규정과 지침을 따라야 하고 AI가 차세대 화두가 될 것으로 보이므로 계속 주시하고 있습니다.

AJA Diskover Media Edition 소개
AJA Diskover Media Edition은 사용자가 물리적인 위치에 관계없이 전체 조직에서 스토리지를 제어할 수 있도록 설계된 강력하고 배포하기 쉬운 데이터 관리 소프트웨어 솔루션입니다. 이 솔루션은 고속의 최첨단 검색, 비용 분석, 태그 지정 및 기타 정교한 도구를 통해 조직의 모든 계층이 정보에 기반한 데이터 의사 결정을 내릴 수 있도록 지원하며, 간단한 웹 브라우저 기반 사용자 인터페이스를 통해 회사의 파일 기반 프로덕션 라인과 수익 창출을 향상시킬 수 있습니다.

AJA Video Systems,Inc.에 대하여

1993년부터 AJA Video는 비디오 인터페이스 기술, 변환기, 디지털 비디오 레코딩 솔루션 및 전문 카메라의 선두 제조업체로, 전문 방송, 비디오 및 포스트 프로덕션 시장에 고품질, 비용 효율적인 제품을 공급하고 있습니다. AJA 제품은 캘리포니아주 그래스 밸리에 있는 당사 시설에서 설계 및 제조되며 전 세계 리셀러 및 시스템 통합업체의 광범위한 세일즈 채널을 통해 판매됩니다.

사용된 제품


AJA Diskover Media Edition