Netflix가 CMAF로 AV1을 배포하는 방법

 

StreamingMedia.com에서 이와 유사한 비디오를 더 보기.

Streaming Media West 2021 에서 AV1 및 CMAF에 대해 자세히 알아보기.

이 클립의 전체 스크립트 읽기:

 

 

https://youtu.be/vahcWSEtshM

 

Cyril Concolato: 우리 파이프라인에서 AV1 인코더는 기본 스트림을 생성하고 있습니다. 그리고 AV1의 맥락에서 스트림은 OBU(Open Bitstream Units)로 분해됩니다. AVC 또는 HEVC에 익숙하다면 9개의 단위가 있습니다. 그래서 AV1도 비슷한 개념입니다. 그리고 우리의 패키저에서 여기서 역할은 이 기본 스트림을 구문 분석하고 CMAF 세그먼트를 생성하는 것입니다. 그러나 그렇게 하려면 먼저 프레임 간의 시간 경계인 시간 단위를 감지하고 타이밍을 결정합니다. 그리고 여기에서 AV1은 프레임 재정렬 또는 다른 코덱에 있는 불쾌한 주요 그림과 관련된 복잡성이 없고 패키징에 필요하지 않다는 점에서 다른 코덱에 비해 정말 단순하다는 점을 강조하고 싶습니다. 구현에서 처리하기가 항상 매우 매우 어려운 편집 목록과 같습니다.

 

유사하게, 시퀀스 헤더 OBU 주위에 AV1용 CMAF에서 수행된 또 다른 단순화가 있습니다. 이는 VPS, PPS 및 SPS와 같은 AVC 및 HEVC 매개변수 세트에 익숙한 경우에 해당합니다. 그리고 AV1용 CMAF는 대역 내 및 대역 외 신호를 수행하는 방법을 권장합니다. 따라서 다른 코덱의 경우 두 개의 파이프라인을 유지해야 합니다. 즉, 대역 외 파이프라인과 대역 내 파이프라인이 있고 AV1의 경우 하나의 파이프라인, 하나의 사양만 있습니다.

 

암호화도 마찬가지입니다. AV1은 1:9 암호화 패턴의 cbcs를 사용한 암호화를 권장합니다. 따라서 AV1의 경우 두 개의 암호화 파이프라인을 유지할 필요가 없습니다. CTR과 CBC 사이에는 이분법이 없습니다. 단 하나.

 

마지막으로 우리 시스템에서는 CMAF의 일반적인 구조나 제약 조건을 사용하지만 주문형 접근 방식을 사용합니다. 예를 들어, 세그먼트 인덱싱 또는 하위 세그먼트 인덱싱을 사용합니다. CMAF와 함께 배포한 첫 번째 형식입니다. 그리고 이 모든 인증 덕분에 정말 쉽게 배포할 수 있었습니다.

 

https://www.streamingmedia.com/Articles/ReadArticle.aspx?ArticleID=147412&utm_campaign=coschedule&utm_source=twitter&utm_medium=Globecast&utm_content=How%20Netflix%20Is%20Deploying%20AV1%20with%20CMAF 

 

How Netflix Is Deploying AV1 with CMAF

Netflix Senior Software Engineer Cyril Concolato walks viewers through Netflix' workflow for AVI deployment6 using CMAF in this clip from Streaming Media East Connect 2021.

www.streamingmedia.com

 

 

 

 

Tokyo 2020은 항상 8K로 중계해야 했습니다. 그것은 거기에 있지만 다른 것들에 의해 추월되었습니다.

 

2008년, 전 세계가 베이징 올림픽을 지켜보고 있을 때 일본 방송인 NHK는 처음으로 새로운 Super Hi-Vision 8K 기술을 IBC에 선보였으며 화질, 카메라의 크기, 도쿄 2020까지 형식으로 방송.

 

그것은 항상 야심 찬 것으로 여겨져 왔으며, 그것이 증명되었습니다. 2020년 도쿄 올림픽에서 8K가 방송되고 있지만 첫 번째 테스트 전송이 2012년 런던에서 수행되었고 그 이후로 장비 및 생산 워크플로가 인상적으로 진화했다는 점을 감안할 때 특히 카메라가 대형 냉장고 크기에서 휴대용으로 이동했습니다. - 별로 없어요.

 

NHK는 개회식과 폐회식과 8개의 이벤트(4개의 장애인 올림픽 이벤트도 다룰 예정)의 생중계를 포함하여 이벤트에서 200시간의 8K만 방송합니다. 해외 방송사도 커버리지를 결정하지 않아 NHK의 국내 위성 서비스인 BS8K에서만 커버가 가능하다. 여기 에서 일정을 볼 수 있습니다 .

 

물론, Covid 전염병의 계속되는 황폐함을 감안할 때, 그 사건이 일어나는 것은 전혀 기적의 일입니다. 그러나 제작되는 9500시간의 콘텐츠 중 200시간(라이브 방송되는 콘텐츠 중 4000시간에 불과함)은 8K가 다소 기대에 미치지 못했다는 것을 암시하는 것 같습니다. 하지만 다행스럽게도 다른 곳에서 이야기할 흥미로운 내용이 많이 있습니다.

UHD HDR 및 기타 기술

UHD HDR은 아마도 이번 하계 대회의 큰 도약일 것입니다. 처음으로 모든 것(몇몇의 테니스 경기와 몇몇 전문 카메라의 피드를 제외하고)은 50개 정도의 모든 화면과 함께 올림픽 운동을 위한 지속적인 호스트 방송인 Olympic Broadcasting Service에 의해 4K로 촬영될 것입니다. 풀 UHD HDR 작동을 위해 준비된 게임을 다루는 OB 트럭 및 플라이어웨이 프로덕션 시스템. 

 

이 모든 영상은 IP 네트워크에서 제작되며 HD 1080i SDR 다운컨버전 월드 피드도 방송사에서 사용할 수 있습니다. 5G 기여도 혼합의 일부이지만 아직 대부분 시험 단계에 있으며 개회식 및 폐회식 동안 ENG 카메라에 사용할 예정입니다. 내년 베이징 동계 올림픽에서 이에 대한 확장이 있을 수 있으며 모든 대회 장소가 5G를 완전히 커버할 것으로 예상됩니다.

 

5G는   웨어러블 기기 에서 일부 선수들의 실시간 경기력 데이터를 제공하는 데에도 사용될 예정 이다. 한편, 양궁장에서는 선수를 대상으로 훈련한 카메라를 통해 비접촉 센싱 기술을 활용해 혈관 수축으로 인한 피부색 변화를 측정하고, 그 결과 심장 박동과 아드레날린 데이터를 도출할 수 있다. 

 

물론 전문 카메라 시스템은 매우 보편적입니다. 200개 이상의 슬로 모션 카메라, 11개의 스파이더캠 시스템, 30개 미만의 추적 카메라 시스템을 포함하여 모두 100개 이상의 카메라 시스템이 사용 중입니다. 또한 인텔의 True View 360도 리플레이 및 정지 프레임을 위한 농구 경기의 체적 비디오 캡처에 기여하는 35개의 카메라와   '총알'을 제공하기 위해 다양한 장소에서 사용되는 PTZ 4K 카메라 전체 호스트 와 함께 리플레이를 둘러싼 몇 가지 흥미로운 혁신에 기여 하고 있습니다. -time' 멀티캠 리플레이 클립으로 OBS는 약 5초 안에 제작되기를 희망합니다.

 

OBS는 또한 개회식과 폐회식을 모두 포함하는 110시간의 생생한 180° 입체 및 360° 파노라마 방송을 계획하고 있으며, 주로 카메라를 선수들 가까이에서 촬영할 수 있다는 점을 기반으로 선택된 소수의 다른 스포츠를 제공합니다.   예를 들어 자동 로깅을 위한 AI의 다양한 시험이 진행 중이며 OBS가 Alibaba와 연결하기 위해 설정한 클라우드 기반 워크플로가 있습니다. 아직 클라우드에 이러한 이벤트가 있습니다.

 

OBS는 도쿄가 클라우드 생산의 첫 번째 단계이며 내년 베이징이 실제로 본격화될 것이라고 생각합니다. NHK와 중국의 국영 방송사인 CCTV는 내년 2월에 열릴 때 이러한 게임에 대한 8K 적용 범위를 늘릴 계획이 많이 있기 때문에 8K에도 동일하게 적용되기를 바라고 있습니다. 도쿄의 국제 방송 센터(International Broadcast Center)에는 최신 8K 극장이 있어 방송사들이 이 형식을 지원하도록 설계되었습니다. 하지만 먼저, 우리는 a) 이 게임에서 그것이 어떻게 수행되는지, 그리고 커버리지를 생성하려고 시도할 때 어떤 문제가 발생하는지 지켜보고 b) 다가오는 겨울 동안 그러한 계획을 위해 Covid가 무엇을 저장하고 있는지 확인해야 합니다.

 

2008년 베이징은 방송 업계에서 HD 게임으로 예고되었지만, HD 제작과 시청이 모두 진정으로 주류로 간주될 수 있었던 것은 4년 후와 런던 2012년이 되어서야 현실이 되었습니다. 지금과 베이징 사이의 짧은 기간을 감안할 때 8K 프로덕션의 상당한 증가를 기대하고 있다면 2024년 3월 33일 올림피아드 대회와 파리 2024년까지는 아닐 것입니다. 그리고 이는 모든 주류 8K 채택을 밀어붙입니다. 소비 — NHK가 IBC에서 기술과 함께 처음 등장한 지 20년 후인 2028년과 로스앤젤레스 하계 게임까지. 

 

https://www.redsharknews.com/whatever-happened-to-the-8k-olympics

 

Tokyo 2020: Whatever happened to the 8K Olympics?

Tokyo 2020 was always supposed to be about broadcasting in 8K. It’s there but it’s been overtaken by other things.

www.redsharknews.com

 

4K 대 8K: 2021년 방송사 전망은?

기술 채택에서 방송사가 앞서 나가기 위해 고려해야 하는 솔루션에 이르기까지 4K 및 8K 산업의 현황을 살펴보십시오.

4K가 아직 완전히 주류가 아니라고 생각했다면 맞을 것입니다. 그러나 이것이 사실이고 전 세계 방송사가 여전히 4K UHD 기술을 채택하고 있다면 8K에 대한 소문이 왜 그렇게 많은 것입니까?

여기에서 우리는 4K 및 8K 산업의 현황에 대해 논의하고 이러한 기술의 동기 요인, 채택이 있는 위치, 방송사가 앞서 나가기 위해 고려해야 하는 솔루션을 살펴보겠습니다.

먼저 4K와 8K의 근본적인 차이점을 살펴보겠습니다.

 

4K 대 8K: 차이점은 무엇입니까?

진보적인 측면에서 보면 8K 또는 UHD-2는 4K 또는 UHD-1의 자연스러운 진화처럼 보입니다. 그러나 아래에서 간략히 설명하겠지만 여기에는 문제가 있습니다. 다음은 4K 및 8K 사양과 기술에 대한 기본 개요입니다.

  • 4K 해상도는 3820 x 2160으로 지정되었습니다.
  • 8K의 해상도는 7640 x 4320에서 4K의 두 배입니다.
  • 8K는 또한 프레임 속도를 4K의 경우 60fps에서 120fps로 두 배로 늘립니다.

그림 1. UHD-1 및 UHD-2 로드맵 (이미지 크레디트: UHD4K)


4K 기술은 등장한 지 10년도 채 되지 않은 비교적 새로운 기술입니다. Ultra HD Forum Service Tracker 에 따르면 온디맨드 및 라이브를 포함하여 사용 가능한 UHD(즉, 4K) 서비스의 양은 200개에 불과합니다. 이러한 UHD 서비스의 대부분인 4분의 3은 선형인 반면 나머지 분기는 VOD 고객에게 서비스를 제공합니다. 

 

넷플릭스  는 2014년 최초의 4K 스트리밍  제공 했고, 최초의 대규모 방송 이벤트는 2016년 리우 올림픽 이었습니다. 빨리 감기, 오늘(현재 연기된) 도쿄 올림픽이 8K로 방송될 예정이며, 중국은 방송에 관심을 표명했습니다. 2022년 베이징 동계올림픽에서 8K로  

 

주요 VOD 업체들의 인기와 4K를 활용한 수많은 UHD 서비스에도 불구하고 아직 정점에 이르지 않았으며 8K의 대중화 시기는 아직 멀었다고 할 수 있습니다. 참고로 미국은 24/7 라이브 UHD 서비스 제공이 계속 부족하고 유럽 및 남미 방송사는 2024년 지상파 4K 경험 제공 계획 단계에 있습니다. 

 

8K 기술을 사용할 수 있지만 제한된 콘텐츠와 값비싼 제작 비용으로 인해 주류가 되기 전에 업계에서 문제를 제기합니다. 

 

8K 콘텐츠 제작의 과제

방송사를 위한 8K 기술의 대량 채택 또는 투자는 "닭이 아니면 달걀" 시나리오입니다. 소비하다. 8K 콘텐츠를 전달할 적절한 매체가 없는 상황에서 많은 방송사는 소비자가 즐길 수 있는 UHD-2 콘텐츠를 제작할 적절한 시기를 기다리고 있습니다.

그동안 8K 협회는 이 채택을 촉진하기 위해 만들어졌습니다, 아시아는이 내용 (일부 인터넷 TV에 위성을 통해) 사용할 수있는 유일한 지역 중 하나입니다. 8K 시장 - 성장, 동향 및 예측(2020-2025) 이라는 제목  Mordor Intelligence 보고서 에 따르면 일본은 8K 콘텐츠 전용 방송 채널을 처음으로 도입했습니다.      

 

이 경험을 즐기기 위한 현재 요구 사항에 대한 아이디어를 제공하기 위해 Mordor Intelligence는 "8K TV, 전송을 수신하는 전용 위성이 필요하고 경우에 따라 부스터 및 분배기 상자를 교체해야 합니다."라고 언급합니다.

 

이웃 중국에서는 소비재 제조 측면에 초점을 맞추고 있으며, 이는 아시아 태평양 지역이 8K 기술 시장에서 가장 빠른 성장을 제공할 것으로 예측되고 있습니다. 따라서 서방 국가의 방송사는 아시아 태평양 지역에서 8K의 채택 및 출시를 면밀히 모니터링하여 시장 진입을 위한 최선의 접근 방식을 결정해야 합니다.

 

4K와 8K의 지각적 차이

소비자 채택이 방송사가 8K 콘텐츠를 제작하는 동인이라면 4K 대 8K가 인지도에 미치는 영향에 대한 최근 테스트 는 많은 것을 요구합니다. 테스트 결과에 따르면 4K에서 8K로의 해상도 증가는 "시각적 차이가 크게 개선되지는 않았습니다."   

 

다만, 테스트에 사용된 콘텐츠의 종류에는 방송이나 스포츠 콘텐츠가 포함되지 않아 FPS 비율이 더 중요한 프로그램에서는 더 많은 테스트가 필요하다는 점을 언급해야 한다.   

 

비싸고 새로운 장비가 필요합니다

8K TV 소유자를 위한 콘텐츠 제작 물류에는 다양한 신기술과 확장된 저장 용량이 필요합니다. 하나는 개당 54,000달러가 넘는 Red 8K 카메라와 같이 8K 비디오를 캡처할 수 있는 고급 녹화 장비를 사용해야 합니다.

 

NHK에 의한 백서는 고급 카메라, OB 트럭, 리코더 플레이어, 편집 룸, 효율적인 워크 플로우를 만드는 데 필요한 요구 8K 컨텐츠 생산 설비에 대한 필요성을 언급하고있다.   

 

관련: 8K 카메라에 대한 NHK 백서 

 

8K 콘텐츠 전달의 실질적인 어려움

일반적으로 8K는 4x12G SDI 인프라를 사용하거나 ST 2110을 사용하는 IP를 통해 48Gbps가 필요합니다. 4K(12Gbps)는 아직 상호 운용성 테스트 중이며 8K에서도 동일한 것을 볼 수 있으려면 몇 년이 걸릴 것으로 예상합니다.

 

그러나 일부 기업은 추진하고 있다. HDR에서 4K를 제공한 최초의 운영자인 BT Sport는 최근 8K 라이브 프로덕션 워크플로를 시연했습니다 . 또한 이제 다가오는 시즌을 위해 제한된 수의 8K EPL 경기를 연결된 TV에 제공하고 있습니다. 

 

배포 비트 전송률도 8K를 제공하는 데 매우 중요합니다. 오늘날 8K는 위성 또는 IP를 통해 연결된 TV에 제공됩니다. 8K 비디오는 4K 비디오보다 해상도가 훨씬 높기 때문에 8K 비디오 스트림을 전달하려면 더 많은 대역폭이 필요합니다. 그러나 비디오 전송 솔루션이 HEVC를 지원하는 경우 비디오의 비트 전송률을 크게 낮출 수 있습니다. HEVC를 사용하는 8K 비디오 서비스의 비트 전송률은 위성의 경우 85Mbps, OTT의 경우 65Mbps입니다. 

 

HEVC와 함께 사용되는 CAE(Content Aware Encoding)를 구현하면 8K 배포의 비트 전송률을 50% 더 낮출 수 있습니다. CAE는 인간의 눈의 역학을 활용하여 비디오 품질을 평가하고 인코딩 매개변수를 실시간으로 최적화합니다. 

 

Roland-Garros Lab 2020에서 France Télévisions 와 함께 라이브 스포츠 비디오 워크플로를 위한 HEVC 및 CAE 가 포함된 Harmonic의 VOS ®  Cloud-Native Software 의 성능을 시연했습니다 

 

 

시험 결과는 CAE와 결합된 HEVC가 비디오 스트리밍 제공자에게 라이브 스포츠 시청 경험을 향상시키고 여전히 매우 낮은 비트 전송률을 유지할 수 있는 기회를 제공한다는 것을 입증했습니다.

 

시험 기간 동안 우리는 8K 배포를 위한 비트 전송률이 25Mbps에서 35Mbps 사이임을 확인 했습니다 . 이는 2019년 국제 축구 선수권 대회 에서 4K 스트리밍에 사용된 비트 전송률과 거의 같습니다  

 

이는 기존 헤드엔드 기반 인코더를 사용하는 HEVC만으로 가능한 것의 절반이며 차세대 MPEG 압축 표준인 VVC를 사용하는 사람들의 기대와 일치합니다.  

 

2019년 프랑스 오픈에서 8K의 산업 사례

2019년 Harmonic은 French Open에서 5G를 통해 8K 를 구동하는 선구적인 프로세스의 일부였습니다 . 몰입형 시청 경험을 제공하기 위해 5G 네트워크의 8K TV와 휴대폰으로 토너먼트 100시간을 전 세계적으로 스트리밍했습니다.  

 

VOS Cloud-Native Software를 사용하여 Harmonic과 18개 공급업체는 8K TV 카메라, 전송 장비, 서버, 미디어 처리 소프트웨어, 8K TV 세트 및 5G 휴대전화를 활용하여 라이브 방송, 캐치업 TV 및 VOD의 적용을 성공적으로 입증했습니다. TV 및 모바일 장치.

 

업컨버전을 통한 빠르고 효율적인 8K 콘텐츠 제작

방송사가 자체 8K 콘텐츠 제작을 기다리는 데에는 몇 가지 이유가 있습니다. 8K 기기의 대중화는 아직 몇 년 남았습니다. 비트 전송률을 낮추는 새로운 코덱은 몇 년 동안 사용할 수 없으며 생산 장비는 비싸지만 앞으로 몇 년 동안 소비자에게 8K를 제공할 수 있는 솔루션이 있을 수 있습니다.

 

업계에서는 업컨버팅 기능이 있는 8K TV에 4K를 전송하는 데 동의합니다. 예를 들어, 삼성은 소비자에게 8K 콘텐츠를 제공하는 데 도움이 되는 인공 지능 코덱  개발했습니다 . TV Technology는 AI ScaleNet이라고 하는 이 업컨버팅 기술은 AI 다운스케일러를 통해 8K 콘텐츠를 4K 품질로 압축하고 사용자의 TV로 전송하여 AI를 사용하여 콘텐츠를 다시 8K 품질로 업스케일링하는 방식으로 수행된다고 말합니다.”  

 

이 기술은 다른 AI TV 제조 기술과 함께 아직 8K 제작 장비에 투자하기를 원하지 않는 콘텐츠 제공업체와 추가 인프라를 구축할 필요가 없는 네트워크 운영자에게 유리합니다. 

 

이 옵션에 대한 합의는 긍정적이지만 이 접근 방식의 단점은 콘텐츠 제공자가 소비자가 콘텐츠를 보는 8K TV의 품질을 제어할 수 없다는 것입니다. 다른 옵션은 4K 프로덕션에서 시작하여 헤드엔드 측에서 8K로 업컨버팅하여 8K 품질이 모든 장치에서 일관되도록 보장하는 것입니다. 또한 HEVC와 같은 공통 기술을 사용하여 콘텐츠를 제공하거나 VVC를 통해 미래에 전달할 수 있음을 의미합니다.

 

4K 및 8K로 미래를 내다보기

4K가 이제 막 주류 기술로 자리 잡기 시작했다는 점을 감안하면 많은 방송사들이 논리적으로 여전히 UHD-1 영역에 투자하고 있습니다. 더 많은 방송사가 4K 콘텐츠를 계속 제공하고 다가오는 올림픽 및 국제 축구 선수권 대회 와 같은 주류 이벤트  가 채택을 강화함에 따라 8K 채택은 오늘날 널리 채택되는 기술이 아니라 가까운 미래의 기술로 남을 가능성이 높습니다. 

 

그러나 8K로 초당 120프레임의 비디오를 표시할 수 있는 기능은 특히 스포츠 네트워크가 조기 채택으로 가장 큰 이점을 얻을 수 있음을 의미합니다. 2024년 이후에는 8K 기술이 새로운 코덱의 등장, 소비자 측 전자 제품의 비용 절감, 8K 배포를 위한 리소스 가용성 증가 등의 이점을 누릴 수 있을 만큼 충분히 성숙할 것으로 예상합니다. 그때까지는 헤드엔드나 TV 제조사 측의 업컨버전 기술이 최고의 단기 솔루션이다. 

 

 

https://www.harmonicinc.com/insights/blog/4k-vs-8k-outlook-for-broadcasters-2021

 

4K vs 8K: What’s the Outlook for Broadcasters in 2021?

The emergence of 8K technology requires broadcasters to consider its place in their content strategy. We look at the outlook for broadcasters for 4K vs 8K.

www.harmonicinc.com

 

+ Recent posts