Revue de l'année 2019

Transcript

1. Revue de l’année 2019 Luc Trudeau ( @trudluc, LucTrudeau) 2019-12-04 Cette présentation de Luc Trudeau est mis à disposition selon les termes de la licence Creative Commons Attribution 4.0 International.
2. Chercheur en compression vidéo Coauteur du format AV1 Auteur de brevets et d’articles scientifiques Chercheur pour Two Orioles (Eve-AV1) Coconcepteur du décodeur dav1d Luc Trudeau ( @trudluc, LucTrudeau)
3. 2019 La guerre des guerres Guerre des codecs AV1 vs. HEVC, VVC (LCEVC, EVC) Guerre des transports DASH vs. LHLS vs. LL-HLS Guerre des services OTT Netflix vs. Disney+ vs. Apple TV+ vs Prime Video vs ...
4. 2019 La guerre des guerres Guerre des codecs AV1 vs. HEVC, VVC (LCEVC, EVC) Guerre des transports DASH vs. LHLS vs. LL-HLS Guerre des services OTT Netflix vs. Disney+ vs. Apple TV+ vs Prime Video vs ... https://www.twitch.tv/videos/501523712 https://www.twitch.tv/videos/501523712
5. MPEG en 2019 Janvier Ref: https://boingboing.net/2018/01/30/rent-seekers-rant.html http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/ Le fondateur et président de MPEG dit que c’est la fin
6. Brevets HEVC en 2019 Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/
7. BlackBerry rejoint Velos Media (Janvier) Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/
8. Brevets HEVC en 2019 Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/ Les modalités des licenses ne sont toujours pas disponibles (2 ans plus tard!)
9. Les regroupements de brevets (patent pool) couvrent seulement ⅓ des brevets Ref: https://www.ipwatchdog.com/2018/07/11/high-efficiency-video-coding-video-ecosystem-evolving/id=99094/
10. MPEG en 2019 Ref: https://www.youtube.com/watch?v=SSCizM8u9Cw 3 nouveaux formats videos
11. VVC (ITU H.266 et/ou MPEG-I Part 3) Versatile Video Coding Successeur de H.265/HEVC 50% mieux que HEVC? à suivre… Solution au problème de brevets? Pas vraiment, à suivre… Disponibilité? Novembre 2020 Ref: https://www.youtube.com/watch?v=QqgpxqlFA7w
12. EVC (MPEG-5 Part 1) Essential Video Coding Similaire à HEVC Solution au problème de brevets? peut-être…? Disponibilité 2020
13. EVC Solution au problème de brevets Outils avancés (avec redevances) Utilisés seulement s’il y a une entente pour la propriété intellectuelle (sinon remplacé par outil de base) Outils de bases (sans redevances) Basé sur des brevets expirés
14. LCEVC (MPEG-5 Part 2) Low Complexity Enhanced Video Coding Extension à un codec existant Solution au problème de brevets? à suivre? Disponibilité 2020
15. LCEVC Comment ça marche 4K Set top box avec encodeur matériel (BCM7271) Décodeur H.264 Processeur (ARM) Rehausseur Agrandissement Données de rehaussement 1080p LCEVC
16. VVC vs. AV1 vs. EVC (JVET-O0898) Comparé à HM (encodeur de référence HEVC) BD-Rate PSNR YUV Temps encodage Temps décodage VTM-5.0 -31.4% 12.17x 1.62x AV1 -20.1% 4.97x 2.69x ETM-2.01 -17.4% 2.57x 1.61x Ref: http://phenix.int-evry.fr/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET-O0898-v1.zip
17. AOM en 2019 Problème de troll?
18. Un troll de brevets AV1? Mars 2019, Sisvel dit avoir des brevets reliés à AV1 Sisvel n’a toujours pas divulguer d’information sur les brevets Ref: https://lactualite.com/lactualite-affaires/la-chasse-aux-trolls-de-brevets/
19. SVT-AV1 (Intel et Netflix) Avril Annoncé à NAB Temps réel* Gratuit / Logiciel Libre Famille d’encodeurs SVT-HEVC, SVT-VP9 Ref: https://medium.com/netflix-techblog/introducing-svt-av1-a-scalable-open-source-av1-framework-c726cce3103a https://videocodectracker.dev/
20. Encodeur AV1 Temps Réel (Cisco) Juin Démonstration d’AV1 dans Webex Vidéoconférence à New York avec serveur à San Jose Serveur capable d’interfacer AV1 avec H.264 Ref: https://vimeo.com/344366650 https://blogs.cisco.com/collaboration/cisco-leap-frogs-h-264-video-collaboration-with-real-time-av1-codec
21. Ecosystème encodeurs AV1 Logiciel Libre: • Libaom • SVT-AV1 • Rav1e Propriétaire: • Eve-AV1 • Socionext (FPGA) • NGCodec (FPGA) • ATEME • Harmonic • Bitmovin • Visionular Aurora • Allegro DVT (hardware) • Cisco AV1
22. État des encodeurs 2019 Ref: https://aomedia.org/wp-content/uploads/2019/10/RonaldBultje_TwoOrioles.pdf https://vimeo.com/344663992
23. Dav1d: Décodeur AV1 haute vitesse (VideoLAN) Gratuit / Logiciel Libre (license n’est pas virale) Conception hautement parallèle Décodeur écrit en Assembleur (peut contenir des traces de C) Ref: https://medium.com/@ewoutterhoeven/av1-is-ready-for-prime-time-part-2-decoding-performance-d3428221313
24. Décodeurs Matériel “hardware” Applications: Set Top Boxes Broadcom BCM7218X (Septembre 2019) 4k à 60 FPS Technicolor Jade Ref: https://www.broadcom.com/products/broadband/set-top-box/bcm7218x https://www.realtek.com/en/press-room/news-releases/item/realtek-launches-worldwide-first-4k-uhd-set-top-box-soc-rtd1311-integrating-av1-video-decoder-and-multiple-cas-functions https://www.youtube.com/watch?v=IGtjBwMwTtE Realtek RTD1311 (Juin 2019) 4k à 60 FPS Amlogic S905X4 (? 2020) 4k à 120 FPS
25. AV1 chez YouTube Plus 5 milliards d’heures d’AV1 visioner (octobre 2019) Quand les décodeurs matériels seront disponibles YouTube va être beaucoup plus agressif avec AV1 Ref: https://www.youtube.com/watch?v=dqpEcNB6ltw
26. AV1 ailleur Vimeo test AV1 en production sur ses vidéos “Staff picks” Facebook vise 1% des vues sur sa plateforme soient AV1 en 2020 (surtout 720p, séquences <5 minutes) Netflix en processus d’évaluation d’AV1, vise le déploiement pour son contenu HDR (10 bit) Ref: https://vimeo.com/blog/post/av1-new-standard-codecs/?utm_source=twitter&utm_medium=social&utm_campaign=trending&vcid=31447 https://www.youtube.com/watch?v=fgztbt6HLs4 https://www.youtube.com/watch?v=M1vwnI0vbMI
27. Jamais autant de formats vidéos en production MPEG-2, H.264, H.265/HEVC, VP8, VP9, AV1… Beaucoup de recherche et de nouveaux formats LCEVC, EVC, VVC, AV2… 2019 fait partie de l'âge d’or de l’encodage vidéo
28. Sondage Bitmovin 2019 91% des répondants utilisent H.264 20% des répondants prévoient déployer AV1 en 2020 Ref: https://go.bitmovin.com/video-developer-report-2019
29. Acquisitions 2019 Intel acquiert Omnitek (Avril) Encodeur FPGA H.264 et HEVC Broadcom acquiert Argon Design (Juin) Spécialisation AV1 et séquences de conformité Xilinx acquiert NGCodec (Juillet) Encodeur FPGA VP9, HEVC, AV1 Haivision acquiert LightFlow (Octobre) Optimization d’encodage “intelligente” Ref: https://newsroom.intel.com/news/intel-acquires-omnitek-fpgas/#gs.iig4rq https://forums.xilinx.com/t5/Xilinx-Xclusive-Blog/Buffer-Be-Gone-Xilinx-Acquires-NGCodec-to-Deliver-High-Quality/ba-p/990357 https://www.businessweekly.co.uk/news/hi-tech/broadcom-pays-megabucks-acquire-argon-design-cambridge https://www.studiodaily.com/2019/10/haivision-acquires-lightflow-streaming-optimization-technology/#:~:targetText=Montr%C3%A9al%2Dbased%20H aivision%20said%20today,for%20streaming%20video%20quality%20optimizations.
30. Future Les prochains gains en compression vidéo necessiterons une augmentation exponentielle de la complexité Ref: https://www.linkedin.com/pulse/encoder-complexity-hits-wall-david-ronca/
31. Future En 2019, les centres de données consomment 3% de la production mondiale d’énergie Si la tendance se maintient, en 2025 cela représentera 20% Ref: https://www.researchgate.net/publication/320225452_Total_Consumer_Power_Consumption_Forecast