AV1編碼大家應該都不陌生了,從PC到手機已經普遍支持。
它出自微軟、Google、Intel、Netflix、亞馬遜、思科等科技巨頭組建的開放多媒體聯盟(AOM),目前正在抓緊制定新一代標準“AV2”,預計今年底正式發布。
來自Netflix的AOM聯合主席、研究科學家Andrey Norkin確認,最新測試表明,AV2相比于AV1 PSRN-YUV(14:1:1)下的碼率降低了28.63%,VMAF下更是降低了多達32.59%,但是視頻質量基本相同。
VMAF是由Netflix提出的一種視頻質量評價指標,通過機器學習算法,將多個基本指標融合為一個最終指標。
值得強調的是,AV2格式并未使用什么AI算法,只是用了很少的AI擴展,能做到這一點,更多是單純來自數學、算法,以及研究人員的創新思維。
AV2編碼保留了AV1中為人熟知的混合塊基結構,但新增了256 x 256大小的超大塊、完全遞歸式分區,以及更智能的亮度與色度分離分割方式。
預測功能得到了多方面增強:
一是加入了新的數據驅動型幀內模式;
二是改進了亮度衍生色度建模,即通過亮度信息推算色度的技術;
三是引入了排序參考系統,可以從最多7幀過往畫面中篩選參考幀。
四是幀間預測新增了時間插值(TIP)技術,能提升高分辨率場景或快速運動場景中的運動處理效果。
濾波與后處理技術也已升級,單個通用去塊效應濾波器可以更好地保留細節,而導向細節濾波器(Guided Detail Filter)、跨分量采樣偏移(Cross-Component Sample Offset)等新型濾波器,可以進一步清除壓縮噪聲。
此外,膠片顆粒合成更具靈活性,支持擴展的多層視頻設計、立體視頻設計。
目前,所有的AV2編碼工具均已通過硬件效率驗證,下一步一重點是編碼器優化,以及針對更高位深度、AI輔助配置文件的擴展開發。
