AI技術(shù)加持，高通與產(chǎn)業(yè)伙伴推動視頻編碼技術(shù)不斷進步

如今，各類視頻應(yīng)用已廣泛滲透到人們生活的方方面面，比如春節(jié)期間，用手機看春晚、視頻拜年等成為日常生活的一部分。與此同時，各類視頻內(nèi)容的迅猛增長，也給網(wǎng)絡(luò)帶寬、存儲空間等帶來了巨大的壓力，在此背景下，視頻壓縮技術(shù)變得越來越重要。

VVC(多功能視頻編碼)是當(dāng)前最新的視頻編碼標(biāo)準(zhǔn)，與上一代標(biāo)準(zhǔn)HEVC(高效視頻編碼)相比，VVC能夠在保證相同視頻質(zhì)量的前提下，將視頻數(shù)據(jù)大小進一步壓縮50%左右。目前，業(yè)界仍然在努力推動視頻編碼技術(shù)不斷進步。最近，高通技術(shù)公司技術(shù)副總裁Marta Karczewicz在一篇博客文章中介紹，在去年10月召開的聯(lián)合視頻專家組(JVET)會議上，JVET委員會審議了針對證據(jù)征集(Call for Evidence，CfE)的各類響應(yīng)，為推動視頻編碼技術(shù)超越VVC標(biāo)準(zhǔn)能力提供支持。CfE是視頻編碼標(biāo)準(zhǔn)制定中的一個重要過程，對于在正式征集提案之前判斷新工具和新方法的改進幅度及其成熟度至關(guān)重要。

需要注意的是，本次CfE顯示出一個重要的趨勢，即提案廣泛采用了增強壓縮模型(ECM)工具。ECM工具最初源自2021年1月JVET會議所啟動的探索階段，高通公司在當(dāng)時提出了提案JVET‑U0100.可在隨機訪問條件下相比VVC展現(xiàn)出11.5%的壓縮效率提升。該提案成為后續(xù)探索工作的基礎(chǔ)，其軟件也被采納為ECM的參考模型。之后，高通還聯(lián)合多家積極參與ECM開發(fā)的公司，針對CfE提交了一份基于ECM的響應(yīng)。此外，高通還發(fā)布了優(yōu)化后的軟件，集成最新的VTM(VVC測試模型)與ECM編碼工具(JVET‑AN0271)，為研究社區(qū)和行業(yè)相關(guān)方提供更高效的平臺，用于評估各類編碼技術(shù)，共同推動視頻編碼技術(shù)的發(fā)展。

高通是視頻編解碼技術(shù)領(lǐng)域的領(lǐng)軍企業(yè)，在重要視頻技術(shù)的發(fā)展中扮演了重要的角色，是HEVC、VVC等視頻編碼標(biāo)準(zhǔn)的領(lǐng)先技術(shù)貢獻者和開發(fā)者。例如VVC標(biāo)準(zhǔn)的制定，始于高通向國際電信聯(lián)盟電信標(biāo)準(zhǔn)分局(ITU-T)視頻編碼專家組(VCEG)提交的COM16-C.806提案。該提案包含了相應(yīng)軟件，在隨機訪問配置下，其編碼效率較HEVC測試模型(HM)提高了10.4%。鑒于其重要性，VCEG專家組將該軟件作為聯(lián)合探索模型(JEM)的起點。

Marta Karczewicz在文章中談到，JEM在VVC標(biāo)準(zhǔn)制定過程中發(fā)揮了關(guān)鍵作用，作為新理念和新方法的測試平臺，其中許多被驗證的新理念和新方法最終被納入了VVC標(biāo)準(zhǔn)。她同時表示，正是看到協(xié)作式探索加速了新一代壓縮技術(shù)的開發(fā)，在VVC標(biāo)準(zhǔn)完成后，高通再次將其研究成果和軟件引入標(biāo)準(zhǔn)化論壇。

另一方面，伴隨著人工智能技術(shù)的迅猛發(fā)展，AI相關(guān)技術(shù)也被應(yīng)用到視頻編碼領(lǐng)域。例如，ECM通過集成神經(jīng)網(wǎng)絡(luò)幀內(nèi)預(yù)測和環(huán)內(nèi)濾波等基于深度學(xué)習(xí)的方法，實現(xiàn)了更高的壓縮效率。Marta Karczewicz認(rèn)為，隨著視頻壓縮技術(shù)的不斷發(fā)展，神經(jīng)網(wǎng)絡(luò)有望通過解決傳統(tǒng)混合編碼框架(基于幀間/幀內(nèi)預(yù)測與變換)的局限性，引領(lǐng)下一次重大技術(shù)變革。

展望未來，相信隨著視頻編碼、AI等技術(shù)的持續(xù)進步及投入應(yīng)用，人們將在視頻時代享受到更好的應(yīng)用體驗。Marta Karczewicz表示，即將于2027年1月啟動的提案征集(Call for Proposals)評審工作，將為進一步推動技術(shù)進步提供契機，屆時各類創(chuàng)新理念和解決方案將接受全面的測試和優(yōu)化。高通也將在這一過程中繼續(xù)發(fā)揮作用，包括提供相關(guān)技術(shù)方案、軟件等，共同推動未來標(biāo)準(zhǔn)的發(fā)展。