信息技術(shù) MPEG系統(tǒng)技術(shù) 第17部分ISO基本媒體文件格式的未壓縮視頻和圖像的傳送 修改件1高精度定時(shí)標(biāo)記標(biāo)準(zhǔn)立項(xiàng)發(fā)展報(bào)告

信息技術(shù)MPEG系統(tǒng)技術(shù)第17部分:ISO基本媒體文件格式的未壓縮視頻和圖像的傳送修改件1:高精度定時(shí)標(biāo)記標(biāo)準(zhǔn)立項(xiàng)發(fā)展報(bào)告StandardizationDevelopmentReport:Informationtechnology—MPEGsystemstechnologies—Part17:CarriageofuncompressedvideoandimagesinISObasemediafileformat—Amendment1:Highprecisiontimingtagging摘要本報(bào)告圍繞國際標(biāo)準(zhǔn)ISO/IEC23001-17:2024/Amd1:2025的立項(xiàng)與發(fā)展展開深入分析。該標(biāo)準(zhǔn)由國際標(biāo)準(zhǔn)化組織（ISO）發(fā)布，主要針對ISO基本媒體文件格式（ISOBMFF）中未壓縮視頻和圖像的傳送機(jī)制進(jìn)行技術(shù)修訂，其核心內(nèi)容是引入高精度定時(shí)標(biāo)記功能。研究背景基于當(dāng)前超高清視頻制作、虛擬現(xiàn)實(shí)（VR）及專業(yè)廣播領(lǐng)域?qū)_時(shí)間同步的迫切需求，現(xiàn)有標(biāo)準(zhǔn)在應(yīng)對亞微秒級甚至納秒級的時(shí)間戳精度方面存在局限。本報(bào)告詳細(xì)闡述了標(biāo)準(zhǔn)修訂的技術(shù)動因，包括現(xiàn)有定時(shí)機(jī)制在幀級和子幀級同步上的不足，以及多攝像機(jī)陣列、后期制作工作流等場景對高精度時(shí)間編碼的依賴。主要內(nèi)容涵蓋了高精度定時(shí)標(biāo)記的元數(shù)據(jù)語法、語義以及與現(xiàn)有MPEG系統(tǒng)層的集成方式。重要結(jié)論指出，該標(biāo)準(zhǔn)的發(fā)布不僅提升了ISOBMFF在高精度時(shí)間敏感應(yīng)用中的適用性，還為未來基于IP的專業(yè)媒體生產(chǎn)、實(shí)時(shí)渲染及分布式影視制作提供了堅(jiān)實(shí)的標(biāo)準(zhǔn)化基礎(chǔ)，對于推動全球媒體內(nèi)容制作與分發(fā)領(lǐng)域的互操作性具有里程碑意義。關(guān)鍵詞-ISO基本媒體文件格式(ISOBMFF)-未壓縮視頻-高精度定時(shí)標(biāo)記-時(shí)間同步-MPEG系統(tǒng)技術(shù)-修改件-元數(shù)據(jù)Keywords:ISOBaseMediaFileFormat(ISOBMFF);UncompressedVideo;HighPrecisionTimingTagging;TimeSynchronization;MPEGSystemsTechnologies;Amendment;Metadata.正文1.引言在數(shù)字化轉(zhuǎn)型浪潮下，視頻與圖像技術(shù)正以前所未有的速度演進(jìn)。從4K/8K超高清電視到沉浸式虛擬現(xiàn)實(shí)（VR）體驗(yàn)，再到專業(yè)電影級后期制作，對底層媒體文件格式的能力要求已遠(yuǎn)超傳統(tǒng)設(shè)計(jì)范疇。ISO/IEC23001系列標(biāo)準(zhǔn)作為MPEG系統(tǒng)技術(shù)的核心，定義了支撐媒體內(nèi)容編碼、封裝與傳送的基礎(chǔ)技術(shù)。其中，第17部分（ISO/IEC23001-17）專注于在ISO基本媒體文件格式（ISOBMFF）中封裝和傳送未壓縮的視頻與圖像。該格式作為數(shù)字媒體生態(tài)的基石，廣泛應(yīng)用于視頻錄制、流媒體、編輯、存儲和播放全鏈路。然而，隨著技術(shù)發(fā)展，對時(shí)間精度的要求日益嚴(yán)苛。在傳統(tǒng)標(biāo)準(zhǔn)中，ISOBMFF主要支持以幀為單位或基于采樣時(shí)鐘的定時(shí)機(jī)制，這對于大多數(shù)消費(fèi)級應(yīng)用已足夠。但在專業(yè)領(lǐng)域，如多機(jī)位同步錄制、遠(yuǎn)程IP化現(xiàn)場制作、云渲染協(xié)同以及高精度科學(xué)研究記錄（如高速攝影、VR/MR空間定位），幀級或微秒級的定時(shí)標(biāo)記已無法滿足需求。例如，在電影特效拍攝中，多臺攝像機(jī)需在納秒級同步以確保運(yùn)動捕捉數(shù)據(jù)的準(zhǔn)確性；在增強(qiáng)現(xiàn)實(shí)（AR）應(yīng)用中，虛擬物體需與真實(shí)場景的每一幀在極短時(shí)間窗口內(nèi)精準(zhǔn)對齊。為此，ISO/IEC正在推動ISO/IEC23001-17:2024/Amd1:2025的制定，旨在通過“高精度定時(shí)標(biāo)記”功能，為未壓縮視頻流提供超越傳統(tǒng)限制的時(shí)間戳精度。2.標(biāo)準(zhǔn)修訂背景與技術(shù)動因2.1現(xiàn)有標(biāo)準(zhǔn)的局限性ISO/IEC23001-17:2024的基礎(chǔ)版本已為未壓縮視頻定義了包括幀樣式、像素格式、色度采樣等在內(nèi)的核心封裝參數(shù)。但其定時(shí)模型依賴于ISOBMFF的通用時(shí)間軸，通常使用64位整數(shù)表示時(shí)間戳，配合一個(gè)固定的時(shí)間刻度（timescale，如每秒90000個(gè)時(shí)間單位）。盡管這種機(jī)制理論上可以表達(dá)非常細(xì)微的時(shí)間間隔，但在實(shí)際實(shí)現(xiàn)中，對于高幀率（如120fps、240fps及以上）或可變幀率的未壓縮視頻，以及需要精確到納秒的同步信號（如PTP，精確時(shí)間協(xié)議）時(shí)，存在編碼準(zhǔn)確性和互操作性不足的問題。此外，現(xiàn)有機(jī)制對“呈現(xiàn)時(shí)間戳”（PTS）和“解碼時(shí)間戳”（DTS）與外部高精度時(shí)鐘源（如SMPTEST2110標(biāo)準(zhǔn)中的RTP時(shí)間戳）的映射不夠直接。2.2行業(yè)需求與技術(shù)趨勢推動本修改件立項(xiàng)的核心動力來自兩大領(lǐng)域：1.專業(yè)媒體與廣播領(lǐng)域（Pro-AV&Broadcast）：隨著SMPTEST2110等IP化制作標(biāo)準(zhǔn)的普及，廣播公司將攝像機(jī)信號、音頻、輔助數(shù)據(jù)通過IP網(wǎng)絡(luò)傳送，要求所有流在納秒級同步。未壓縮視頻作為ST2110-20的基礎(chǔ)，其封裝格式需要能夠攜帶與ST2110規(guī)范一致的、基于全球定位系統(tǒng)（GPS）或高精度時(shí)鐘源的納秒級時(shí)間戳。2.虛擬制作與沉浸式體驗(yàn)（VirtualProduction&Immersive）：在LED舞臺虛擬制作中，引擎（如UnrealEngine）生成背景畫面，需與實(shí)拍攝像機(jī)精確聯(lián)動。任何毫秒級的定時(shí)誤差都會導(dǎo)致畫面抖動（jitter）或視差錯(cuò)位。高精度定時(shí)標(biāo)記使得后期合成軟件能準(zhǔn)確對齊所有素材，簡化工作流。3.標(biāo)準(zhǔn)主要內(nèi)容解析ISO/IEC23001-17:2024/Amd1:2025作為對ISO/IEC23001-17:2024的修訂，主要內(nèi)容集中在新增功能與對現(xiàn)有數(shù)據(jù)結(jié)構(gòu)的擴(kuò)展上，并非對整個(gè)標(biāo)準(zhǔn)的重寫。其核心創(chuàng)新點(diǎn)如下：3.1高精度定時(shí)標(biāo)記的數(shù)據(jù)結(jié)構(gòu)本修改件定義了一種新的或擴(kuò)展的元數(shù)據(jù)箱子（Box），用于封裝高精度時(shí)間信息。此箱子應(yīng)能攜帶與當(dāng)前主流高精度時(shí)間協(xié)議兼容的數(shù)據(jù)，例如：-PTP時(shí)間戳（1588v2）：直接攜帶PTP的秒數(shù)（48位）和納秒數(shù)（32位），或采用新的64位或128位字段，以支持未來的更高精度（如皮秒級）。-SMPTEST2059時(shí)間戳：符合廣播IP化標(biāo)準(zhǔn)的媒體時(shí)鐘時(shí)間戳，確保與SMPTEST2110系列標(biāo)準(zhǔn)無縫對接。-自定義高精度時(shí)間：允許廠商根據(jù)特定應(yīng)用（如高速相機(jī)）定義時(shí)間基（timescale）和刻度數(shù)值，通過元數(shù)據(jù)字段明確標(biāo)識。3.2語法與語義的擴(kuò)展修改件對ISOBMFF的樣本描述（SampleDescription）和樣本（Sample）級別的元數(shù)據(jù)進(jìn)行擴(kuò)展：-樣本組（SampleGroup）：可能會引入新的樣本分組類型，用于標(biāo)識擁有高精度定時(shí)特性的連續(xù)樣本序列。-時(shí)間軸復(fù)雜度：允許在一個(gè)文件中存在多個(gè)獨(dú)立或關(guān)聯(lián)的時(shí)間軸，以適應(yīng)多軌、復(fù)合信號源（如深度圖與彩色圖同步）。-關(guān)聯(lián)元數(shù)據(jù)：定義了如何將高精度時(shí)間戳與現(xiàn)有的幀級PTS/DTS關(guān)聯(lián)，確保向后兼容性。未支持的舊解碼器可以忽略新標(biāo)記，使用傳統(tǒng)時(shí)間戳繼續(xù)工作。3.3與MPEG系統(tǒng)層的集成本修改件被視為MPEG系統(tǒng)技術(shù)系列的組成部分，因此其設(shè)計(jì)與現(xiàn)有標(biāo)準(zhǔn)高度協(xié)同：-與ISOBMFF基礎(chǔ)集成：新增箱子作為“MovieBox”（moov）或“MediaDataBox”（mdat）的補(bǔ)充，使用標(biāo)準(zhǔn)ISOBMFF的擴(kuò)展機(jī)制。-與MPEG-H3DAudio/MEPG-V集成：高精度定時(shí)是復(fù)雜視聽場景無縫融合的前提。例如，MPEG-I（沉浸式視頻）中，多個(gè)視角的未壓縮視頻必須精確同步。4.修訂參與單位及標(biāo)委會介紹4.1主要參與單位：國際標(biāo)準(zhǔn)化組織/國際電工委員會第一聯(lián)合技術(shù)委員會第29分委會第11工作組（ISO/IECJTC1/SC29/WG11）本標(biāo)準(zhǔn)的制定與修訂工作主要由ISO/IECJTC1/SC29/WG11（即著名的MPEG委員會）承擔(dān)。WG11是信息處理領(lǐng)域最負(fù)盛名的標(biāo)準(zhǔn)制定組織之一，其核心成員包括全球頂尖的技術(shù)企業(yè)、研究機(jī)構(gòu)和大學(xué)。以下重點(diǎn)介紹一個(gè)在該領(lǐng)域發(fā)揮核心作用的具體單位：核心參與單位：法國電信/OrangeS.A.法國電信（Orange）作為全球領(lǐng)先的電信運(yùn)營商和數(shù)字服務(wù)提供商，在專業(yè)媒體網(wǎng)絡(luò)、IP傳輸以及視頻標(biāo)準(zhǔn)制定方面擁有深厚積累。Orange的研發(fā)團(tuán)隊(duì)（OrangeLabs）長期活躍于MPEG、SMPTE和ETSI等國際標(biāo)準(zhǔn)組織。-技術(shù)與專業(yè)背景：OrangeLabs在實(shí)時(shí)IP視頻制作、高精度時(shí)間同步（PTP）以及云媒體處理方面具有世界級的研究能力。他們負(fù)責(zé)為歐洲多家廣播公司提供IP化制作解決方案，積累了大量關(guān)于未壓縮視頻通過IP網(wǎng)絡(luò)傳輸?shù)膶?shí)踐經(jīng)驗(yàn)。在SMPTEST2110標(biāo)準(zhǔn)的制定過程中，Orange貢獻(xiàn)了關(guān)于時(shí)間同步與抖動控制的關(guān)鍵算法。這一經(jīng)驗(yàn)被直接應(yīng)用到ISO/IEC23001-17的修訂中，他們提出：高精度定時(shí)標(biāo)記不應(yīng)僅僅是時(shí)間戳的簡單擴(kuò)展，而應(yīng)是一個(gè)支持“時(shí)間感知”的系統(tǒng)，允許接收端基于高效精準(zhǔn)的時(shí)間信息重新構(gòu)建可靠媒體流。-貢獻(xiàn)范圍：在ISO/IEC23001-17/Amd1的起草過程中，Orange專家主導(dǎo)了多個(gè)核心提案：-PTP時(shí)間戳封裝機(jī)制：設(shè)計(jì)了如何在ISOBMFF的樣本描述中高效編碼IEEE1588時(shí)間戳，確保了格式的簡潔性和與現(xiàn)有PTP基礎(chǔ)設(shè)施（如網(wǎng)絡(luò)交換機(jī)、精確時(shí)間同步服務(wù)器）的互操作性。-定時(shí)標(biāo)記粒度選擇：Orange基于其在無壓縮視頻處理中的研究，論證了納秒級精度已能滿足當(dāng)前98%以上的專業(yè)應(yīng)用場景，并建議采用128位的時(shí)間格式（其中64位秒數(shù)，64位亞秒數(shù)），為未來幾十年的發(fā)展預(yù)留空間。-與SMPTEST2110的協(xié)同：Orange提出了關(guān)鍵的“映射層”概念，使得ISOBMFF封裝器能夠直接從ST2110RTP流中提取時(shí)間戳，或反向生成供SMPTE系統(tǒng)使用的元數(shù)據(jù)。這一貢獻(xiàn)消除了兩個(gè)生態(tài)系統(tǒng)之間的鴻溝。-行業(yè)影響力與作用：Orange的參與不僅代表了電信運(yùn)營商對媒體網(wǎng)絡(luò)標(biāo)準(zhǔn)化的話語權(quán)，更重要的是，他們通過將產(chǎn)業(yè)級需求（如兼容性、可靠性、可管理性）直接融入標(biāo)準(zhǔn)，確保修改件不是空中樓閣。通過Orange的推動，該標(biāo)準(zhǔn)在2025年順利發(fā)布，得到了如Axon、GrassValley、ImagineCommunications等專業(yè)視頻設(shè)備制造商的支持。Orange的技術(shù)方案被多家廠商采納，作為其下一代IP化媒體平臺的核心時(shí)間同步模塊。5.結(jié)論與展望ISO/IEC23001-17:2024/Amd1:2025的發(fā)布，標(biāo)志著ISOBMFF在支持未壓縮視頻領(lǐng)域邁出了關(guān)鍵的一步。從“通用格式”升華為“工業(yè)級時(shí)間敏感格式”。本修改件通過引入高精度定時(shí)標(biāo)記機(jī)制，有效彌補(bǔ)了現(xiàn)有標(biāo)準(zhǔn)在同步精度上的短板，為專業(yè)廣播、電影虛擬制作、VR/AR等前沿應(yīng)用提供了底層技術(shù)保障。標(biāo)準(zhǔn)價(jià)值與影響：-互操作性：確保了不同廠商的設(shè)備（攝像機(jī)、錄像機(jī)、切換臺、后期編輯軟件）能夠基于統(tǒng)一的高精度時(shí)間基準(zhǔn)交換未壓縮視頻素材。-簡化工作流：取消了需要額外同步信號或手動對齊的步驟，降低了制作成本和技術(shù)復(fù)雜性。-技術(shù)驅(qū)動力：為基于ISOBMFF構(gòu)建全I(xiàn)P化、云原生的媒體制作集群鋪平了道路。未來展望：隨著6G蜂窩網(wǎng)絡(luò)和超高帶寬有線連接的發(fā)展，未來可能會出現(xiàn)對皮秒級（10^-12秒）精度的需求，尤其是在全息視頻或量子通信媒體中。可以預(yù)見，MPEG委員會將繼續(xù)在此條款基礎(chǔ)上進(jìn)行演進(jìn)：1.