?《FFmpeg開(kāi)發(fā)實(shí)戰(zhàn)：從零基礎(chǔ)到短視頻上線》一書(shū)的“3.4.3 把原始的H264文件封裝為MP4格式”介紹了如何把H.264裸流封裝為MP4文件。那么在網(wǎng)絡(luò)上傳輸?shù)腍.264裸流是怎樣被接收端獲取視頻格式的呢？前文指出H.264流必定以“SPS幀→PPS幀→IDR幀”開(kāi)頭，接下來(lái)就來(lái)驗(yàn)證是否確實(shí)
《FFmpeg開(kāi)發(fā)實(shí)戰(zhàn)：從零基礎(chǔ)到短視頻上線》一書(shū)中介紹了如何將H.264裸流封裝為MP4文件。但在網(wǎng)絡(luò)上傳輸?shù)腍.264裸流是如何被接收端獲取視頻格式的呢？本文將探討這一問(wèn)題。
雷霄驊雷神編寫(xiě)的H264分析器是本文使用的工具。該軟件的初始界面如下圖所示：
單擊文件路徑欄右邊的打開(kāi)按鈕，在彈出的文件對(duì)話框中選擇某個(gè)H.264裸流文件，再單擊界面右下角的開(kāi)始按鈕，分析器便開(kāi)始分析H264文件的內(nèi)容格式，分析后的結(jié)果界面如下圖所示：
從分析結(jié)果可見(jiàn)，H.264裸流的開(kāi)頭三幀果然是“SPS幀→PPS幀→IDR幀”。單擊列表中的某個(gè)幀，界面右側(cè)會(huì)顯示該幀的詳細(xì)字段信息。
然而，分析器只能讀取H.264裸流文件。如果讓分析器讀取MP4文件，就無(wú)法正常讀出各幀信息。那么流媒體服務(wù)器又是如何將MP4文件轉(zhuǎn)化為H.264裸流的呢？
以ZLMediaKit為例，它在向推流序列插入I幀時(shí)做了特殊處理，一旦出現(xiàn)I幀，就自動(dòng)插入SPS與PPS等配置幀。具體代碼在ZLMediaKit框架的ext-codec/H264.cpp，查看該源碼的H264Track::inputFrame_l函數(shù)，找到以下的代碼片段，可見(jiàn)程序在判斷關(guān)鍵幀之后調(diào)用了insertConfigFrame函數(shù)。
找到insertConfigFrame函數(shù)的定義代碼如下，函數(shù)內(nèi)容依次插入了SPS幀和PPS幀：
由此可見(jiàn)，ZLMediaKit在每個(gè)關(guān)鍵幀前面都額外插入了SPS幀和PPS幀，確保H.264裸流維持著形如“SPS幀→PPS幀→IDR幀”的隊(duì)形。如果不添加SPS和PPS，客戶端在拉流時(shí)會(huì)報(bào)錯(cuò)。
只有加上SPS與PPS，客戶端才能正常拉流解析數(shù)據(jù)，才能正常渲染視頻畫(huà)面。
更多詳細(xì)的FFmpeg開(kāi)發(fā)知識(shí)參見(jiàn)《FFmpeg開(kāi)發(fā)實(shí)戰(zhàn)：從零基礎(chǔ)到短視頻上線》一書(shū)。
小編推薦閱讀
機(jī)器學(xué)習(xí)：神經(jīng)網(wǎng)絡(luò)構(gòu)建（下）
閱讀華為Mate品牌盛典：HarmonyOS NEXT加持下游戲性能得到充分釋放
閱讀實(shí)現(xiàn)對(duì)象集合與DataTable的相互轉(zhuǎn)換
閱讀鴻蒙NEXT元服務(wù)：論如何免費(fèi)快速上架作品
閱讀算法與數(shù)據(jù)結(jié)構(gòu) 1 - 模擬
閱讀基于鴻蒙NEXT的血型遺傳計(jì)算器開(kāi)發(fā)案例
閱讀5. Spring Cloud OpenFeign 聲明式 WebService 客戶端的超詳細(xì)使用
閱讀Java代理模式：靜態(tài)代理和動(dòng)態(tài)代理的對(duì)比分析
閱讀Win11筆記本“自動(dòng)管理應(yīng)用的顏色”顯示規(guī)則
閱讀本站所有軟件，都由網(wǎng)友上傳，如有侵犯你的版權(quán)，請(qǐng)發(fā)郵件[email protected]
湘ICP備2022002427號(hào)-10 湘公網(wǎng)安備：43070202000427號(hào)© 2013~2025 haote.com 好特網(wǎng)
