基于FPGA NiosII的MPEG-4視頻播放器設計
引 言
多媒體技術實用化的關鍵技術之一,就是解決視頻、音頻數字化以后數據量大,與數字存儲媒體、通信網容量小的矛盾,其解決途徑就是壓縮。
為了支持低比特率視頻傳輸業務,MPEG(Moving Picture Expert5 Group)推出了MPEG-4標準。于1999年正式成為國際標準的MPEG-4是一個適合于低傳輸率的視頻、音頻解決方案,更注重于多媒體系統的交互性和靈活性。MPEG-4視頻壓縮標準提供了一種高度靈活、基于“內容”的編碼方法,解碼端可以“按需解碼”,還可以添加對象和信息。這種靈活性使得MPEG-4具有高效的編碼效率、基于內容的可擴展性以及在易受干擾環境下的魯棒性。
MFEG-4的這些特性使得它十分適合于存儲容量有限的手持終端設備。但是MPEG-4視頻解碼中涉及的反量化(Inverse Quantlzation,IQ)、反離散余弦變換(InverseDiscrete Cosine Transform,IDCT),運動補償(Motion Composition,MC)等技術均是典型的計算密集型變換,對于本身處理能力有限,功耗受限的手持終端設備而言,視頻解碼的實時性是一個很大的挑戰。
本系統在NiosII 和FPGA構成的SOPC平臺上,使用NiosII的用戶自定義指令以硬件邏輯方式實現MPEG-4解碼中的IQ、IDCT、MC等計算復雜、高度耗時的功能模塊,極大地提高解碼速度。從而在以GPL協議發布的XviD Codec基礎上,實現Simple Profile視覺框架下,L1級、QCIF(177×144分辨率)、25fps的MPEG-4實時解碼,并通過DMA方式在LCD上加以顯示。
1 系統功能描述
本系統從功能上可以分為視頻文件存取、視頻解碼器、YUV-RGB變換器和LCD控制模塊4個部分。
1.1 視頻文件存取
要進行視頻文件的播放,首先需要對視頻文件進行方便地存儲和讀取。系統播放的MP4文件由XviD Codec在PC上對4:2:0的YUV文件壓縮得到。該MP4文件采用177×144分辨率的QCIF格式,25幀/s。在下載模式,可以通過JTAG接口將MP4文件寫入Flash存儲器中。在播放模式下,Nios II處理器將MP4文件從Flash存儲器中讀出,送入文件緩沖池中等待解碼器對其進行讀取并解碼。
1.2 視頻解碼器
視頻解碼器是系統的核心。如圖1所示,視頻解碼器由熵解碼器、反量化、反離散余弦變換、運動補償模塊和視頻幀緩存5個模塊組成。
解碼時,首先對輸入碼流進行熵解碼,然后根據幀的頭信息判斷幀的類型。對于每個宏塊,熵解碼后首先經過IQ,再經過IDCT變換得到空問域的值。對于參考幀(R_ Frame),由于不需要進行運動補償,變換后的結果直接輸出,同時還要將它存儲在視頻幀緩存中.留給后面的預測幀(P-Frame)做運動補償。對于預測幀,先通過熵解碼得到運動向量,根據運動向量搜索到相應的參考幀后,再將IDCT變換后的預測差值與之相加,合成最后的預測幀圖像。解碼后的預測幀同樣是一路輸出,一路存放于視頻幀緩存當中。
視頻解碼如果采用純軟件方式實現,運算量太大,難以滿足實時性要求。利用NiosII的自定義指令,將IQ、IDCT和MC這3個主要的計算密集型解碼單元用硬件邏輯方式實現,以硬件邏輯的復雜性換取解碼的實時性。
1.3 YUV-RGB變換器
解碼器解碼得到的YUV格式圖像不適合直接用于LCD顯示。要在LCD上顯示解碼得到的圖象必須將YUV格式的圖像轉換為RGB格式,兩者的轉換關系如下:
YUV到RGB格式的轉換是一個很占用CPU資源的過程。本系統以查表的方式,采用硬件邏輯實現該轉換。
1.4 LCD控制模塊
標準VGA LCD顯示模塊(640×480,@60 Hz)是一種逐行掃描設備。這種掃描是順序的,下一個掃描點能夠預知,從而可以將需要送出的像素信息排成一行,看作一個數據流(Streaming)。借助于NiosII的Avalon流模式外設的設計方法,可以實現一個Avalon流模式的LCD控制器。利用DMA控制器在流模式的LCD控制器和系統SDRAM之間建立一條DMA傳送通道,由硬件完成像素信息的讀取和送出。NiosII只需要操作SDRAM中的相應區域就可完成顯示圖像的更新。
2 系統設計結構
2.1 系統硬件結構
系統硬件結構如圖2所示。
為了達到25 fps的實時解碼速度,IDCT、IQ、MC和YUV-RGB轉換這4部分計算密集型的功能單元全部以用戶自定義指令的方式實現。
2.1.1 反量化
系數的二維數組QF[v][u]被反量化,產生重構的DCT系數。該過程的實質是以量化步長為倍數的乘法運算。
內部編碼塊DC系數的反量化過程不同于其他的AC系數。DC反量化系數由一個常數因子intra-dc與QF[0][0]相乘而得到。intra_dc與編碼精度有關,表1顯示的即為兩者對應關系。
評論