基于TMS320DM642的X264视频编码器的优化*

李青华 ，于峰崎

（1.中国科学院深圳先进技术研究院 香港中文大学 集成电子中心，广东 深圳 518055；2.中国科学院微电子研究所，北京 100029）

1 引言

在数字视频应用方案中，视频编码器是核心，其中编码器的硬件运算能力是系统实时性的保证，而视频压缩标准的高压缩比为编码器适应各种传输带宽信道提供了必要的保障。视频编码工程X264是一款开源的、按照H.264标准在PC平台开发的视频编码器，如果直接移植到 TMS320DM642（以下简称 DM642）平台[1-3]，则实际的编码速度一般低于视频应用方案所需要的实时性要求。为了提高编码工程的编码速度，需要对移植到DM642平台的X264进行优化，整个优化的流程如图1所示。

2 DM642硬件介绍

DM642采用TI开发的第二代高性能先进VelociTI技术的VLIW架构VelociTI1.2，在主频600 MHz下处理速度达到4 800 MI/s（兆指令/秒）。DM642 CPU核内部具有64个32位通用寄存器和8个独立的32位运算单元（2个乘法器和6个算数逻辑单元），确保每个周期能够提供4个16位介质访问控制（Medium Access Control，MAC）。

DM642使用两级缓存L1和L2[4]。其中一级缓存L1包括一级程序缓存L1P和一级数据缓存L1D；二级缓存L2可配置为片内存储器、高速缓存或两者结合。外设包括[4-6]：3个可配置的视频端口；1个10/100 Mbit/s的以太网控制器（EMAC）；1个管理数据输入输出（MDIO）；1 个 内 插 VCXO控制接口；1个 McASP0；1个 I2C 总线；2 个 McBSPs；3 个32位通用定时器；1个用户配置的16位或32位主机接口（HPI16/HPI32）；1个 PCI；1个 16引脚的通用输入输出口（GP0），具有可编程中断/事件产生模式；1个64位IMI-FA，可以与同步和异步存储器的外围设备相连。

图1 优化流程图

DM642与传统的DSP一样，采用哈佛结构[7-8]，即把数据与程序分开存放于不同的存储区内，保证在DSP的实际工作中，从程序存储区取指令与从数据存储区取运算数据是互相独立的，另外在CPU内部设计了8个不同的处理单元，可使在运行过程中，CPU是按照流水线流程进行操作的。

3 DM642平台优化方案介绍

3.1 算法和系统程序结构的优化

系统结构优化主要是合理安排程序中各个模块在DSP的存储区间中所放的位置，也就是解决存储区间的映射问题；在数据处理方面，尽量减少待处理数据的无谓搬移。算法优化主要体现在分析算法有没有更好更简单的替代方法，算法是否有某种对称性，可否采用更合适的数据结构等。在X264的优化中，首先考虑系统结构的合理安排，譬如程序到内存映射方面，首先利用CCS的CODE_SECTION[9]伪指令把X264中的9个大的模块，依次映射到9个大的子区间里面，把频繁使用到的DCT/IDCT模块、QUANT/DEQUANT模块、SAD/SATD模块放到DM642的片内存储区（L2 SRAM）中，把其他模块映射到片外存储区中。在数据访问方面，考虑到X264编码分别为编码帧和帧间预测时的参考帧分配了存储空间，在移植的过程中，存在着编码帧和参考帧的存放位置问题。从访问速度来看，片内存储区的访问速度要远远高于片外存储区的速度，但片内存储区的空间却要远远小于片外存储区，这样出现了访问速度与有限空间之间矛盾。考虑到实际编码流程中，编码的基本单元是16×16的亮度宏块加上2个8×8的色度模块，这里用CCS的DATA_SECTION[9]伪指令在DM642的片内存储区（L2 SRAM）中申请 2 个大小为（16×16+8×8+8×8）的存储区，来存放编码像素值；用DATA_SECTION伪指令在片内存储区内申请一些空间，临时存储编码过程中编码宏块的帧内预测模式信息、帧间预测运动矢量信息以及离散余弦变换系数和量化系数；最后，为了运动估计和帧内预测参考，给参考宏块分配一定存储空间。而整个当前编码帧和运动估计参考帧则放在DM642映射的片外存储区。

3.2 EDMA和乒乓缓存的优化

EDMA（Enhanced Direct Memory Access）是增强型直接内存访问的英文缩写。DMA技术指的是在嵌入式处理平台或者大型计算平台上，外设与外设之间、外设与存储器之间、存储器与存储器之间可以在不需要CPU干预的情况下，进行数据搬移和访问。这样可以保证CPU在对一组数据进行运算时，存储器把即将要处理的新的实验数据准备好，减少CPU等待时间，特别是在一些需要进行大量数据搬移的情况下，能够显著提高系统的运算速度。DM642具备64个EDMA物理传输信道，能够保证数据在极短时间内，在DM642外设的缓存区间和DM642存储器之间进行搬移。DM642的EDMA[10]主要有3种启动模式：CPU启动，同步事件启动，外部事件启动。CPU启动指的是CPU通过调用EDMA的应用程序接口（Application Programming Interface，API） 去启动预先设置好的EDMA搬移任务。同步事件启动一般指的是一个EDMA信道完成了搬移任务，会产生激发信号，从而激发其他的EDMA信道开始数据搬移。外部事件启动一般指的是DSP的外设完成与外界的数据交换后，激发EDMA信道进行数据搬移。

在对X264进行EDMA优化中，采用双buffer机制，也就是俗称的乒乓缓存（ping-pong buffer）机制。具体操作代码示例为：

示例中，除了数据搬移中必需的数据存放源地址和目的地址之外，还定义了变量 Ping_Pong和DAT_ID。其中Ping_Pong是一个标志变量，用来表示当前存放搬移数据的目的存储区是Ping存储区还是Pong存储区，DAT_ID是正在进行的EDMA搬移的句柄变量。在进入正式的编码循环体以前，EDMA会事先把一个要编码的宏块像素值搬移到Ping存储区（假设Ping_Pong=0表示Ping存储区）。进入循环体以后，首先进行目标存储区的交替（Ping_Pong=1-Ping_Pong，此时 Ping_Pong=1，表示 Pong存储区），接着等待前一次搬移是否完成（DAT_wait（DAT_ID）），如果前一次搬移完成，就可以立即开始下一次搬移，同时CPU立即进行对本次搬移数据的处理。以后的操作类似，直至所有的宏块都完成编码，结束循环体。

3.3 循环体的优化

在X264视频编码器中，循环体出现的频率比较高，而且往往循环体是在整个编码器中比较占用时间的部分。尤其是当出现循环体嵌套，或者循环体内部存在逻辑判断语句或者函数调用时，编译器一般不会对该循环进行优化。针对这些问题，比较常用的方法有嵌套循环体内部循环展开，用条件操作符代替逻辑判断语句，使用内联函数[11-12]，使用MUST_ITERATE伪指令操作符[11-12]，将大循环体拆成几个小循环体。笔者使用的循环体优化的例子代码为：

在上面示例中，伪指令MUST_ITERATE主要是告诉编码器，本次循环总共要执行396次，这样编译器就可以进行软件流水来优化这个循环。

3.4 编译器优化选项

在完成上述的手工优化后，接下来通过设置编译器选项来使用编译器优化，本文采用的编译器优化选项[11-14]有：-pm（在程序级别进行优化），-o3（对文件级别进行最强的优化），-op3（速度最重要），-ml3（缺省情况下将全部数据和函数作为far型）。

3.5 DSP汇编优化

假如使用上述优化策略对编码工程进行优化后，编码器的速度还不能达到应用要求，就需要编写手工汇编程序。编写手工汇编程序之前，首先要用CCS的profile工具对编码工程进行剖析，找出比较耗时或频繁调用的函数部分，把这些部分改写成汇编函数。

DSP采用的是哈佛体系结构，将数据和程序分开存放。大体上来说，编写汇编语言函数主要步骤为：把操作数从内存中取出来放到CPU的寄存器中，然后在CPU内部用不同的运算单元对寄存器里的操作数进行运算，最后把运算的结果存到内存中。其中，函数参数传递、函数返回值寄存器、条件寄存器、栈指针寄存器的保存都必须按照规定使用相应的寄存器，否则会出现错误。

在编写汇编语言的过程中要考虑下方面：1）充分理解待编写的函数的逻辑功能。只有真正理解了函数实现的功能和具体的数据流程图，才能使汇编语言的构架比较高效；2）数据结构的选择和安排。由于DM642允许数据打包处理，即一条指令可以同时对几个字节进行操作，这对于图像和视频处理非常有益，所以能够打包处理的就尽可能打包处理；3） 寄存器的分配和指令的先后顺序。DM642的CPU有2套完全对称的运算单元和寄存器。只要把操作数分别存、取到隶属于不同套的寄存器里面，采用不同的运算单元，合理安排指令的先后顺序，保证在资源不冲突的条件下尽量在一个周期内安排更多的指令，实现指令运行的高效性、并行性。

下面举一个SAD_4×4的例子来说明上述各项是如何实现的。SAD_4×4的C语言版本的代码为：

完成汇编指令的编写后，进行汇编语言的调试。由于X264工程比较大，如果直接在工程中调试，难度较大，所以在调试过程中建立一个小工程，从文件中读出一段数据来测试汇编语言功能的正确性。具体的步骤是：采用单步调试的同时，开启调试器CCS里面的view memory和view core registers选项来观察相应的memory和寄存器里面的值是否按照逻辑设计进行改变。如果结果不对，则考虑是否错误地使用了寄存器，或者是没有等待足够多的延时周期，或者是出于软件流水的目的错误地安排了指令的顺序，直到找出错误的地方。

4 小结

笔者首先分析了从PC平台移植到DSP平台后的X264编码工程，其编码速率低，满足不了视频压缩实时性要求。接着从提高编码器的编码速度角度出发，对编码工程进行了优化，介绍了在实际中用到的几种DSP平台优化方法：算法与程序系统结构的优化，EDMA与乒乓缓存优化，循环体的优化，编译器优化和DSP汇编。对CIF格式图像采用BASE_LINE进行编码，优化前X264编码速度约为 5～8 f/s（帧/秒），优化后的编码速度为 20 f/s左右，速度得到明显提升，基本能够实现实时编码。?

[1] TI Company.TMS320DM642 video/imaging fixed-point digital signal processor[EB/OL].(2002-08-05).[2010-03-20].http：//focus.ti.com/lit/ds/sprs200m/sprs200m.pdf.

[2] TI Company.TMS320C6000 technical brief （Rev.D）[EB/OL].（1999-04-08）.[2010-03-20].http：//focus.ti.com/docs/prod/folders/print/tms320dm642.html.

[3] TI Company.TMS320DM642 technical overview[EB/OL].（2002-08-02）.[2010-03-20].http：//focus.ti.com/general/docs/litabsmultiplefilelist.tsp?literatureNumber=spmu045.

[4] TI Company.TMS320C64x DSP two-level internal memory reference guide[EB/OL].（2004-09-02）.[2010-03-20].http：//focus.ti.com/general/docs/litabsmultiplefilelist.tsp?literatureNumber=spru609b.

[5] TI Company.TMS320DM642 data sheet （Rev.G）[EB/OL].(2004-08-20).[2010-03-20].http：//www.docin.com/p-13851805.html.

[6] TI Company.TMS320C6000 peripherals reference guide[EB/OL].（2001-09-20）.[2010-03-20].http：//focus.ti.com/dsp/docs/litabsmultiplefilelist.tsp?sectionId=3&tabId=409&literatureNumber=spru190q&docCategoryId=6&familyId=132.

[7] TI Company.TMS320C6000 CPU and instruction set reference guide[EB/OL].（2000-06-20）.[2010-03-20].http：//focus.ti.com/dsp/docs/litabsmultiplefilelist.tsp?sectionId=3&tabId=409&literatureNumber=spru189g&docCategoryId=6&familyId=132.

[8] 张雄伟.DSP芯片的原理与开发应用[M].3版.北京：电子工业出版社，2003.

[9]彭启宗，管庆.DSP集成开发环境——CCS及DSP/BIOS的原理与应用[M].北京：电子工业出版社，2004.

[10] TI Company.TMS320C6000 enhanced direct memory access controller reference guide[EB/OL].（2004-03-10）.[2010-03-20].http：//focus.ti.com/dsp/docs/litabsmultiplefilelist.tsp?sectionId=3&tabId=409&literatureNumber=spru234c&docCategoryId=6&familyId=132.

[11] TI Company.TMS320C6000 programmer′s guide[EB/OL].（2003-06-02）.[2010-03-20].http：//focus.ti.com/lit/ug/spru198j/spru198j.pdf.

[12] TI Company.TMS320C6000 optimizing C compiler tutorial[EB/OL].（2003-06-02）.[2010-03-20].http：//focus.ti.com/lit/ug/spru187q/spru187q.pdf.

[13] 孙伟，郭宝龙，武晓玥，等.DSP视频存储关键技术研究及实现[J].电视技术，2009，33（6）：30-32.

[14] 梁伟伟，李玉山，刘洋.基于TMS320DM642的视频编码器的存储存取优化[J].电视技术，2009，33（6）：33-35.