基于可变码长的音视频同步编码改进算法

doi:10.11772/j.issn.1001-9081.2014.05.1467

计算机应用 ›› 2014, Vol. 34 ›› Issue (5): 1467-1472.DOI: 10.11772/j.issn.1001-9081.2014.05.1467

基于可变码长的音视频同步编码改进算法

曾碧,林健浩,肖红,何元烈

广东工业大学计算机学院，广州 510006

收稿日期:2013-11-06 修回日期:2013-12-25 发布日期:2014-05-30 出版日期:2014-05-01
通讯作者: 林健浩
作者简介:曾碧(1963-)，女，广东梅州人，教授，博士研究生，CCF高级会员，主要研究方向：嵌入式系统与智能技术、信息物理融合系统；林健浩(1988-)，男，广东潮州人，硕士研究生，主要研究方向：嵌入式系统与智能技术；肖红(1972-)，女，湖北咸宁人，博士研究生，主要研究方向：移动计算、物联网；何元烈(1976-)，男，广东江门人，博士研究生，主要研究方向：计算机视觉、机器人、嵌入式系统。
基金资助:
广州市科技计划项目

Improved algorithm of audio-video synchronization coding based on variable code length

ZENG Bi,LIN Jianhao,XIAO Hong,HE Yuanlie

Faculty of Computer, Guangdong University of Technology, Guangzhou Guangdong 510006, China

Received:2013-11-06 Revised:2013-12-25 Online:2014-05-30 Published:2014-05-01
Contact: LIN Jianhao

摘要/Abstract

摘要：

针对音视频同步的问题提出一种基于H.264帧间预测的音视频同步编码的改进算法。该算法引入可变码长的概念，将音频编码数据分为若干码组，每个码组为2或3比特的待嵌入数据。在H.264的帧间预测环节，可变尺寸块与码组之间根据公式确定映射关系。根据待嵌入数据来动态决定宏块分割模式的编码方式，以及根据映射关系提取数据的解码方法，使用4×4宏块分割模式表示嵌入数据的结束。实验结果表明，该算法使视频采集样本的峰值信噪比(PSNR)下降了0.031dB，码率变化率为5.16%，产生1.97%的嵌入开销，但是所嵌入的音频编码数据可以正确完整地提取。因此该算法能够在增加数据嵌入容量、保持视频质量、保证数据正确性和完整性的基础上实现音视频同步编码。

Abstract:

To solve the synchronization problem of audio and video, an improved algorithm of audio-video synchronization coding based on H.264 inter-frame prediction was proposed. The algorithm introduced the concept of variable code length. The audio encoding data was divided into several code groups, and each code group had 2 or 3 bits of embedded data. In the stage of H.264 inter-frame prediction, the mappings between various variable size blocks and the data of code groups were based on formula. The coding method was dynamically determined for the macro block modes coding according to embedded data, and a proposed decoding method could extract the corresponding data according to the mapping relationship. Finally, the 4×4 macro block mode was used to indicate the end of the audio data.The experimental results show that the proposed algorithm enables the Peak Signal-to-Noise Ratio (PSNR) of video samples to reduce by 0.031dB, the bit rate to increase by 5.16% and the overhead to increase by 1.97%, but the embedded audio data can be correctly and completely extracted. Therefore,the algorithm can implement the synchronization of audio and video coding while increasing the data embedding capacity, maintaining the quality of video, ensuring the correctness and completeness of the data.

中图分类号:

TP391

曾碧林健浩肖红何元烈. 基于可变码长的音视频同步编码改进算法[J]. 计算机应用, 2014, 34(5): 1467-1472.

ZENG Bi LIN Jianhao XIAO Hong HE Yuanlie. Improved algorithm of audio-video synchronization coding based on variable code length[J]. Journal of Computer Applications, 2014, 34(5): 1467-1472.

参考文献

［1］YIN Q, WANG H, ZHAO Y. An information hiding algorithm based on intra-prediction modes for H.264 video stream ［J］. Journal of Optoelectronics·Laser, 2012,23(11):2194-2199.(尹秋来,王宏霞,赵杨.一种基于预测模式的H.264视频信息隐藏算法［J］.光电子·激光,2012,23(11):2194-2199.)［2］XU D, WANG R. An improved information hiding algorithm with prediction mode modulating for H.264/AVC ［J］. Opto-Electronic Engineering, 2011,38(11):93-99.(徐达文,王让定.一种基于预测模式的H.264/AVC视频信息隐藏改进算法［J］.光电工程,2011,38(11):93-99.)
［3］ZHENG J, TANG J, GUO L. H.264/AVC compressed domain data hiding algorithm based on fast recoding ［J］. Journal of University of Science and Technology of China, 2013,43(1): 35-41.(郑建峰,唐建,郭立.一种基于快速重编码的H.264/AVC压缩域信息隐藏方案［J］.中国科学技术大学学报,2013,43(1):35-41.)
［4］ZHANG J. Research on key technology of video information hiding ［D］. Hefei: University of Science and Technology of China, 2011.(张家骥.视频图像中信息隐藏的关键技术研究［D］.合肥:中国科学技术大学,2011.)
［5］HU Y, ZHANG C, SU Y. Information hiding for H.264/AVC ［J］. Acta Electronica Sinica, 2008,36(4):690-694.(胡洋,张春田,苏育挺.基于H.264/AVC的视频信息隐藏算法［J］.电子学报,2008,36(4):690-694.)
［6］XIAO C, WANG S, SI W. High bitrate information hiding technique for video in video ［J］. Journal of Beijing Polytechnic University, 2011,37(8):1249-1254.(肖创柏,王首道,司薇.高比特率信息隐藏技术的视频嵌入视频方案［J］.北京工业大学学报,2011,37(8):1249-1254.)
［7］LI X, CHEN H, CHEN M, et al. Audio-video synchronous coding based on motion estimation in H.264 ［J］.Journal of Jilin University: Engineering and Technology Edition, 2012,42(5): 1321-1326.(李晓妮,陈贺新,陈绵书,等.基于H.264运动估计的音视频同步编码技术［J］.吉林大学学报:工学版,2012,42(5):1321-1326.)
［8］QI X, CHEN M, CHEN H. A CAVLC embedded method for audio-video synchronization coding based on H.264 ［C］// Proceedings of the 2011 International Conference on Multimedia Technology. Piscataway:IEEE Press, 2011:16-19.
［9］LIU T. Research on audio-video synchronization coding based on inter prediction blocks of varying size for H.264 ［D］. Changchun: Jilin University, 2011.(刘添.基于H.264可变尺寸帧间预测的音视频同步算法研究［D］.长春:吉林大学,2011.)
［10］KAPOTAS S K, VARSAKI E E, SKODRAS A N. Data hiding in H.264 encoded video sequences ［C］// Proceedings of the 2007 IEEE 9th Workshop on Multimedia Signal Processing. Piscataway: IEEE Press, 2007:373-376.
［11］XUAN M, JIANG J. H.264 information hiding algorithm with high capacity based on variable length group structure ［J］. Journal of Circuits and Systems, 2012,17(6):42-48.(宣曼,蒋建国.基于变长分组结构的H.264大容量信息隐藏算法［J］.电路与系统学报,2012,17(6):42-48.)
［12］LI X, CHEN H, SUN Y, et al. Embedded audio-video synchronization coding based on H.264 ［J］. Journal of Jilin University: Engineering and Technology Edition, 2011,41(5):1475-1479.(李晓妮,陈贺新,孙元,等.基于H.264的嵌入式音视频同步编码技术［J］.吉林大学学报:工学版,2011,41(5):1475-1479.)
［13］AGGARWAL S, JINDAL A. Comprehensive overview of various lip synchronization techniques ［C］// Proceedings of the 2008 IEEE International Symposium on Biometrics and Security Technologies. Piscataway:IEEE Press, 2008:1-6.
［14］ZHANG J, LI Y, WEI Y. Using timestamp to realize audio-video synchronization in real-time streaming media transmission ［C］// Proceedings of the 2008 International Conference on Audio, Language and Image Processing. Piscataway: IEEE Press, 2008:1073-1076.
［15］EL-HELALY M, AMER A. Synchronization of processed audio-video signals using time-stamps ［C］// Proceedings of the 2007 IEEE International Conference on Image Processing. Piscataway: IEEE Press, 2007,6:193-196.
［16］RADHAKRISHNAN R, TERRY K, BAUER C. Audio and video signatures for synchronization ［C］// Proceedings of the 2008 IEEE International Conference on Multimedia and Expo. Piscataway: IEEE Press, 2008:1549 -1552.

[1]	张佳慧李晓明张嘉祥. 强化形态感知的路面缺陷检测算法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[2]	杨建锋陈斌李雨轩. 基于点云重构的自监督点云异常检测方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[3]	薛振华李强黄超. 视觉大模型驱动的像素级图像异常检测模型[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[4]	蒋畅江向杰何旭颖. 面向机械臂抓取的双目视觉目标定位算法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[5]	边小勇胡其仁袁培洋. 多注意力对比学习的红外小目标检测[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[6]	李钟华钟庚辛范萍朱恒亮. 通过边界挖掘和背景引导的伪装目标检测[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[7]	吴松霖张广朝姚远彭博. 基于判别区域引导的多视图困难气道识别[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[8]	李强白少雄熊源袁薇. 基于视觉大模型隐私保护的监控图像定位[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[9]	薛雅丽徐忠敏刘世豪. 基于多级小波残差网络的重力数据去噪方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[10]	况世雄姚俊波陆佳炜王琪冰肖刚. 基于动态图卷积网络的电梯乘客异常行为数据增强方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[11]	康斌陈斌王俊杰李昱林赵军智咸伟志. 基于多粒度共享语义中心关联的文本到人物检索方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[12]	张庆杨凡方宇涵. 基于多模态信息融合的中文拼写纠错算法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[13]	王昊王金伟程鑫张家伟吴昊罗向阳马宾. 彩色图像JPEG重压缩取证综述[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[14]	王磊胡节彭博. 用于半监督火灾检测的分布自适应和动态课程伪标签框架[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[15]	刘晋文王磊马博董瑞杨雅婷艾合塔木江·艾合麦提王欣乐. 基于弱监督模态语义增强的多模态有害信息检测方法 [J]. 《计算机应用》唯一官方网站, 0, (): 0-0.

基于可变码长的音视频同步编码改进算法

Improved algorithm of audio-video synchronization coding based on variable code length

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics