视频移动终端实时定点与缩放

doi:10.11772/j.issn.1001-9081.2014.07.2028

计算机应用 ›› 2014, Vol. 34 ›› Issue (7): 2028-2032.DOI: 10.11772/j.issn.1001-9081.2014.07.2028

视频移动终端实时定点与缩放

赖春雷,薛荷,周益民

电子科技大学计算机科学与工程学院, 成都 611731

收稿日期:2014-01-16 修回日期:2014-03-08 发布日期:2014-08-01 出版日期:2014-07-01
通讯作者: 周益民
作者简介:赖春雷(1992-)，男，广东信宜人，主要研究方向：视频图像处理；薛荷(1992-)，女，黑龙江大庆人，主要研究方向：数字图像处理；周益民(1980-)，男，四川邛崃人，副教授，博士，主要研究方向：数字图像处理。
基金资助:
国家自然科学基金资助项目;四川省科技厅科技支撑计划项目

Real-time image positioning and scaling for mobile video terminals

LAI Chunlei,XUE He,ZHOU Yimin

School of Computer Science and Engineering, University of Electronic Science and Technology of China, Chengdu Sichuan 611731, China

Received:2014-01-16 Revised:2014-03-08 Online:2014-08-01 Published:2014-07-01
Contact: ZHOU Yimin

摘要/Abstract

摘要：

针对在移动终端自由缩放查看视频细节的需求，提出移动终端的视频图像定点与缩放系统，包含手势识别与越界纠正技术，详细给出了系统框架和系统流程。手势识别给出了单指拖动和双指缩放的检测与坐标转换计算方法，而后对变换参数的取值进行越界纠正和边界限定。系统架构包含视频解码、画面绘制、同步交互，在系统流程及其实现中分别由三个线程并行承载以提高效率。测试结果分析表明，该系统在保留传统视频播放方式上加入了定点与缩放，在播放效率相比传统视频播放方式的损失平均仅占14%的同时，交互响应时间控制在6ms内，最大限度消除了交互引起的画面闪烁和跳帧。系统在资源有限的移动终端上实现了视频播放的实时定点与缩放，有广阔的应用前景，应用价值高。

Abstract:

An image positioning and scaling architecture for mobile video terminals was proposed for freely zooming and viewing video in detail. Then a gesture recognition processing approach was adopted in the architecture. Single-finger dragging and double-finger zooming detection were proposed for the gesture recognition. In addition, an approach to coordinates conversion calculation was proposed with boundary binding of coordinate transformation parameters using crossing boundary detection. Novel video display system was presented which consists of the video decoding, the image rendering and the interaction with synchronization. Finally these parts were concurrently implemented by three threads. The simulation results show that the proposed system obtains real-time image positioning and scaling while the traditional way of video playback is reserved. Interaction response time is controlled within 6ms to eliminate the screen flicker and skipping caused by interaction. Real-time image positioning and scaling of video playback for resources-limited mobile terminals will lead to a wide range of potential applications.

中图分类号:

赖春雷薛荷周益民. 视频移动终端实时定点与缩放[J]. 计算机应用, 2014, 34(7): 2028-2032.

LAI Chunlei XUE He ZHOU Yimin. Real-time image positioning and scaling for mobile video terminals[J]. Journal of Computer Applications, 2014, 34(7): 2028-2032.

参考文献

［1］ZHANG H, XU K. Natural user interaction design analysis based on habitual behavior［J］. Journal of Liaoning Institute of Technology: Social Science Edition, 2010, 12(5): 60-61.(张辉, 许坤. 用户习惯性行为下的自然交互设计分析［J］. 辽宁工业大学学报社会科学版, 2010, 12(5): 60-61.)
［2］QU X, LI A, LU Y. Analysis of mobile Internet users demand trend［J］. Mobile Communications, 2010(21): 68-71.(屈雪莲, 李安英, 陆音. 移动互联网用户需求趋势剖析［J］.移动通信, 2010(21): 68-71.)
［3］LI W. Overview of fine granularity scalability in MPEG-4 video standard［J］. IEEE Transactions on Circuits and Systems for Video Technology, 2001, 11(3): 301-317.
［4］SCHWARZ H, MARPE D, WIEGAND T. Overview of the scalable video coding extension of the H.264/AVC standard［J］. IEEE Transactions on Circuits and Systems for Video Technology, 2007, 17(9): 1103-1120.
［5］UGUR K, ANDERSSON K, FULDSETH A, et al. High performance, low complexity video coding and the emerging HEVC standard［J］. IEEE Transactions on Circuits and Systems for Video Technology, 2010, 20(12): 1688-1697.
［6］ZHOU Y, HOU M, TIAN L. Rate control scheme based on the intra prediction encoding mode: China, CN201110337754.2［P］, 2013-09-25.(周益民, 侯孟书, 田玲. 基于帧内预测编码模式的码率控制方法:中国， CN201110337754.2［P］, 2013-09-25.)
［7］ZHOU Y, TIAN L, SUN S. Frame complexity estimation for H.264/AVC rate control［J］. Computer Engineering and Applications, 2009, 45(26): 8-11.(周益民, 田玲, 孙世新.视频图像复杂度估计的H.264/AVC码率控制［J］.计算机工程与应用, 2009, 45(26): 8-11.)
［8］PARK S, LEE Y, LEE J, et al. Quality-adaptive requantization for low-energy MPEG-4 video decoding in mobile devices［J］. IEEE Transactions on Consumer Electronics, 2005, 51(3): 999-1005.
［9］KIMURA M, IWATA K, MOCHIZUKI S, et al. A full HD multistandard video codec for mobile applications［J］. IEEE Micro, 2009, 29(6): 18-27.
［10］HU C, REN P, LI W. FFMPEG multimedia system based on Android synchronous transmission algorithm［J］. Computer Technology and Development, 2011, 21(10): 85-87.(胡成, 任平安, 李文莉. 基于Android系统的FFMPEG多媒体同步传输算法研究［J］. 计算机技术与发展, 2011, 21(10): 85-87.)
［11］HU C, ZHOU T, TANG L. Research on cross-platform video codec based on FFMPEG［J］. Journal of Wuhan University of Technology, 2011, 33(11): 139-142.(胡聪, 周甜, 唐璐丹. 基于FFMPEG的跨平台视频编解码研究［J］. 武汉理工大学学报, 2011, 33(11): 139-142.)
［12］WANG H, TIAN P. An algorithm of audio-video synchronization based on Android［J］. Industrial Instrumentation and Automation, 2012(4): 23-26.(王辉, 田鹏辉. 一种基于Android的音视频同步算法设计［J］. 工业仪表与自动化装置, 2012(4): 23-26.)
［13］HE J. Research of the multimedia player in the new generation of the intelligent terminal［D］. Ningbo: Ningbo University, 2012.(何金.新一代智能终端多媒体播放平台的技术研究［D］.宁波: 宁波大学, 2012.)
［14］WANG D, ZHANG M, XIONG Z. Survey on multi-touch research［J］. Application Research of Computers, 2009, 26(7): 2404-2406.(王德鑫, 张茂军, 熊志辉 .多重触控技术研究综述［J］. 计算机应用研究, 2009, 26(7): 2404-2406.)
［15］WANG X, BAO H. Gesture recognition based on adaptive genetic algorithm［J］. Journal of Computer-Aided Design and Computer Graphics, 2007, 19(8): 1056-1062.(王修晖, 鲍虎军. 基于自适应遗传算法的手势识别［J］. 计算机辅助设计与图形学学报, 2007, 19(8): 1056-1062.)
［16］LI W, YAO Q, DENG C. Application of the BP neural network based on PSO in dynamic gesture recognition［J］. Computer Engineering and Science, 2011, 33(5): 74-79.(李文生, 姚琼, 邓春健. 粒子群优化神经网络在动态手势识别中的应用［J］. 计算机工程与科学, 2011, 33(5): 74-79.)
［17］TAN C, XIAO N. Static hand gesture recognition based on improved RCE neural network and RBF neural network［J］. Computer Engineering and Applications, 2011, 47(7): 172-176.(谭昶, 肖南峰. 基于改进RCE和RBF神经网络的静态手势识别［J］. 计算机工程与应用, 2011, 47(7): 172-176.)
［18］LI W, XIE M, DENG C. Dynamic multi-point gesture recognition based on machine vision［J］. Computer Engineering and Design, 2012, 33(5): 1988-1992.(李文生, 解梅, 邓春健. 基于机器视觉的动态多点手势识别方法［J］. 计算机工程与设计, 2012, 33(5): 1988-1992.)

[1]	侯阳张琼赵紫煊朱正宇张晓博. 基于YOLOv5s的复杂场景下高效烟火检测算法——YOLOv5s-MRD[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[2]	张奇业, 曾心蕊. 带高斯核的支持向量数据描述问题的高效积极集法[J]. 《计算机应用》唯一官方网站, 2024, 44(12): 3808-3814.
[3]	曹晓意罗煦琼李景贺恩锋. 改进人工势场法下的多无人机编队路径规划方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[4]	袁志超杨磊田井林魏晓威李康顺. 面向复杂约束多目标优化问题的双种群双阶段进化算法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[5]	冷琴, 毛政元. 考虑设施规模决策的两级选址-路径优化[J]. 《计算机应用》唯一官方网站, 2024, 44(11): 3513-3520.
[6]	彭庆媛, 王晓峰, 王军霞, 华盈盈, 唐傲, 何飞. 可满足性问题相变研究综述[J]. 《计算机应用》唯一官方网站, 2024, 44(11): 3503-3512.
[7]	孙仁科, 皇甫志宇, 陈虎, 李仲年, 许新征. 神经架构搜索综述[J]. 《计算机应用》唯一官方网站, 2024, 44(10): 2983-2994.
[8]	孙安泰, 刘烨, 徐冬梅. 多智能体系统的动态面渐近补偿算法[J]. 《计算机应用》唯一官方网站, 2024, 44(10): 3151-3157.
[9]	颜超英, 张紫仪, 曲映楠, 李秋禹, 郑地翔, 孙丽珺. 基于联盟链的双向拍卖碳交易[J]. 《计算机应用》唯一官方网站, 2024, 44(10): 3240-3245.
[10]	杨志龙邹德旋李灿邵莹莹马乐杰. 融入限制反向学习与柯西-高斯变异的蜣螂优化算法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[11]	姚光磊, 熊菊霞, 杨国武. 基于神经网络优化的花朵授粉算法[J]. 《计算机应用》唯一官方网站, 2024, 44(9): 2829-2837.
[12]	力尚龙, 刘建华, 贾鹤鸣. 融合多狩猎协调策略的爬行动物搜索算法[J]. 《计算机应用》唯一官方网站, 2024, 44(9): 2818-2828.
[13]	李焱, 潘大志, 郑思情. 多车场带时间窗车辆路径问题的改良自适应大邻域搜索算法[J]. 《计算机应用》唯一官方网站, 2024, 44(6): 1897-1904.
[14]	张倩婷胡丽莹陈黎飞. 时间序列的鲁棒形态表征方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.
[15]	胡林波倪志伟程家乐刘文涛朱旭辉. 基于融合社区检测的复杂协作众包任务分配方法[J]. 《计算机应用》唯一官方网站, 0, (): 0-0.

视频移动终端实时定点与缩放

Real-time image positioning and scaling for mobile video terminals

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics