应用于稳像系统中的改进梯度光流法

赖丽君; 徐智勇; 张栩铫

doi:10.3788/IRLA201645.0428004

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

应用于稳像系统中的改进梯度光流法

赖丽君, 徐智勇, 张栩铫

文章导航 > 红外与激光工程 > 2016 > 45(4): 428004-0428004(7)

赖丽君, 徐智勇, 张栩铫. 应用于稳像系统中的改进梯度光流法[J]. 红外与激光工程, 2016, 45(4): 428004-0428004(7). doi: 10.3788/IRLA201645.0428004

引用本文:

赖丽君, 徐智勇, 张栩铫. 应用于稳像系统中的改进梯度光流法[J]. 红外与激光工程, 2016, 45(4): 428004-0428004(7). doi: 10.3788/IRLA201645.0428004

Lai Lijun, Xu Zhiyong, Zhang Xuyao. Improved gradient optical flow for digital image stabilization[J]. Infrared and Laser Engineering, 2016, 45(4): 428004-0428004(7). doi: 10.3788/IRLA201645.0428004

Citation:

Lai Lijun, Xu Zhiyong, Zhang Xuyao. Improved gradient optical flow for digital image stabilization[J]. Infrared and Laser Engineering, 2016, 45(4): 428004-0428004(7). doi: 10.3788/IRLA201645.0428004

应用于稳像系统中的改进梯度光流法

doi: 10.3788/IRLA201645.0428004

1.
中国科学院光电技术研究所,四川成都 610209

详细信息

作者简介:
赖丽君(1989-),女,硕士生,主要从事电子稳像技术方面的研究。Email:lailj864@163.com;徐智勇(1970-),男,研究员,硕士生导师,主要从事数字图像处理方面的研究。Email:xzy158@163.com

赖丽君(1989-),女,硕士生,主要从事电子稳像技术方面的研究。Email:lailj864@163.com;徐智勇(1970-),男,研究员,硕士生导师,主要从事数字图像处理方面的研究。Email:xzy158@163.com

中图分类号: TP391.4

Improved gradient optical flow for digital image stabilization

1.
Institute of Optics and Electronics,Chinese Academy of Sciences,Chengdu 610209,China

摘要: 由于传统的梯度光流法当运动不连续时运动场估计值与真实值有较大偏差,因而不能直接应用于稳像系统中。引入金字塔多分辨率分层技术对传统的梯度光流法进行改进。首先,在视频序列中选定细节丰富的区域作为计算区域;其次,利用结合金字塔多分辨率分层技术的光流法迭代求解相邻帧间的仿射参数;最后,采用帧间补偿方式,并增加控制累积错误传播的措施,在不丢失过多原有信息基础上,实现了长时间稳像。实验表明:改进的方法能够检测出剧烈的复杂抖动,并能达到旋转精度小于0.09、平移精度小于0.07个像素,缩放精度小于0.02的高精度估计,且补偿序列平均峰值信噪比值提高了2.36 dB以上。
- 光流法 /
- 稳像 /
- 金字塔 /
- 仿射变换
Abstract: Traditional gradient optical flow has large motion estimation deviation with real value, thus cannot be directly applied to image stabilization system. In order to improve traditional gradient optical flow, a pyramid multi-resolution coarse-to-fine search strategy was incorporated into this algorithm. Firstly, computing area affine transform parameters were selected as the final transform parameters. Then, in the compensation period, error control propagation method was selected to obtain long term stabilized sequence. The experiment results show the improved method can detect severe complex jitter, and can achieve the rotating precision less than 0.09, translation precision less than 0.07, scaling precision less than 0.02, the compensation sequences' average PSNR raised 2.36 dB.
- optical flow /
- stabilized sequence /
- pyramid /
- affine transformation

[1]	Zhu Juanjuan, Fan Jing, Guo Baolong. Adaptive electronic image stabilization algorithm resistant to foreground moving object[J]. Acta Photonica Sinica, 2015, 44(6):45-52. (in Chinese)朱娟娟, 范静, 郭宝龙. 抗前景干扰的自适应电子稳像算法[J]. 光子学报, 2015, 44(6):45-52.
[2]	Wang Zhiming, Xu Xiaogang. A survey on electronic image stabilization[J]. Journal of Image and Graphics, 2010, 15(3):470-480. (in Chinese)王志民, 徐晓刚. 电子稳像技术综述[J]. 中国图像图形学报, 2010,15(3):470-480.
[3]	Liu K X, Qian J, Yang R K. Block matching algorithm based on RANSAC algorithm[C]//2010 International Conference on IASP, 2010:400-405.
[4]	Zhong Ping. Application of improved representative point match algorithm in electronic image stabilization[J]. Optical Technique, 2005, 31(5):742-745. (in Chinese)钟平. 一种改进的代表点匹配算法在稳像技术中的应用[J]. 光学技术, 2005, 31(5):742-745.
[5]	Sanjeev Kumar, Haleh Azartash, Mainak Biswas. Real-time affine global motion estimation using phase correlation and its application for digital image stabilization[J]. IEEE Transactions on Image Processing, 2011, 20(12):3406-3418.
[6]	Qi Hong, Ren Hong, Tian Shaoqing, et al. An improved electronic image stabilization method based on gray projection[J]. Acta Scientiarum Naturalium Universitatis Sunyatseni, 2012, 2(5):44-49. (in Chinese)齐红, 任红娥, 田少卿, 等. 一种基于灰度投影的改进电子稳像方法[J]. 中山大学学报(自然科学版), 2012, 2(5):44-49.
[7]	Battiato S, Gallo G, Puglisi G, et al. SIFT features tracking for video stabilization[C]//IEEE International Conference on Image Analysis and Processing, 2007:825-830.
[8]	Lee K-Y, Yu Y, Chuang B-Y, et al. Video stabilization using robust feature trajectories[C]//IEEE 12th International Conference on Computer Vision, 2009:1394-1404.
[9]	Zhou Yajun, Tao Shengxiang, Zhang shu, et al. Image stabilization algorithm based on Harris[J]. Laser Infrared, 2009, 39(5):555-557. (in Chinese)周亚军, 陶声祥, 张舒, 等. 一种基于Harris角点特征的稳像算法[J]. 激光与红外, 2009, 39(5):555-557.
[10]	Chen Xiaolu, Dai Ming, Ge Ming, et al. Fast smoothing point-feature trajectories for digital image stabilization[J]. Infrared and Laser Engineering, 2014, 43(6):1988-1993. (in Chinese)陈晓露, 戴明, 葛明, 等. 快速平滑特征轨迹电子稳像[J]. 红外与激光工程, 2014, 43(6):1988-1993.
[11]	Nishizaka Y, Yamaguchi T, Harada H. Optical flow estimation using compensation method[C]//ICCAS-SICE, Fukuoka, 2009:2680-2684.
[12]	Chang Huangchang, Lai Shanghong, Lu Kuangrong. A robust real time video stabilization algorithm[C]//J vis Commun,ImageR-17, 2006:659-673.
[13]	Horn B K P, Schunck B G. Determining optical flow[J]. Artificial Intelligence, 1981, 17(13):185-203.

[1]	谌成渝, 龚志诚, 毛添华, 袁泉, 李勇, 付号. 腔光力系统中声子的朗道-芝诺-斯塔博格干涉（特邀） . 红外与激光工程, 2021, 50(11): 20210521-1-20210521-6. doi: 10.3788/IRLA20210521
[2]	尹丽华, 杭娟, 康亮, 刘士建. 基于联合相机路径的红外视频稳像算法 . 红外与激光工程, 2021, 50(6): 20200405-1-20200405-11. doi: 10.3788/IRLA20200405
[3]	李冬冬, 吕迪, 韩冬冬, 梁猛, 佘江波. 光微流控可调谐渐变折射率透镜特性研究 . 红外与激光工程, 2020, 49(1): 0116002-0116002(6). doi: 10.3788/IRLA202049.0116002
[4]	张伟明, 史泽林, 马德鹏. 气流扰动下光电系统高精度稳像控制方法 . 红外与激光工程, 2019, 48(10): 1013008-1013008(8). doi: 10.3788/IRLA201948.1013008
[5]	焦安波, 邵立云, 李晨曦, 马俊凯, 王学娟, 罗海波. 基于直线组仿射不变特征的自动目标识别算法 . 红外与激光工程, 2019, 48(S2): 142-148. doi: 10.3788/IRLA201948.S226003
[6]	崔光茫, 张克奇, 徐之海, 冯华君, 赵巨峰. 基于仿射重建和噪声散点直方图的图像噪声水平估计 . 红外与激光工程, 2018, 47(S1): 182-188. doi: 10.3788/IRLA201847.S126002
[7]	尹丽华, 李范鸣, 刘士建. 基于区域分割与融合的全景稳像算法 . 红外与激光工程, 2018, 47(9): 926004-0926004(10). doi: 10.3788/IRLA201847.0926004
[8]	谢冰, 段哲民, 马鹏阁, 陈宇. 动态金字塔模型的红外图像SR重建 . 红外与激光工程, 2018, 47(1): 126001-0126001(6). doi: 10.3788/IRLA201847.0126001
[9]	黄卓, 陈凤东, 刘国栋, 魏富鹏, 彭志涛, 唐军, 刘楠. 连接向量特征匹配的暗场图像配准方法 . 红外与激光工程, 2018, 47(11): 1126005-1126005(6). doi: 10.3788/IRLA201847.1126005
[10]	邱兆文, 宋利权, 张炳通. 四反射镜结构极坐标红外惯性稳像平台像旋研究 . 红外与激光工程, 2017, 46(12): 1217004-1217004(6). doi: 10.3788/IRLA201746.1217004
[11]	黄楠楠, 刘贵喜, 张音哲, 姚李阳. 无人机视觉导航算法 . 红外与激光工程, 2016, 45(7): 726005-0726005(9). doi: 10.3788/IRLA201645.0726005
[12]	赵军丽, 吴易明, 高立民, 张恒, 尹逊龙, 姚震. 旋转双光楔系统用于像移补偿的技术研究 . 红外与激光工程, 2015, 44(5): 1506-1511.
[13]	崔雄文, 吴钦章, 蒋平, 周进. 子空间模型下的仿射不变目标跟踪 . 红外与激光工程, 2015, 44(2): 769-774.
[14]	陈晓露, 戴明, 葛明, 郎小龙. 快速平滑点特征轨迹电子稳像 . 红外与激光工程, 2014, 43(6): 1988-1993.
[15]	傅剑宇, 陈大鹏, 王国胤, 吴迪. 锥形与金字塔形场发射尖端电学特性分析 . 红外与激光工程, 2014, 43(7): 2277-2282.
[16]	徐富元, 顾国华, 陈钱, 王长江, 杨蔚. 转动红外探测器下地面远距离运动目标检测方法 . 红外与激光工程, 2014, 43(4): 1080-1086.
[17]	杨晟, 李学军, 朱诗兵, 刘涛. 抗仿射形变异构金字塔复合描述点特征匹配算法 . 红外与激光工程, 2014, 43(7): 2387-2392.
[18]	王国刚, 史洪岩, 汪滢, 袁德成. 仿射不变子空间特征及其在图像匹配中的应用 . 红外与激光工程, 2014, 43(2): 659-664.
[19]	胡姝玲, 耿伟彪, 苑丹丹, 刘宏海, 马静. 相位调制光外差稳频信号检测技术 . 红外与激光工程, 2013, 42(1): 233-238.
[20]	杨新锋, 滕书华, 夏东. 基于空间变换迭代的SIFT特征图像匹配算法 . 红外与激光工程, 2013, 42(12): 3496-3501.

点击查看大图

计量

文章访问数: 397
HTML全文浏览量: 35
PDF下载量: 166
被引次数: 0

应用于稳像系统中的改进梯度光流法

doi: 10.3788/IRLA201645.0428004

1. 中国科学院光电技术研究所,四川成都 610209

作者简介:
赖丽君(1989-),女,硕士生,主要从事电子稳像技术方面的研究。Email:lailj864@163.com;徐智勇(1970-),男,研究员,硕士生导师,主要从事数字图像处理方面的研究。Email:xzy158@163.com

赖丽君(1989-),女,硕士生,主要从事电子稳像技术方面的研究。Email:lailj864@163.com;徐智勇(1970-),男,研究员,硕士生导师,主要从事数字图像处理方面的研究。Email:xzy158@163.com

收稿日期: 2015-08-11
修回日期: 2015-09-20
刊出日期: 2016-04-25

中图分类号: TP391.4

关键词:

光流法 /
稳像 /
金字塔 /
仿射变换

摘要: 由于传统的梯度光流法当运动不连续时运动场估计值与真实值有较大偏差,因而不能直接应用于稳像系统中。引入金字塔多分辨率分层技术对传统的梯度光流法进行改进。首先,在视频序列中选定细节丰富的区域作为计算区域;其次,利用结合金字塔多分辨率分层技术的光流法迭代求解相邻帧间的仿射参数;最后,采用帧间补偿方式,并增加控制累积错误传播的措施,在不丢失过多原有信息基础上,实现了长时间稳像。实验表明:改进的方法能够检测出剧烈的复杂抖动,并能达到旋转精度小于0.09、平移精度小于0.07个像素,缩放精度小于0.02的高精度估计,且补偿序列平均峰值信噪比值提高了2.36 dB以上。