仿生,红外图像,可见光图像,图像融合 ," /> 仿生,红外图像,可见光图像,图像融合 ,"/> 基于仿生视觉机制的红外与可见光图像融合

吉林大学学报(信息科学版) ›› 2021, Vol. 39 ›› Issue (3): 276-281.

• • 上一篇    下一篇

基于仿生视觉机制的红外与可见光图像融合

陈 松, 王西泉, 陈俊彪   

  1. 中国兵器工业试验测试研究院 测试技术研究中心, 陕西 华阴 714200
  • 收稿日期:2021-01-15 出版日期:2021-05-24 发布日期:2021-05-25
  • 通讯作者: 王西泉(1983— ), 男, 山东菏泽人, 中国兵器工业试验测试研究 院工程师, 主要从事靶场测控总体技术、 雷达外弹道测试技术及遥测技术研究, (Tel)86-13991669481(E-mail)wxq_1003@126.com
  • 作者简介:陈松(1981— ), 男, 西安人, 中国兵器工业试验测试研究院副研究员, 主要从事武器外弹道光电测试技术研究, (Tel) 86-13892595702(E-mail)8708733@qq.com
  • 基金资助:
    国防科工局稳定支持经费基金资助项目

Infrared and Visible Image Fusion Based on Bionic Vision Imaging Mechanism

CHEN Song, WANG Xiquan, CHEN Junbiao   

  1. Test Technology Research Center, Norinco Group Testing and Research Institute, Huayin 714200, China
  • Received:2021-01-15 Online:2021-05-24 Published:2021-05-25

摘要: 为实现红外图像与可见光图像的融合, 设计了以响尾蛇的视觉成像机制为基础的红外图像与可见光图像 融合神经网络结构。 首先根据双模式细胞的 6 种响应模式, 得到红外和可见光图像的 6 种响应结果, 然后以视觉感受野数学模型为基础,将 6 种双模式细胞响应输入到由 ON 对抗系统和 OFF 对抗系统组成的双层网络结构中, 最后输出 R、G 和 B 3 个通道的映射值及伪彩色图像增强结果。 分别对 4 组经过配准的红外和可见光图像 进行融合, 将该方法融合结果与经典的 Waxman 方法融合结果进行了对比, 实验结果表明,所设计的网络结构得到的融合图像效果较好, 信息熵和平均梯度均优于经典的 Waxman 方法融合结果。

关键词: 仿生')">仿生, 红外图像')">红外图像, 可见光图像')">可见光图像, 图像融合 ')">图像融合

Abstract: In order to realize the fusion of infrared image and visible image, a neural network structure of infrared image and visible image fusion based on the visual imaging mechanism of rattlesnake is designed. Firstly, according to the six response modes of dual-mode cells, six response results of infrared and visible image are obtained. Then, based on the mathematical model of visual receptive field, the neural network structure of infrared image and visible image fusion is designed, and six kinds of dual-mode cell responses are input into a two-layer network structure composed of on countermeasure system and off countermeasure system. Finally, the mapping values of R, G and B channels and the pseudo color image enhancement results are output. Four groups of registered infrared and visible images are fused respectively. And the fusion results are compared with the classical Waxman method. The experimental results show that the fusion image effect of the designed network structure is better, and the information entropy and average gradient are better than the classical Waxman method.

Key words: bionics, infrared image, visible image, image fusion

中图分类号: 

  • TN911. 73