吉林大学学报(工学版) ›› 2022, Vol. 52 ›› Issue (4): 916-924.doi: 10.13229/j.cnki.jdxbgxb20200896

• 计算机科学与技术 • 上一篇    

基于模板融合的超声医学影像全景拼接方法

贾海洋1,2(),夏睿1,吕安祺1,管噌璇1,陈娟1,2(),王雷3   

  1. 1.吉林大学 计算机科学与技术学院，长春 130012
    2.吉林大学 符号计算与知识工程教育部重点实验室，长春 130012
    3.吉林大学 白求恩第一医院，长春 130012
  • 收稿日期:2020-11-23 出版日期:2022-04-01 发布日期:2022-04-20
  • 通讯作者: 陈娟 E-mail:jiahy@jlu.edu.cn;chenjuan@jlu.edu.cn
  • 作者简介:贾海洋（1977-），男，副教授，博士.研究方向：人工智能，知识工程.E-mail：jiahy@jlu.edu.cn
  • 基金资助:
    国家自然科学基金项目(61502198);吉林省自然科学基金项目(20210101414JC);吉林省发展改革委创新能力建设（高技术产业部分）项目(2019C053-3)

Panoramic mosaic approach of ultrasound medical images based on template fusion

Hai-yang JIA1,2(),Rui XIA1,An-qi LYU1,Ceng-xuan GUAN1,Juan CHEN1,2(),Lei WANG3   

  1. 1.College of Computer Science and technology，Jilin University，Changchun 130012，China
    2.Key Laboratory for Symbolic Computation and Knowledge Engineering of Ministry of Education，Jilin University，Changchun 130012，China
    3.The First Hospital of Jilin University，Changchun 130012，China
  • Received:2020-11-23 Online:2022-04-01 Published:2022-04-20
  • Contact: Juan CHEN E-mail:jiahy@jlu.edu.cn;chenjuan@jlu.edu.cn

RICH HTML

 8   

PDF (PC)

224

摘要：

采用全景拼接技术将基于超声探测装置获得的局部图像通过拼接融合获得观察视野更大的医学影像，为临床诊断和医患交流提供更直观、全面的信息，但受成像条件影响，获得的局部超声医学图像精度不高、噪声多，传统全景拼接方法处理效果不理想。针对上述问题，本文提出基于改进的k-MEANS聚类算法的模板融合拼接方法进行超声医学影像拼接。与传统的模板拼接类算法相比，该方法将特征点密集区域自组织成尺寸灵活可变的模板，能够利用启发式窗口算法提高相邻图片匹配的速度。对比实验结果表明，该方法的模板探测速率、平均模板密度得到了提高，图像配准精度提高，具有较高的鲁棒性和实时性。

关键词: 超声影像, 融合拼接, 图像处理, 模板匹配

Abstract:

The panoramic mosaic technology can get a larger field of observation view， based on the partial medical images obtained by ultrasonic detection device. Through stitching and fusing， it can provide more intuitive and comprehensive information for clinical diagnosis and doctor-patient communication. However， due to the influence of objective factors such as low precision image and more noise caused by medical equipment， the results of traditional panoramic mosaic method are not ideal. To solve the problems above， a template fusion method based on improved k-MEANS clustering algorithm for ultrasonic medical image mosaic is proposed. Compared with the traditional template stitching algorithm， this method can self-organize the region with dense features into flexible template， and improve the speed of adjacent image matching by using heuristic window algorithm. The experimental results show that the template detection rate and average template density are improved， the image registration accuracy is improved， and the method has high robustness and real-time performance.

Key words: ultrasound image, fusion splicing, image processing, template matching

中图分类号: 

  • TP391.4

图1

超声图像拼接的流程图"

图2

Sobel算子示意图"

图3

图像特征点的提取效果"

图4

KD树图像上的结构呈现"

图5

KD树图像上的数据呈现"

图6

通过k?MEANS聚类获得的相邻两帧对比图"

图7

图像增长技术的融合效果"

图8

均值的融合效果"

图9

加权融合效果"

图10

对比实验1的结果"

图11

对比实验2结果"

图12

通过本文方法获得的一段完整血管拼接图像"

1 李义兵, 余大昆, 林家瑞, 等. 实时全景超声成像技术[J]. 医疗设备信息, 2005, 20(10): 39-40, 76.
Li Yi-bing, Yu Da-kun, Lin Jia-rui, et al. Panoramic ultrasound imaging[J]. Information of Medical Equipment, 2005, 20(10): 39-40, 76.
2 孙莹. 图像特征点提取与描述算法研究[J]. 信息安全与技术, 2016, 7(2): 18-21.
Sun Ying. Research on algorithm of image feature extraction and description[J]. Information Security and Technology, 2016, 7(2): 18-21.
3 孟祥菲. 基于二维超声图像的右心室运动轨迹跟踪[D]. 沈阳:东北大学中荷生物医学与信息工程学院, 2014.
Meng Xiang-fei. On the trajectory tracking of right ventricles using two-dimensional ulstrasound images[D]. Shenyang: Sino-Dutch Biomedical and Information Engineering School, Northeastern University, 2014.
4 颜焕欢, 张培镇, 王伊侬, 等. 肌骨超声图像特征检测及拼接[J]. 中国图象图形学报, 2020, 25(5): 1032-1042.
Yan Huan-huan, Zhang Pei-zhen, Wang Yi-nong, et al. Feature detection algorithm of musculoskeletal ultrasound image and its application of image stitching[J]. Journal of Image and Graphics, 2020, 25(5): 1032-1042.
5 裴红星, 刘金达, 葛佳隆, 等. 图像拼接技术综述[J]. 郑州大学学报: 理学版, 2019, 51(4): 1-10, 29.
Pei Hong-xing, Liu Jin-da, Ge Jia-long, et al. A review on image mosaicing techniques[J]. Journal of Zhengzhou University(Natural Science Edition), 2019, 51(4): 1-10, 29.
6 Lee Weng, Tirumalai Arun P. Method and apparatus for generating large compound ultrasound image[P]. United States Patent.
7 Lee Weng, Tirumalai Arun P. Method and apparatus for generating large compound ultrasound image[J]. Journal of the Acoustical Society of America, 1997, 101(6): 3239
8 杜亚军, 高上凯. 基于PC平台的扩展视野超声成像[J]. 中国医学影像技术, 2005, 21(8): 1281-1284.
Du Ya-jun, Gao Shang-kai. PC-based extended field-of-view ultrasound imaging[J]. Chinese Journal of Medical Imaging Technology, 2005, 21(8): 1281-1284.
9 邵斌, 唐娉, 曾庆业, 等. 基于PC的实时超声全景成像系统中的图像配准[J]. 计算机工程与应用, 2007, 43(28): 206-209.
Shao Bin, Tang Ping, Zeng Qing-ye, et al. Image registration in a PC-based real-time ultrasound panoramic imaging system[J]. Computer Engineering and Applications, 2007, 43(28): 206-209.
10 郑烁鹤. 基于PC的实时医学超声宽景成像技术研究[D]. 广州:华南理工大学电子与信息学院, 2011.
Zheng Shuo-he. Study on PC-based real-time extended-field-of-view ultrasound[D]. Guangzhou: School of Electronic and Information Engineering, South China University of Technology, 2011.
11 李锦, 王俊平, 万国挺, 等. 一种结合直方图均衡化和MSRCR的图像增强新算法[J]. 西安电子科技大学学报, 2014, 41(3): 103-109.
Li Jin, Wang Jun-ping, Wan Guo-ting, et al. Novel algorithm for image enhancement with histogram equlization and MSRCR[J]. Journal of Xidian University, 2014, 41(3): 103-109.
12 Ingber L. Simulated annealing: practice versus theory[J]. Mathematical and Computer Modelling, 1993, 18(11): 29-57.
13 王小平, 王建勇, 杨埙. 基于Sobel算子和改进SURF算法的图像拼接方法[J]. 电视技术, 2014, 38(13): 43-46.
Wang Xiao-ping, Wang Jian-yong, Yang Xun. Image stitching method based on Sobel operator and improved SURF algorithm[J]. Video Engineering, 2014, 38(13): 43-46.
14 马艳, 张治辉. 几种边缘检测算子的比较[J]. 工矿自动化, 2004, 31(1): 54-56.
Ma Yan, Zhang Zhi-hui. Comparison of several edge detection operators[J]. Industry and Mine Automation, 2004, 31(1): 54-56.
15 朱远平, 夏利民. 一种适用于图像拼接的自适应模板匹配算法[J]. 计算机工程与应用, 2003, 39(31): 109-111, 139.
Zhu Yuan-ping, Xia Li-min. A robust template matching algorithm for automatic image stitching[J]. Computer Engineering and Applications, 2003, 39(31): 109-111, 139.
16 吴夙慧, 成颖, 郑彦宁, 等. K-means算法研究综述[J]. 现代图书情报技术, 2011, 31(5): 28-35.
Wu Su-hui, Cheng Ying, Zheng Yan-ning, et al. Survey on K-means algorithm[J]. New Technology of Library and Information Service, 2011, 31(5): 28-35.
17 高亮, 谢健, 曹天泽. 基于Kd树改进的高效K-means聚类算法[J]. 计算技术与自动化, 2015, 34(4): 69-74.
Gao Liang, Xie Jian, Cao Tian-ze. An improved K-means clustering algorithm with high efficiency based on the Kd tree[J]. Computing Technology and Automation, 2015, 34(4): 69-74.
18 陈为龙, 郭黎. 一种基于膨胀的渐进渐出图像融合算法[J]. 计算机工程与科学, 2014, 36(7): 1347-1351.
Chen Wei-long, Guo Li. A novel fade-in-and-fade-out image fusion algorithm based on dilation[J]. Computer Engineering and Science, 2014, 36(7): 1347-1351.
[1] 王康,姚猛,李立犇,李建桥,邓湘金,邹猛,薛龙. 基于月面表取采样触月压痕的月壤力学状态分析[J]. 吉林大学学报(工学版), 2021, 51(3): 1146-1152.
[2] 李健,刘孔宇,任宪盛,熊琦,窦雪峰. 基于自适应阈值的Canny算法在MRI边缘检测中的应用[J]. 吉林大学学报(工学版), 2021, 51(2): 712-719.
[3] 刘富,刘璐,侯涛,刘云. 基于优化MSR的夜间道路图像增强方法[J]. 吉林大学学报(工学版), 2021, 51(1): 323-330.
[4] 刘哲, 徐涛, 宋余庆, 徐春艳. 基于NSCT变换和相似信息鲁棒主成分分析模型的图像融合技术[J]. 吉林大学学报(工学版), 2018, 48(5): 1614-1620.
[5] 车翔玖, 王利, 郭晓新. 基于多尺度特征融合的边界检测算法[J]. 吉林大学学报(工学版), 2018, 48(5): 1621-1628.
[6] 梁士利, 柴宗谦, 张玲, 吴颜生, 曹春雷. 基于偏X型细胞自动机的图像加密方法[J]. 吉林大学学报(工学版), 2017, 47(5): 1653-1660.
[7] 何光, 张铭, 袁双石. 微机电系统后坐保险机构温度相关动态特性[J]. 吉林大学学报(工学版), 2017, 47(1): 145-150.
[8] 李健, 李赫宇, 姚汝婧, 吴林. 基于均值滤波的改进 Canny 算法在核磁共振图像边缘检测中的应用[J]. 吉林大学学报(工学版), 2016, 46(5): 1704-1709.
[9] 肖钟捷. 基于小波空间特征谱熵的数字图像识别[J]. 吉林大学学报(工学版), 2015, 45(6): 1994-1998.
[10] 韩成, 张超, 秦贵和, 薛耀红, 杨帆, 范静涛, 刘文静. 大型正交多幕投影系统光辐射补偿算法[J]. 吉林大学学报(工学版), 2015, 45(4): 1266-1273.
[11] 张金果,郭海涛,吴君鹏,李依桐. 改进的最小交叉Tsallis熵的小目标声呐图像分割[J]. 吉林大学学报(工学版), 2014, 44(3): 834-839.
[12] 黄德天, 刘雪超, 吴志勇, 梁敏华. 基于CameraLink的高速图像采集处理系统设计[J]. 吉林大学学报(工学版), 2013, 43(增刊1): 309-312.
[13] 冯鑫, 王晓明, 党建武, 沈瑜. 基于插值Directionlet变换的图像融合方法[J]. 吉林大学学报(工学版), 2013, 43(04): 1127-1132.
[14] 谢志江, 吕波, 刘琴, 陈平. 旋转不变性图像模板匹配快速算法[J]. 吉林大学学报(工学版), 2013, 43(03): 711-717.
[15] 金立生, 咸化彩, 祖力, 孙玉芹, 侯海晶, 牛清宁. 小区民用车辆车牌自动识别算法[J]. 吉林大学学报(工学版), 2012, 42(增刊1): 166-169.
Viewed
Full text


Abstract

Cited
  Shared   
  Discussed   
No Suggested Reading articles found!
版权所有 © 《吉林大学学报(工学版)》编辑部
地址：长春市人民大街5988号　电话：+86-431-85095297　传真：+86-431-85094074　E-mail: xbgxb@jlu.edu.cn
本系统由北京玛格泰克科技发展有限公司设计开发