遥感图像,语义分割,聚类算法,卷积神经网络,自注意力
," /> 遥感图像,语义分割,聚类算法,卷积神经网络,自注意力
,"/> <span>NHNet——新型层次化遥感图像语义分割网络</span>

吉林大学学报(地球科学版) ›› 2024, Vol. 54 ›› Issue (5): 1764-1772.doi: 10.13278/j.cnki.jjuese.20230155

• 地球探测与信息技术 • 上一篇    

NHNet——新型层次化遥感图像语义分割网络

王威,熊艺舟,王新   

  1. 长沙理工大学计算机与通信工程学院,长沙410000
  • 出版日期:2024-09-26 发布日期:2024-10-12
  • 基金资助:
    湖南省重点研究开发项目(2020SK2134);湖南省自然科学基金项目(2022JJ30625)

NHNet: A Novel Hierarchical Semantic Segmentation Network for Remote Sensing Images

Wang Wei, Xiong Yizhou, Wang Xin   

  1. School of Computer and Communication Engineering, Changsha University of Science and Technology, Changsha 410000, China
  • Online:2024-09-26 Published:2024-10-12
  • Supported by:

    Supported by the Key Research and Development Project of  Hunan Province (2020SK2134) and the Project of  Natural Science Foundation of Hunan Province  (2022JJ30625)

摘要:

深度学习分割方法是遥感图像分割领域的热点之一,主流的深度学习方法有卷积神经网络、transformer神经网络及两者的结合。特征提取是图像分割的重要环节,除了用卷积等方式提取特征,最近的研究聚焦于一些新的特征提取范式,如图卷积、小波变换等。本文利用聚类算法的区域构建属性,将改进的聚类算法用于骨干特征提取模块,同时使用卷积和视觉transformer作为辅助模块,以获取更丰富的特征表述;在模块基础上,提出了一种新型层次化遥感图像语义分割网络(NHNet);评估了NHNet语义分割的性能,并在LoveDA遥感数据集上与其他方法进行比较。结果表明,基于多特征提取的NHNet获得了竞争性的性能表现,平均交并比为49.64%,F1分数为65.7%。同时,消融实验证明辅助模块提高了聚类算法分割的精确性,给NHNet分别提升了1.03%和2.41%的平均交并比。


关键词: 遥感图像')">

遥感图像, 语义分割, 聚类算法, 卷积神经网络, 自注意力

Abstract:

Deep learning segmentation method is one of the hot topics in the field of remote sensing image segmentation. The mainstream deep learning methods include convolutional neural networks, transformer neural networks, and a combination of the two. Feature extraction is an important part of image segmentation. In addition to using convolution and other methods to extract features, recent research has focused on some new feature extraction paradigms, such as graph convolution and wavelet transform. In this article, the region construction attribute of clustering algorithms is utilized, and the improved clustering algorithm is used as the backbone feature extraction module while the convolution and visual transformer are used as auxiliary modules to obtain richer feature representations. On the basis of the module, a new hierarchical remote sensing image semantic segmentation network (NHNet) is proposed. The performance of NHNet semantic segmentation is evaluated and compared with other methods on the LoveDA remote sensing dataset. The results show that NHNet based on multi-feature extraction achieved competitive performance, with an average intersection-to-union ratio of 49.64% and a score of 65.7%. At the same time, ablation experiments show that the auxiliary module improves the accuracy of clustering algorithm segmentation, increasing the average intersection-to-union ratio of NHNet by 1.03% and 2.41%, respectively.

Key words: remote sensing images, semantic segmentation, clustering algorithm, convolutional neural network, self attention

中图分类号: 

  • TP751.1
[1] 李海港, 王涛, 杨艳伟, 董学征, 廖利勇, 付晓东, 刘硕磊, 倪雨苗.  基于深度学习的地下管线探地雷达数据反演[J]. 吉林大学学报(地球科学版), 2026, 56(3): 1026-1037.
[2] 高全明, 尚复庆, 柴进, 王一, 孙伟, 赵静. 基于MagTrack-CNN的磁性目标运动轨迹实时定位跟踪方法[J]. 吉林大学学报(地球科学版), 2025, 55(6): 2088-2099.
[3] 冯媛媛, 李朝奎, 刘松焕, 田沁. SSC-SeNet:一种融合点云与影像数据的露天矿区建筑物语义分割算法[J]. 吉林大学学报(地球科学版), 2025, 55(5): 1757-1773.
[4] 单慧琳, 王兴涛, 徐宜俊, 王志浩, 黄浩瀚, 张银胜. 基于轻量融合语义分割的三维断层地震识别方法[J]. 吉林大学学报(地球科学版), 2025, 55(3): 987-1000.
[5] 高康哲, 王凤艳, 刘子维, 王明常. 基于改进U-Net的遥感图像语义分割[J]. 吉林大学学报(地球科学版), 2024, 54(5): 1752-1763.
[6] 林雨准, 刘智, 王淑香, 芮杰, 金飞. 基于卷积神经网络的光学遥感影像道路提取方法研究进展[J]. 吉林大学学报(地球科学版), 2024, 54(3): 1068-1080.
[7] 刘 霞, 孙英杰. 基于融合残差注意力机制的卷积神经网络地震信号去噪[J]. 吉林大学学报(地球科学版), 2023, 53(2): 609-.
[8] 张岩, 刘小秋, 李杰, 董宏丽, . 基于时频联合深度学习的地震数据重建[J]. 吉林大学学报(地球科学版), 2023, 53(1): 283-296.
[9] 李邦, 蒋川东, 王远, 田宝凤, 段清明, 尚新磊, .

基于卷积神经网络的地下水磁共振数据随机噪声压制方法 [J]. 吉林大学学报(地球科学版), 2022, 52(3): 775-784.

[10] 董旭日, 冯晅, 刘财, 田有, 李静, 王天琪, 王鑫, 衣文索. 基于DAS信号和CNN分类算法的人员运动轨迹监测方法[J]. 吉林大学学报(地球科学版), 2022, 52(3): 1004-1015.
[11] 李忠潭, 薛林福, 冉祥金, 李永胜, 董国强, 李玉博, 戴均豪. 基于卷积神经网络的智能找矿预测方法:以甘肃龙首山地区铜矿为例[J]. 吉林大学学报(地球科学版), 2022, 52(2): 418-433.
[12] 王民水, 孔祥明, 陈学业, 杨国东, 王明常, 张海明. 基于随机补片和DeepLabV3+的建筑物遥感图像变化检测[J]. 吉林大学学报(地球科学版), 2021, 51(6): 1932-1938.
[13] 熊越晗, 刘东燕, 刘东升, 王艳磊, 唐小山. 基于岩样细观图像深度学习的岩性自动分类方法[J]. 吉林大学学报(地球科学版), 2021, 51(5): 1597-1604.
Viewed
Full text


Abstract

Cited

  Shared   
  Discussed   
[1] 初凤友,孙国胜,李晓敏,马维林,赵宏樵. 中太平洋海山富钴结壳生长习性及控制因素[J]. J4, 2005, 35(03): 320 -0325 .
[2] 周丽萍, 申向东, 李学斌, 白忠强. 天然浮石粉水泥土力学性质的试验研究[J]. J4, 2009, 39(3): 492 -497 .
[3] 黄玉龙, 王璞珺, 邵锐. 火山碎屑岩的储层物性--以松辽盆地营城组为例[J]. J4, 2010, 40(2): 227 -236 .
[4] 潘殿琦,张祖培,潘殿彩,陈义民,徐 瑞. 人工冻土纵波波速与温度和含水率的关系[J]. J4, 2006, 36(04): 588 -591 .
[5] 付 哲,周云轩,刘殿伟,刘万崧. 基于特征的面向对象虚拟GIS数据模型设计与原型系统实现[J]. J4, 2006, 36(04): 647 -652 .
[6] 卢进才,李玉宏,魏仙样,魏建设. 鄂尔多斯盆地三叠系延长组长7油层组油页岩沉积环境与资源潜力研究[J]. J4, 2006, 36(6): 928 -0932 .
[7] 黄继国,黄国鑫,聂广正,魏海娟,吕爱民,王雪松. 中温UBF与UASB两相厌氧系统处理垃圾渗滤液的实验研究[J]. J4, 2007, 37(1): 144 -0147 .
[8] 孙才志,刘玉兰,杨 俊. 下辽河平原地下水生态水位与可持续开发调控研究[J]. J4, 2007, 37(2): 249 -254 .
[9] 舒萍,曲延明,王国军,丁日新,艾兴波,纪学雁,唐华风,边伟华,王璞珺. 松辽盆地火山岩储层裂缝地质特征与地球物理识别[J]. J4, 2007, 37(4): 726 -0733 .
[10] 单玄龙,刘青帝,任利军,赵玉婷. 松辽盆地三台地区下白垩统营城组珍珠岩地质特征与成因[J]. J4, 2007, 37(6): 1146 -1151 .