遥感图像,语义分割,聚类算法,卷积神经网络,自注意力
," /> 遥感图像,语义分割,聚类算法,卷积神经网络,自注意力
,"/> <span>NHNet——新型层次化遥感图像语义分割网络</span>

吉林大学学报(地球科学版) ›› 2024, Vol. 54 ›› Issue (5): 1764-1772.doi: 10.13278/j.cnki.jjuese.20230155

• 地球探测与信息技术 • 上一篇    

NHNet——新型层次化遥感图像语义分割网络

王威,熊艺舟,王新   

  1. 长沙理工大学计算机与通信工程学院,长沙410000
  • 出版日期:2024-09-26 发布日期:2024-10-12
  • 基金资助:
    湖南省重点研究开发项目(2020SK2134);湖南省自然科学基金项目(2022JJ30625)

NHNet: A Novel Hierarchical Semantic Segmentation Network for Remote Sensing Images

Wang Wei, Xiong Yizhou, Wang Xin   

  1. School of Computer and Communication Engineering, Changsha University of Science and Technology, Changsha 410000, China
  • Online:2024-09-26 Published:2024-10-12
  • Supported by:

    Supported by the Key Research and Development Project of  Hunan Province (2020SK2134) and the Project of  Natural Science Foundation of Hunan Province  (2022JJ30625)

摘要:

深度学习分割方法是遥感图像分割领域的热点之一,主流的深度学习方法有卷积神经网络、transformer神经网络及两者的结合。特征提取是图像分割的重要环节,除了用卷积等方式提取特征,最近的研究聚焦于一些新的特征提取范式,如图卷积、小波变换等。本文利用聚类算法的区域构建属性,将改进的聚类算法用于骨干特征提取模块,同时使用卷积和视觉transformer作为辅助模块,以获取更丰富的特征表述;在模块基础上,提出了一种新型层次化遥感图像语义分割网络(NHNet);评估了NHNet语义分割的性能,并在LoveDA遥感数据集上与其他方法进行比较。结果表明,基于多特征提取的NHNet获得了竞争性的性能表现,平均交并比为49.64%,F1分数为65.7%。同时,消融实验证明辅助模块提高了聚类算法分割的精确性,给NHNet分别提升了1.03%和2.41%的平均交并比。


关键词: 遥感图像')">

遥感图像, 语义分割, 聚类算法, 卷积神经网络, 自注意力

Abstract:

Deep learning segmentation method is one of the hot topics in the field of remote sensing image segmentation. The mainstream deep learning methods include convolutional neural networks, transformer neural networks, and a combination of the two. Feature extraction is an important part of image segmentation. In addition to using convolution and other methods to extract features, recent research has focused on some new feature extraction paradigms, such as graph convolution and wavelet transform. In this article, the region construction attribute of clustering algorithms is utilized, and the improved clustering algorithm is used as the backbone feature extraction module while the convolution and visual transformer are used as auxiliary modules to obtain richer feature representations. On the basis of the module, a new hierarchical remote sensing image semantic segmentation network (NHNet) is proposed. The performance of NHNet semantic segmentation is evaluated and compared with other methods on the LoveDA remote sensing dataset. The results show that NHNet based on multi-feature extraction achieved competitive performance, with an average intersection-to-union ratio of 49.64% and a score of 65.7%. At the same time, ablation experiments show that the auxiliary module improves the accuracy of clustering algorithm segmentation, increasing the average intersection-to-union ratio of NHNet by 1.03% and 2.41%, respectively.

Key words: remote sensing images, semantic segmentation, clustering algorithm, convolutional neural network, self attention

中图分类号: 

  • TP751.1
[1] 高康哲, 王凤艳, 刘子维, 王明常. 基于改进U-Net的遥感图像语义分割[J]. 吉林大学学报(地球科学版), 2024, 54(5): 1752-1763.
[2] 林雨准, 刘智, 王淑香, 芮杰, 金飞. 基于卷积神经网络的光学遥感影像道路提取方法研究进展[J]. 吉林大学学报(地球科学版), 2024, 54(3): 1068-1080.
[3] 刘 霞, 孙英杰. 基于融合残差注意力机制的卷积神经网络地震信号去噪[J]. 吉林大学学报(地球科学版), 2023, 53(2): 609-.
[4] 张岩, 刘小秋, 李杰, 董宏丽, . 基于时频联合深度学习的地震数据重建[J]. 吉林大学学报(地球科学版), 2023, 53(1): 283-296.
[5] 董旭日, 冯晅, 刘财, 田有, 李静, 王天琪, 王鑫, 衣文索. 基于DAS信号和CNN分类算法的人员运动轨迹监测方法[J]. 吉林大学学报(地球科学版), 2022, 52(3): 1004-1015.
[6] 李邦, 蒋川东, 王远, 田宝凤, 段清明, 尚新磊, .

基于卷积神经网络的地下水磁共振数据随机噪声压制方法 [J]. 吉林大学学报(地球科学版), 2022, 52(3): 775-784.

[7] 李忠潭, 薛林福, 冉祥金, 李永胜, 董国强, 李玉博, 戴均豪. 基于卷积神经网络的智能找矿预测方法:以甘肃龙首山地区铜矿为例[J]. 吉林大学学报(地球科学版), 2022, 52(2): 418-433.
[8] 王民水, 孔祥明, 陈学业, 杨国东, 王明常, 张海明. 基于随机补片和DeepLabV3+的建筑物遥感图像变化检测[J]. 吉林大学学报(地球科学版), 2021, 51(6): 1932-1938.
[9] 熊越晗, 刘东燕, 刘东升, 王艳磊, 唐小山. 基于岩样细观图像深度学习的岩性自动分类方法[J]. 吉林大学学报(地球科学版), 2021, 51(5): 1597-1604.
Viewed
Full text


Abstract

Cited

  Shared   
  Discussed   
No Suggested Reading articles found!