基于双路图卷积的黄河三角洲湿地地物分类研究

郭防铭, 李忠伟, 孟 乔, 王雷全, 张 杰, , 胡亚斌, 梁 建

基于双路图卷积的黄河三角洲湿地地物分类研究

郭防铭1, 李忠伟1, 孟 乔1, 王雷全1, 张 杰1, 2, 胡亚斌2, 梁 建3

(1. 中国石油大学(华东), 山东 青岛 266580; 2. 自然资源部第一海洋研究所, 山东 青岛 266061; 3. 南通智能感知研究院, 江苏 南通 226007)

黄河三角洲湿地地物精确分类对湿地资源的保护、开发和利用具有重要意义。目前的湿地分类算法大多存在着全局信息利用不足, 地物类型边界不易区分等问题, 导致分类精度不高。针对此问题, 本文提出了基于双路图卷积的黄河三角洲湿地地物分类算法, 包括图结构数据构建模块、特征提取与融合模块两部分。图结构数据构建模块, 设计欧式图表示光谱值之间的绝对差异, 衡量不同地物类型, 设计余弦图表达不同像素光谱波形之间的差异, 用以区分不同的地物边界; 特征提取与融合模块, 利用图卷积聚合全局信息, 对欧式图利用双层图卷积进行特征提取, 对余弦图使用图U-Net网络进行特征提取, 之后将两个特征融合, 得到同时具有光谱值绝对差异和光谱波形差异的融合特征, 最后进行分类。在CHRIS和GF5两个数据集的实验结果表明, 本文所提算法在黄河三角洲湿地地物分类中取得了具有竞争力的分类结果。

黄河三角洲; 湿地分类; 高光谱图像分类; 图卷积

湿地被誉为“地球之肾”、“生物超市”和“基因库”, 与森林、海洋并称为全球三大生态系统, 在气候调节、促淤造陆、蓄洪防旱等方面发挥着重要作用[1]。黄河三角洲湿地是由黄河冲淤和海水动力共同作用的结果, 是我国暖温带保存最完整、最广阔和最年轻的湿地, 是典型的河口湿地[2]。目前, 黄河三角洲湿地受入海水沙量减少、人类活动和全球气候变化等多重因素的影响, 正面临湿地萎缩、景观破碎化及生物多样性降低等问题[3]。因此, 开展黄河三角洲湿地地物分类研究, 对湿地资源的保护、开发和利用具有重要意义。

高光谱数据具有光谱分辨率高、光谱波段多以及“图谱合一”的特点, 针对不同的地物类型可以表现出不同的光谱信息, 基于上述特点, 许多学者利用高光谱数据开展了湿地地物分类研究[4-5]。王建步等[6]将线性光谱混合分析模型与归一化植被指数(NDVI)和归一化水体指数(NDWI)相结合, 实现了高光谱图像的湿地分类。初佳兰等[7]利用ISODATA非监督分类方法与最大似然法(ML)和支持向量机(SVM)法监督分类法, 提出了一种基于众数赋值的高光谱图像地物分类方法, 有效提高了湿地分类精度。李世波等[8]对高光谱数据进行主成分分析(PCA)降维后, 利用随机森林和径向基内核支持向量机分类, 得到了较稳定的湿地分类精度。然而, 上述研究多是利用人工提取的特征进行分类, 提取特征质量依赖人工经验, 自动化与智能化程度不高。

近年来, 深度学习技术在计算机视觉领域的巨大成功, 使其在遥感图像处理领域也得到了广泛应用[9-11], 卷积神经网络CNN(Convolutional Neural Network)作为其代表, 已被广泛用于湿地分类研究[12-13], 提高了分类算法的自动化与智能化。Hu等[14]提出了基于多目标CNN和决策融合模型的高光谱分类算法, 使用卷积神经网络进行特征提取, 引入联合投票法和模糊隶属度的决策融合模型进行湿地分类。Chen等[15]利用深度置信网络, 引入共轭梯度更新, 使用以中心像素的光谱块特征进行分类, 在GF-5黄河三角洲影像数据上取得了较好效果。需要注意的是, 基于CNN的算法关键是对高光谱数据进行特征提取, 然而多数算法的特征提取依赖固定尺寸、固定感受野的卷积核, 这使得在特征提取过程中, 信息只局限在小范围内, 更多的全局信息得不到利用, 限制了分类精度的提高。

图卷积神经网络GCN(Graph Convolutional Neural Network)因其灵活的感受野为解决上述问题提供了新思路[16-17]。Hong等[18]设计了MiniGCN网络用于高光谱图像分类, 提高了分类精度。Ding等[19]设计了联合上下文的多尺度图卷积网络, 同样在高光谱分类中取得不错效果。然而, 上述方法的图结构都是通过计算欧几里得距离来构造的, 欧几里得距离只能反映光谱值之间的绝对差异, 忽略了光谱波形间的相对差异。在湿地中, 水体、潮滩、植被等界限并不明显, 仅仅利用光谱之间的绝对差异无法完成分类, 单一的图构造方法很难完成湿地地物分类任务。

为解决上述问题, 本文提出了基于双路图卷积的黄河三角洲湿地分类模型, 称为DGCNWC算法, 构建欧式图和余弦图挖掘光谱间的绝对差异与相对差异; 利用图卷积提取特征, 获取全局信息; 在CHRIS和GF-5数据集上取得了较好结果。

1 双路图卷积网络

尽管当前基于GCN的算法在湿地分类中已经取得了不错效果, 但其对湿地复杂地物的边界区分不明显。因此, DGCNWC算法利用全局信息, 聚焦光谱值与光谱波形特征提取, 之后进行特征融合, 开展湿地分类研究。算法整体框架图如图1所示。DGCNWC算法包括两个模块: 图结构数据构建模块、特征提取与融合模块。

图1 DGCNWC算法框架图

1.1 欧式图与余弦图的构建

与基于CNN的方法相比, 基于GCN的方法具有更灵活的感受野, 能够获取全局信息, 这得益于数据的图结构表示。初始图结构直接决定了能够提取的特征的质量。因此, 本文设计了欧式图和余弦图两种图结构用于表达湿地高光谱影像的图结构数据。

欧式图表示光谱之间的绝对差异, 利用欧几里得距离来度量, 欧式图可以直接反映每个像素之间光谱值的差异, 衡量光谱的相似性。余弦图则表示的是光谱曲线之间的相对差异, 利用余弦相似度度量, 余弦图体现的是每个像素光谱波形之间的差异, 衡量光谱波形之间的相似性。光谱值差异有利于判断不同的地物类别, 光谱波形差异可以较好的区分潮滩、植被等有明显差异的地物界限。

将任一像素块′的欧式图定义为G=(V,E)。其中,V代表像素块′中的所有像素, 表示图G的顶点,E是像素块内每个像素间光谱值的绝对差异, 由欧几里得距离度量, 采用高斯核函数[20], 其计算公式如下:

同理, 任一像素块′的余弦图定义为G=(V,E)。V代表像素块′中的所有像素, 表示图G的顶点,E是像素块内每个像素间光谱值的相对差异, 由余弦距离度量, 其计算公式如下:

1.2 特征提取与融合

欧式图与余弦图构造完成后, 将利用其特征矩阵和邻接矩阵输入到特征提取与融合模块。特征提取模块由两路网络组成, 一路为两层图卷积网络用于提取欧式图的绝对差异光谱特征; 另一路为图U-Net网络, 用于提取余弦图的相对差异光谱特征。融合模块由一层卷积神经网络和两层全连接网络组成, 用于融合绝对差异光谱特征和相对差异光谱特征, 利用融合的特征进行最终的湿地地物分类。

对于欧式、余弦图的邻接矩阵, 其对角线的值表示各像素的自相关性。为了提高模型训练稳定性, 采用自连接的邻接矩阵扩大其自相关性, 表达式如下:

式中,I代表对角线为1, 其余值为0的单位矩阵。

对欧式图, 受限于图卷积信息传播特性, 三层及以上图卷积会出现“过渡平滑”现象, 导致信息不具有可分性, 一层图卷积信息提取不充分, 因此采用双层图卷积进行绝对差异光谱特征的提取。图卷积层通过不断聚合相邻节点的信息实现邻接信息的传递, 在不断传递过程中, 可以遍历所有节点, 从而获取光谱特征的全局信息。图卷积方程定义如下:

对余弦图, 因其蕴含了光谱波形的相似性信息, 只通过图卷积层进行信息传递不能充分挖掘到不同地物的边界信息, 因此, 欧式图双层图卷积的基础上, 引入了四组图池化与图反池化操作, 最后利用残差结构加速模型的收敛。其中, 图池化操作如图2所示, 其方程定义如下:

图反池化利用“零”填充, 对于反池化的图, 构建一个与其反池化后同样尺寸的节点值全为0的图, 随后将反池化图的节点值填入, 其填入位置对应其池化层的位置, 保证每层反池化的图尺寸都能与相应池化层的图尺寸相同。反池化的方程定义如下:

式中, 0×C为初始0矩阵, 与X+1尺寸相同;(ּ)操作为利用X, 在与相对应的位置更新0矩阵。

图2 图池化

Fig. 2 Graph pooling

同时, 为了更好地利用特征, 使用了Nonlocal注意力机制关注有效信息, 获得最终的相对差异光谱特征。余弦图特征提取的图U-Net流程如图3所示。

图3 图U-Net流程图

最终, 为了融合欧式图提取到的绝对差异光谱特征F与余弦图提取到的相对差异特征F, 特征融合模块定义如下:

式中,(ּ)表示卷积操作,(ּ)表示全连接。

利用卷积层学习融合参数, 利用全连接层进行降维, 得到融合特征F。最后将其输入到Softmax分类层, 预测每一地物分类概率, 得到最终分类结果。

2 实验分析与讨论

2.1 数据集

为了验证所提的双路图卷积网络在黄河三角洲湿地地物分类的有效性, 本文分别选取了CHRIS卫星和GF-5卫星的两景高光谱遥感影像进行实验。

CHRIS数据集区域位于黄河入海口新老入海径流清八汊和清水沟交界处, 采集于2012年6月, 像素尺寸为510×511, 共有18个波段, 其光谱范围406~1 036 nm, 光谱分辨率从5.9~44.1 nm不等, 空间分辨率17 m, 包含芦苇、互花米草、滩涂、水体、裸地以及柽柳碱蓬混生区6个地物类型, 地物真值图由当年夏季实地踏勘所得, 以站点或断面的形式开展滨海湿地地物类型种类、覆盖度和边界范围等信息调查。

GF-5数据集覆盖了黄河三角洲自然保护区滨海湿地, 采集于2018年11月, 像素尺寸为462×617, 共有150个波段, 光谱范围为390~1 029 nm, 光谱分辨率为3.67~4.81 nm不等, 空间分辨率为30 m, 包含互花米草、芦苇、柽柳、盐地碱蓬、潮滩芦苇、裸潮滩、盐碱滩以及水体8个地物类型, 由当年秋季实地踏勘所得, 以站点或断面的形式开展滨海湿地地物类型种类、覆盖度和边界范围等信息调查。

每个数据集, 针对每个地物类型随机抽取200个作为训练数据, 其余地物类型用于测试。因此CHRIS数据总量为260 610个, 训练样本为1 200个, 测试样本为259 410个; GF-5数据集总量为285 054个, 训练样本为1 600个, 测试样本为283 454个。

2.2 实验环境及评价指标

本文所有实验开展的计算机环境为: Windows 10操作系统、i9-10900K CPU、NVIDIA GeForce RTX 3090 GPU以及128G内存。本文所提双路图卷积算法使用Pytorch实现。

为了有效评价算法性能, 本文采用总体精度(Overall Accuracy, OA)、平均精度(Average Accuracy, AA)以及Kappa系数()作为算法评价指标。

2.3 算法性能对比与讨论

为了充分验证所提算法, DGCNWC 算法在黄河三角洲湿地分类的有效性, 本小节对DGCNWC算法开展欧式支路与余弦支路的单支路消融实验, 同时与SVM、3DCNN[22]、DGU[21]算法进行对比实验。SVM算法是机器学习的经典算法; 3DCNN算法是利用3D卷积神经网络, 实现光谱和空间联合的算法, 在多个公共数据集上取得了优异性能; DGU算法是利用欧几里得距离构建光谱图和空间图的图卷积算法。两组数据集每种地物类型分类精度、测试训练样本比以及总体实验结果如表1、表2所示, 分类结果的可视化图像见图4、图5。

表1 CHRIS数据集分类结果

表2 GF5数据集分类结果

图4 CHRIS数据集分类结果可视化

图5 GF5数据集分类结果可视化

(1)PCA维度分析

为了验证PCA降维后的数据对分类性能的影响, 本小节探究了PCA降维后不同的维度对分类性能的影响, 因为CHRIS只有18个波段, 数据冗余度较小, 不对其进行降维, 只对GF5数据集进行PCA降维, 实验结果如表3所示。

由表3结果可以看出, PCA对GF5数据集分类结果的影响, 在60~110维度间呈现先上升后下降的趋势。这表明在80维度, 是GF5数据降维的最佳维度, 分类精度取得了80.61%; 在60或70维度, 由于降维过多, 导致光谱信息产生了丢失, 精度下降; 同时在90~110维度, 因为保留成为过多, 光谱信息中仍存在冗余, 也导致精度下降。因此后面实验中, GF5数据经PCA降维后维度采用80。

表3 PCA对GF5数据集分类结果影响

(2)DGCNWC算法消融实验

在消融实验中, 分别研究了欧式支路、余弦支路对分类精度所产生的影响。实验结果表明, 在CHRIS数据集中, 欧式支路的总体分类精度为83.16%, 平均分类精度为86.79%; 余弦支路的总体分类精度为77.62%, 平均分类精度为82.98%。均低于DGCNWC算法的总体精度88.18%, 平均精度90.28%。这验证了所提算法利用光谱值绝对差异与光谱波形差异的作用。同时, 在各地物类型分类精度上, 欧式支路绝大部分优于余弦支路, 而在柽柳碱蓬混生区、互花米草的分类上, 余弦支路分别以81.29%、96.87%优于欧式支路。因其生长习性原因, 柽柳碱蓬混生区与互花米草是CHRIS数据集地物边界较为复杂的两类, 这表明余弦支路可以利用波形之间的差异性识别不同地物类别边界, 验证了余弦图是对欧式图的有效补充。

针对GF5数据集, DGCNWC算法以总体精度80.61%, 平均精度78.30%的结果优于欧式支路和余弦支路, 同样揭示了双路图卷积对黄河三角洲湿地分类的有效性。需要注意的是, DGCNWC算法在芦苇、潮滩芦苇、盐地碱蓬等地物上的分类精度较单分支网络提升了7%~34%不等, 如此大的分类差距在CHRIS数据集上没有发生。考虑到GF5原始数据含有150个波段, 波段多, 数据复杂, 在对其进行大气校正、辐射校正时容易引入噪声, 其数据质量与CHRIS数据相比稍差, 因此单分支网络受到影响导致精度偏低。而双路网络受此影响较小, 各地物精度都比较高, 表明融合双支路后, DGCNWC算法有着不错的鲁棒性。

(2)不同算法对比实验

在对比实验中, 开展了机器学习算法SVM、基于CNN的算法3DCNN、基于GCN的算法DGU在分类精度上与DGCNWC算法的对比研究。实验结果显示, 在CHRIS数据集上, DGCNWC算法的总体分类精度达88.18%, 高于SVM的83.98%, 3DCNN的83.33%, DGU的84.93%, 同时在GF5数据集上, DGCNWC的总体分类精度都分别高于SVM、3DCNN、DGU有7%、4%、10%左右。这些现象表明, DGCNWC算法面对各种类型的分类算法在黄河三角洲湿地分类上都有较为明显的优势, 具有精度更高的分类性能。

同样的结果, 在Kappa系数的结果中也有体现, 在CHRIS和GF5数据集中, DGCNWC算法分别以0.844 7、0.749 2均高于SVM、3DCNN、DGU算法, 表明DGCNWC算法的分类结果与实际地物结果具有更高的一致性。

另一方面, SVM、3DCNN、DGU算法在两个数据集上的分类性能各有优劣, 在CHRIS数据集中, DGU总体精度分别高于SVM、3DCNN有0.95%、1.6%, 为三个算法中分类性能最好的; 在GF5数据集中, 3DCNN算法以76.29%的总体精度高于SVM、DGU的73.03%、70.85%。这表明, 深度学习算法在分类性能上确实优于传统机器学习算法, 在黄河三角洲湿地分类领域, 基于CNN的算法与基于GCN的算法具备一定的竞争性。然而, 考虑模型的稳定性发现, 在CHRIS数据集, SVM、3DCNN、DGU的总体精度与平均精度的插值分别在2.04%、3.24%、4.59%, DGCNWC为2.1%。在GF5数据集中, 这些数据分别为1.34%、3.42%、2.56%、2.31%。可以看出SVM、DGCNWC对不同地物类型的鲁棒性更好, 某一地物分类精度不易出现极端值。同样表明DGCNWC在兼顾高分类精度的同时, 又有较好的鲁棒性。

图6表示了DGCNWC对地物边界区分的效果, 如图6所示, 以左上角红框标出区域为例, SVM、3DCNN、DGU的地物边界不清晰, 地物混杂。DGCNWC的地物边界较上述3种方法有明显提高, 地物边界清晰, 没有斑点分布。这表明DGCNWC在一定精度范围内解决了地物边界不易区分的问题。

3 结论

针对当前黄河三角洲湿地地物分类算法中存在的全局信息利用不足, 地物边界不易区分等问题, 本文提出了一种基于双路图卷积的黄河三角洲湿地分类算法, DGCNWC算法。DGCNWC算法包含图结

图6 地物边界结果对比

构数据构建模块、特征提取与融合模块两部分。图结构数据构建中, 设计欧式图和余弦图, 欧式图的图节点的邻接关系利用欧几里得距离度量, 表示光谱值之间的绝对差异, 余弦图支路利用余弦相似度表示图节点的邻接关系, 体现光谱波形之间的差异, 用以区分地物类型边界。特征提取与融合中, 对欧式图利用两层图卷积层做特征提取, 对余弦图使用图U-Net网络进行特征提取, 最后DGCNWC算法将两路特征进行融合。相较于现有算法, 在黄河三角洲湿地分类的任务中取得了较为满意的结果。实验表明, 在CHRIS、GF5数据集中分类的总体精度分别达到了88.18%、80.61%。

值得注意的是, 虽然DGCNWC算法学习了光谱值差异与光谱波形差异特征, 但在大尺度遥感影像下只考虑光谱特征是不够的, 应当引入空间相关性。因此未来的工作将在此基础上提取空间相关性特征, 进一步提高特征的鉴别能力, 从而提高黄河三角洲湿地地物分类的精度, 更好的服务黄河三角洲的保护、开发和利用。

[1] 李鹏, 黎达辉, 李振洪, 等. 黄河三角洲地区GF-3雷达数据与Sentinel-2多光谱数据湿地协同分类研究[J]. 武汉大学学报(信息科学版), 2019, 44(11): 1641-1649.

LI Peng, LI Dahui, LI Zhenhong, et al. Wetland classification through integration of GF-3 SAR and Sentinel-2B multispectral data over the Yellow River Delta[J]. Geomatics and Information Science of Wuhan University, 2019, 44(11): 1641-1649.

[2] 王娜娜, 刘宏元, 李英, 等. 黄河三角洲湿地生态系统服务价值评估[J]. 山东农业科学, 2022, 54(2): 153-158.

WANG Nana, LIU Hongyuan, LI Ying, et al. Value evaluation of wetland ecosystem services in the Yellow River Delta wetland[J]. Shandong Agricultural Sciences, 2022, 54(2): 153-158.

[3] 高瑞, 王志勇, 周晓东, 等. 利用多时相遥感监测与分析黄河三角洲湿地变化动态[J]. 测绘通报, 2021, 4: 22-27.

GAO Rui, WANG Zhiyong, ZHOU Xiaodong, et al. Monitoring and analysis of wetland change dynamics in the Yellow River Delta using multi-temporal remote sensing[J]. Bulletin of Surveying and Mapping, 2021, 4: 22-27.

[4] 王霄鹏, 张杰, 任广波, 等. 基于光谱特征空间的监督分类中包络线去除效能评价[J]. 海洋科学进展, 2015, 33(2): 195-206.

WANG Xiaopeng, ZHANG Jie, REN Guangbo, et al. Validity evaluation of continuum removal in the supervised classification based on spectral feature space[J]. Advances in Marine Science, 2015, 33(2): 195-206.

[5] LIU C, TAO R, LI W, et al. Joint classification of hyperspectral and multispectral images for mapping coastal wetlands[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2021, 14(1): 982-996.

[6] 王建步, 张杰, 马毅, 等. 黄河口湿地典型地物类型高光谱分类方法[J]. 海洋学研究, 2014, 32(3): 36-41.

WANG Jianbu, ZHANG Jie, MA Yi, et al. Classi­fication method of hyperspectral image in typical surface feature of Huanghe River estuary wetland[J]. Journal of Marine Sciences, 2014, 32(3): 36-41.

[7] 初佳兰, 张杰, 任广波, 等. 一种基于众数赋值的高光谱图像地物分类方法[J]. 海洋科学, 2015, 39(2): 72-78.

CHU Jialan, ZHANG Jie, REN Guangbo, et al. A hyperspectral image classification method based on maxi­mum assignment[J]. Journal of Marine Sciences, 2015, 39(2): 72-78.

[8] 李世波, 林辉, 葛淼. 东洞庭湖湿地植被高光谱数据降维与分类[J]. 中南林业科技大学学报, 2019, 39(11): 36-41.

LI Shibo, LIN Hui, GE Miao. Hyperspectral dimensionality reduction and classification of the east Dongting lake wetland vegetation[J]. Journal of Central South University of Forestry & Technology, 2019, 39(11): 36-41.

[9] LI Z W, SHI S X, WANG L Q, et al. Unsupervised generative adversarial network with background enhancement and irredundant pooling for hyperspectral anomaly detection[J]. Remote Sensing, 2022, 14(5): 1265-1288.

[10] ZHANG X, WANG Y C, ZHANG N, et al. Spectral- Spatial fractal residual convolutional neural network with data balance augmentation for hyperspectral classification[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 59(12): 10473-10487.

[11] 李忠伟, 张浩, 王雷全, 等. 融合空谱-梯度特征的深度高光谱图像去噪[J]. 光学精密工程, 2022, 30(5): 615-629.

LI Zhongwei, ZHANG Hao, WANG Leiquan, et al. Deep hyperspectral image denoising by fusing space spectrum- gradient features[J]. Optics and Precision Engineering, 2022, 30(5): 615-629.

[12] Dang K B, Nguyen M H, Nguyen D A, et al. Coastal wetland classification with deep U-Net convolutional networks and Sentinel-2 imagery: A case study at the Tien Yen estuary of Vietnam[J]. Remote Sensing, 2020, 12(19): 3270-3296.

[13] 游佩佩, 刘振波, 谢嘉伟, 等. 基于GF-2的江苏滨海湿地遥感深度学习分类算法研究[J]. 长江流域资源与环境, 2021, 30(7): 1659-1669.

YOU Peipei, LIU Zhengbo, XIE Jiawei, et al. Research on deep learning algorithm remote sensing classification of Jiangsu coastal wetlands based on GF-2 image[J]. Resources and Environment in The Yangtze Basin, 2021, 30(7): 1659-1669.

[14] HU Y, ZHANG J, MA Y, et al. Hyperspectral coastal wetland classification based on a multi-object convo­lutional neural network model and decision fusion[J]. IEEE Geoscience and Remote Sensing Letters, 2019, 16(7): 1110-1114.

[15] CHEN C, MA Y, REN G. Hyperspectral classification using deep belief networks based on conjugate gradient update and pixel-centric spectral block features[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2020, 13(7): 4060-4069.

[16] MOU L C, LU X Q, LI X L, et al. Nonlocal graph convolutional networks for hyperspectral image classification[J]. IEEE Transactions on Geoscience and Remote Sensing, 2020, 58(12): 8246-8257.

[17] WAN S, GONG C, ZHONG P, et al. Hyperspectral image classification with context-aware dynamic graph convolutional network[J]. IEEE Transactions on Geoscience and Remote Sensing, 2020, 59(1): 597-612.

[18] HONG D F, GAO L R, YAO J, et al. Graph convolu­tional networks for hyperspectral image classification[J]. IEEE Transactions on Geoscience and Remote Sensing, 2020, 59(7): 5966-5978.

[19] DING Y, ZHAO X F, ZHANG Z L, et al. Multiscale graph sample and aggregate network with context-aware learning for hyperspectral image classification[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2021, 14(4): 4561-4572.

[20] WAN S, GONG C, ZHONG P, et al. Multiscale dynamic graph convolutional network for hyperspectral image classification[J]. IEEE Transactions on Geoscience and Remote Sensing, 2019, 58(5): 3162-3177.

[21] GUO F M, LI Z W, XIN Z Q, et al. Dual graph U-Nets for hyperspectral image classification[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2021, 14(8): 8160-8170.

[22] HAMIDA A B, BENOIT A, LAMBERT P, et al. 3-D deep learning approach for remote sensing image classification[J]. IEEE Transactions on geoscience and remote sensing, 2018, 56(8): 4420-4434.

Yellow River Delta wetland classification based on a dual graph convolution network

GUO Fang-ming1, LI Zhong-wei1, MENG Qiao1, WANG Lei-quan1, ZHANG Jie1, 2, HU Ya-bin2, LIANG Jian3

(1.China University of Petroleum (East China), Qingdao 266580, China; 2. First Institute of Oceanology, Ministry of Natural Resources, Qingdao 266061, China; 3. Nantong Academy of Intelligent Sensing, Nantong 226007, China)

Accurate wetland classification of the Yellow River Delta is crucial for the protection, development, and utilization of wetland resources. Most of the current wetland classification algorithms have limitations, such as insufficient use of global information and difficulty in distinguishing the boundary of ground object types. These drawbacks lead to low classification accuracy. To solve this problem, a dual graph convolution network is proposed for the Yellow River Delta wetland classification. This network includes modules for graph structure data construction and feature extraction and fusion. A Euclidean graph is designed to represent the absolute difference between spectral values and to measure different object types. A cosine graph is designed to express the difference between the spectral waveforms of different pixels to distinguish different object boundaries. In the feature extraction and fusion module, graph convolution is applied to aggregate global information. Two graph convolution layers are used to extract features from the Euclidean graph, and the graph U-Net is utilized to extract features from the cosine graph. Finally, the features extracted from the two graphs are fused to obtain features with absolute differences in spectral values and differences in spectral waveforms for classification. Experiments conducted on the CHRIS and GF5 datasets demonstrated the effectiveness of the proposed method for Yellow River Delta wetland classification.

Yellow River Delta; wetland classification; hyperspectral image classification; graph convolution

Apr. 23, 2022

TP751.1

A

1000-3096(2023)5-0121-10

10.11759/hykx2022042300

2022-04-23;

2022-12-09

国家自然科学基金-山东省联合基金(U1906217); 国家自然科学基金-面上项目(62071491); 中国石油大学(华东)研究生创新基金项目(CXJJ-2022-09); 国家自然科学基金项目(42106179)

[National Natural Science Foundation of China Joint Fund, No. U1906217; National Natural Science Foundation of China, No. 62071491; Innovation fund project for graduate students of China University of Petroleum (East China), No. CXJJ-2022-09; National Natural Science Foundation of China, No. 42106179]

郭防铭(1996—), 男, 博士研究生, 主要从事多源遥感图像处理研究, E-mail: guofangming@s.upc.edu.cn; 李忠伟(1978—),通讯作者, 男, 教授, 主要从事大数据智能处理及应用、光学及多手段融合与海岸带、海洋数值预报与云计算等方面的研究, E-mail: li.zhongwei@vip.163.com

(本文编辑: 康亦兼)