ISSN 1009-6248CN 61-1149/P 双月刊

主管单位:中国地质调查局

主办单位:中国地质调查局西安地质调查中心
中国地质学会

    • 中文核心期刊
    • CSCD收录期刊
    • 中国科技核心期刊
    • Scopus收录期刊
高级检索

基于梯度提升的优化集成机器学习算法对滑坡易发性评价:以雅鲁藏布江与尼洋河两岸为例

林琴, 郭永刚, 吴升杰, 臧烨祺, 王国闻

林琴,郭永刚,吴升杰,等. 基于梯度提升的优化集成机器学习算法对滑坡易发性评价:以雅鲁藏布江与尼洋河两岸为例[J]. 西北地质,2024,57(1):12−22. doi: 10.12401/j.nwg.2023031
引用本文: 林琴,郭永刚,吴升杰,等. 基于梯度提升的优化集成机器学习算法对滑坡易发性评价:以雅鲁藏布江与尼洋河两岸为例[J]. 西北地质,2024,57(1):12−22. doi: 10.12401/j.nwg.2023031
LIN Qin,GUO Yonggang,WU Shengjie,et al. Evaluation of Landslide Susceptibility by Optimization Integrated Machine Learning Algorithm Based on Gradient Boosting: Take Both Banks of Yarlung Zangbo River and Niyang River as Examples[J]. Northwestern Geology,2024,57(1):12−22. doi: 10.12401/j.nwg.2023031
Citation: LIN Qin,GUO Yonggang,WU Shengjie,et al. Evaluation of Landslide Susceptibility by Optimization Integrated Machine Learning Algorithm Based on Gradient Boosting: Take Both Banks of Yarlung Zangbo River and Niyang River as Examples[J]. Northwestern Geology,2024,57(1):12−22. doi: 10.12401/j.nwg.2023031

基于梯度提升的优化集成机器学习算法对滑坡易发性评价:以雅鲁藏布江与尼洋河两岸为例

基金项目: 国家自然科学基金重点支持项目“高原重大工程地质灾害监测与分析”(U21A20158),西藏农牧学院研究生创新计划“基于层次分析法的林芝地区滑坡灾害稳定性模糊综合评价”(YJS2022-25),西藏自治区科技重点研发计划项目“基于大数据下西藏重大水电工程强震监测关键技术”(XZ202201ZY0034G)联合资助。
详细信息
    作者简介:

    林琴(1997−),女,硕士研究生,从事西藏重大地质灾害监测。E−mail:qinaiyisheng@foxmail.com

    通讯作者:

    郭永刚(1966−)男,教授,从事水利水电工程强震安全监测和高原地质灾害监测与分析。E−mail:1960373107@qq.com

  • 中图分类号: P642.22

Evaluation of Landslide Susceptibility by Optimization Integrated Machine Learning Algorithm Based on Gradient Boosting: Take Both Banks of Yarlung Zangbo River and Niyang River as Examples

  • 摘要:

    雅鲁藏布江与尼洋河两岸地质构造活跃,山体滑坡时常发生,滑坡易发性评价能有效的减少因灾害发生所造成的对人类生命和财产的伤害。笔者基于基尼系数的加权随机森林、XGBoost和LightGBM算法在滑坡易发性中的性能。选取188个滑坡样本和7个影响因素,应用五折交叉验证法训练模型,训练过程中同时考虑特征选择算法、运用贝叶斯方法优化超参数后,采用precision、recall、F1、Accuracy指标对各个级别的预测结果进行分析。结果表明:在高程为32~1 544 m与2 722~3 752 m、坡度为30°~40°、距断裂带、河流与道路200 m以内的区域最容易发生滑坡;滑坡极高与高易发性分布为12.14%和12.41%,低和极低易发性占比分别为26.47%与29.55%,区内一半以上的地区不容易发生滑坡灾害;LightGBM模型在所有模型中表现最好,AUC值为0.843 2,准确度为0.853 1,F1分数为0.834 5;墨脱县的达木乡、帮辛乡,林芝县的丹娘、里龙、扎西饶登乡,朗县的陇村,工布江达的江达乡位于极高易发区,发生滑坡概率极大,在这些地区应采取相应的地质灾害防治措施。

    Abstract:

    The geological structures on both banks of the Yarlung Zangbo river and the Niyang river are active, and landslides occur frequently. The landslide susceptibility assessment can effectively reduce the damage to human life and property caused by disasters. This paper studies the performances of Weighted Random Forests, XGBoost and LightGBM algorithms based on Gini coefficient in landslide susceptibility. Select 188 landslide samples and 7 influencing factors, and use the 50–fold cross–validation method to train the model. During the training process, the feature selection algorithm is considered at the same time, and the Bayesian method is used to optimize the hyperparameters. Analysis of forecast results at the level. The results show that landslide is most likely to occur within the elevation of 32~1 544 m and 2 722~3 752 m, the gradient of 30°~40°, and the distance of 200 m from the fault zone, river and road. The extremely high and high landslide prone areas account for 12.14% and 12.41% respectively, and the low and extremely low landslide prone areas account for 26.47% and 29.55% respectively. More than half of the areas in Nyingchi prefecture are not prone to landslide disasters. Among all models, LightGBM model performs best, with AUC value of 0.843 2, accuracy of 0.853 1, and F1 score of 0.834 5. Damu township and Bangxin township in Motuo county, Danniang, Lilong, Zhaxi Raodeng township in Linzhi county, Long village in Lang county, and Jiangda township in Gongbujiangda county are positioned in extraordinarily high–risk areas, with a excessive likelihood of landslides. Corresponding prevention and control measures should be taken in these areas.

  • 雅鲁藏布江与尼洋河位于青藏高原东南部,盆地内山脉纵横起伏,形成大量冲沟、峡谷和河流。内部动力作用非常活跃,地壳中初始高压应力释放,盆地岩石结构松弛。崩塌、滑坡和泥石流等自然灾害频繁发生(苏立彬,2020武辰爽,2021)。滑坡是自然和人类活动引起的对土壤的破坏(Taalab et al.,2018)。它是一种以大量岩石、碎屑或泥土向坡面移动为特征的自然灾害。无论是由自然还是人类活动造成的滑坡,每年都会造成重大的经济损失(Tien et al.,2018)。因此,利用高效稳定的滑坡灾害评估技术,针对滑坡易发区,快速准确地识别高易发区的灾害,预测滑坡灾害的发生,可以有效地提高灾害预测的效率,减少滑坡灾害造成的损失,为防灾减灾提供参考(张琪等,2023周硼焜等,2023)。

    滑坡易发性划区是通过滑坡发生后的影响因子属性来预测滑坡发生的概率,是滑坡预测的有效方法(沈玲玲等,2016孟晓捷等,2022)。滑坡易发性评价通常采用传统的定性方法和定量方法(贾俊等,2023)。定性方法依赖于专家在历史资料和滑坡清单的经验和意见,如加权线性组合与层次分析法(Rehman et al.,2022),但计算结果受人为因素影响。定量方法包括数据模型和确定性模型。确定性模型可以提供精确的分析结果,但需要大量的数据,尤其是在大尺度地区实践中难以获得(杨创奇等,2022)。近年来,包括机器学习和统计学的数据驱动模型在地质灾害研究方面取得了显著进展,如证据权模型(WoE)(Batar et al.,2021)、频率比(FR)( Khan et al.,2019)和确定性系数法(CF) (乔德京等,2020)等。这些算法计算简便,甚至在一些大型区域也能适用,但是过分依赖样本质量且无法有效处理复杂的滑坡及其影响因子之间的关系。机器学习中的随机森林(Arabameri et al.,2019)、决策树(Hong et al.,2018)、BP神经网络(康孟羽等,2022张林梵等,2022)、梯度提升等也被广泛地运用在滑坡识别中(张文龙等,2023),较好地解决了非线性关系表达的问题,提高了滑坡识别的精度。然而,这些模型通常依赖于单一的学习器,滑坡易发性所涉及的影响因子众多,通常很难获得理想的预测结果,容易发生过拟合现象。因此,笔者利用集成学习将多个单学习器组合起来进行区域滑坡易发性评估,以比较其与传统方法更具有优越性和高效性。

    近年来,大量基于机器学习的方法被成功应用于地质灾害研究,而较新的梯度提升(Boosting)模型,包括XGBoost和LightGBM模型,在滑坡易发性方面很少被研究与比较,且不平衡类分布可能会影响特征选择的假设。在此基础上,笔者以雅鲁藏布江与尼洋河两岸为例,首次引入了基于基尼系数的加权随机森林作为特征选择过程过程,并与基于Boosting算法的XGBoost和LightGBM模型对研究区滑坡易发性进行分析和比较。

    笔者选取雅鲁藏布江下游与尼洋河两岸为研究对象(图1)。研究区位于西藏自治区林芝市西部,E 92°09′~95°51′,N 27°55′~30°36′,总面积约为68 000 km2,包括工布江达县、波密县、米林县、朗县、墨脱县。研究区属于典型的高原丘陵、高山峡谷地貌,是世界陆地垂直地貌落差最大的地带,区内地形起伏大,呈现北高南低走势,山脉多为东西走向,绝大多数为高海拔大起伏山地,其次为高海拔极大起伏山地与中高海拔极大起伏山地,最高海拔7 782 m,地处米林县与墨脱县的交界地带。研究区位于高原温带湿润半湿润季风区气候带寒带跨越到热带。地区水汽含量高,雨季开始得早,结束晚,持续时间长,年平均降水量约为650 mm,年平均气温为9.1 ℃。研究区内有日土–青丁断裂、达机翁–朗县断裂、贾桑断裂、札达–邛多断裂等断裂带,主要出露底层有盆地相上三叠统的砂岩、夹板岩、火山岩以及海相下—中三叠统的千枚岩、砂岩、含砾状灰岩等。由于高降雨量以及土壤和板块内动力活跃,该区域极易发生滑坡。

    图  1  研究区地理位置及滑坡分布
    Figure  1.  Geographical location and landslide distribution of the study area

    主要数据来源包括:①地理空间数据云的ASTER GDEM 30 m分辨率数字高程数据,基于ArcGIS软件对坡度信息进行了提取。②1∶5万地质图来源于中国地质调查局,用来提取地层岩性性质。③Landsat8影像来源于地理国情普查,用于土地利用数据的提取。④滑坡数据出自中国科学院资源环境科学数据中心。⑤断层带从地震活动断层探察数据中心获取。

    笔者在已有的研究方法上将30 m×30 m栅格大小设定为基础的评价单元(Tanyas et al.,2019),研究区域划分为123 156 296个网格。同时为了解决样本不均衡问题,笔者采用下采样方式从非滑坡区选取等量滑坡点组成188个样本点(Polykretis et al.,2018),滑坡单元设为1,非滑坡单元设为0,从中随机抽取70%(131)数据作为训练样本,剩余30%(57)作为测试样本。滑坡点具体流程见图2

    图  2  流程图
    Figure  2.  Flow Chart

    已有对雅鲁藏布江流域的研究结果和现场勘查表明:河水对河谷的不断侵蚀作用加上高海拔高寒区冻融加剧滑坡区岩石的风化,使得雅鲁藏布江流域极易孕育滑坡(赵永辉,2019);地层岩性是滑坡产生的重要因素(赵永辉,2021);坡度为滑坡发生的主控因素(王瑞琪等,2019)。再根据对研究区的地质灾害形成条件与地质环境背景研究分析,选取高程、坡度、断裂带与断层、河流、道路、地层岩性、土地利用7个评价因子。利用ArcGIS软件,将高程、坡度、地层岩性、土地利用4个连续型因子结合分布规范,采用自然间断法将研究区分为5个等级(图3a~图3d),对于离散型因子例如断裂带与断层、河流、道路利用多环缓冲区工具建立0~200、200~400、400~600、600~800、>800 m共5个等级范围(图3e~图3g)。

    图  3  各评价因子分级图
    Figure  3.  Grading chart of evaluation factors

    统计各评价因子分级范围内滑坡点数量并绘制蔟类柱状图(图4)。结果表明:当高程处在32~1 544 m时,滑坡发生的最多,占总数的30.9%,其次是出现在2 722~3 752 m范围内。其原因是在海拔低于1 544 m时,开挖坡脚等人类活动频繁,随着海拔的提升,坡度增大,加剧了滑坡的发生;随着坡度上升,滑坡数也增加,直到坡度上升达到阈值40°,发生灾害的概率降低,由原来的41.5%逐渐降低到16.0%;当地层岩性为雅鲁藏布江带闪片岩时,相比其他岩性,滑坡发生最频繁;草地土壤侵蚀严重,是浅层滑坡的重要原因。本研究中大量滑坡点分布在坡度为10°~20°的草地上;断裂带与断层会降低岩层的强度和完整性,是滑坡易发性增大的关键,在距断层带200 m以内容易发生滑坡,滑坡点占总数的41.5%,离断裂带与断层越远滑坡灾害越少;河岸受水流不断冲刷,土石在地下水及重力作用下越发失稳,因此越靠近河流越容易发生滑坡,滑坡在距河流200 m以内,发生次数最多,达到40.4%;修建铁路、公路时因大力爆破、强行开挖,常使坡体下部失去支撑而发生下滑,距离道路200 m以内的滑坡数占了总数一半以上达到52.1%,距离道路越远,滑坡活动减少。文中结论与相关研究均吻合(Kouhartsiouk et al.,2021Zweifel et al.,2021)。

    图  4  各评价因子与灾害点的关系
    Figure  4.  Relationship between assessment factors and disaster points

    为了研究各评价因素的相对独立性以及评价模型的准确性和可靠性,笔者采用皮尔逊相关系数计算影响评价因子的相关性。皮尔逊相关系数是用于度量两个变量之间的线性关系,利用两个变量间的协方差和变量的标准差进行计算而来(Lee et al.,2020)。

    $$ {\rho _{X,Y}} = \frac{{ \displaystyle \sum {XY} - \frac{{ \displaystyle \sum X \displaystyle \sum Y }}{N}}}{{\sqrt {\left( { \displaystyle \sum {{X^2} - \frac{{{{\left( { \displaystyle \sum X } \right)}^2}}}{N}} } \right)\left( { \displaystyle \sum {{Y^2} - \frac{{{{\left( { \displaystyle \sum Y } \right)}^2}}}{N}} } \right)} }} $$ (1)

    式中:XY表示变量,N表示取值个数。

    变量间呈现极弱相关时,相关系数为0.0~0.2;0.2~0.4表示变量之间弱相关性。将评价因子的7个属性值代入式(1)计算,结果见表1,发现相关性最高为坡度与道路(R=0.349 3),其他变量间相关关系均小于0.4。总体而言,变量的共线性不强。

    表  1  因子间皮尔逊相关系数表
    Table  1.  Pearson correlation coefficient between factors
    因子高程道路河流坡度断裂带与断层地层岩性土地利用类型
    高程1.000 0−0.162 40.155 4−0.170 80.231 7−0.256 4−0.029 8
    道路−0.162 41.000 00.140 50.349 3−0.207 6−0.093 00.002 5
    河流0.155 40.140 51.000 00.126 9−0.067 20.301 10.012 2
    坡度−0.170 80.349 30.126 91.000 0−0.237 1−0.051 0−0.064 9
    断裂带与断层0.231 7−0.207 6−0.067 2−0.237 11.000 0−0.196 0−0.265 4
    地层岩性−0.256 4−0.093 00.301 1−0.051 0−0.196 01.000 00.072 5
    土地利用类型−0.029 80.002 50.012 2−0.064 9−0.265 40.072 51.000 0
    下载: 导出CSV 
    | 显示表格

    随机森林(Random Forest)是一种基于决策树模型的Bagging(Bootstrap AGgregation)的优化版,由于其具有对特征鲁棒性强、适用于高维稠密性数据、并行集成、对不平衡的数据集可自动调整误差、微调超参数等优势,可以获得准确结果,常被用于各种分类和回归任务(Alsahaf et al.,2018)。它的基本单元是决策树,但其本质是集成学习方法,是机器学习的一个分支,其核心思想始终为Bagging。然而,已经做了一些特有的改进,随机森林使用CART决策树作为基学习器。

    基于Gini系数的随机森林建立在许多决策树上并支持各种特征权重度量。其中之一为特征与不平衡数据输出的相关性,一旦分类器测量了Gini系数,这种特征选择技术就在 RF 中采用了权重调整技术。Gini指数具有在特定节点中划分二进制类的能力(Disha et al.,2022)。对于具有两个以上不同值的属性,考虑属性子集,通过调整不平衡类分布的随机森林算法中的权重,使用Gini系数标准来分裂树,计算特征重要性得分。GI值越高,特征对模型预测的平均贡献越大,模型的解释能力越好,所有GI特性之和为1。

    $$ G I_{\mathrm{m}}=\sum\nolimits_{k=1}^{|K|} \sum\nolimits_{k^{\prime} \neq \mathrm{k}} p_{m k} p_{m k^{\prime}}=1-\sum\nolimits_{k=1}^{|K|} p_{m k}^2 $$ (2)
    $$V I M_{i j}^{(\text {Gini })}=\sum\nolimits_{m \in M} V I M_{j m}^{(\text {Gini })}$$ (3)
    $$ V I M_j=\frac{V I M_j}{\displaystyle \sum\nolimits_{i=1}^c V I M_i}$$ (4)

    公式(2):$ GI_{\text{m}}^{} $为基尼指数,K代表k个类别,$ {p_{mk}} $表示节点mk的比例;公式(3):$ VIM_{ij}^{(Gini)} $表示特征i在第j颗树的权重;公式(4)表示对所求出的所有重要度得分进行归一化处理。

    笔者把94个滑坡点记为‘1’,等量非滑坡点记为‘0’,将7个评价指标因子的属性提取至训练集,构造随机森林二分类模型,并从sklearn库中调用Random Forest Classifier方法,将训练集代入RF模型进行训练。同时为了确保结果的可靠性和准确性,在原本的参数设定基础上,采用贝叶斯优化算法搜索最优参数值。优化结果中,当每次迭代完成后更新权重时的步长取0.1,max_depth取4,num round取30时,效果最佳。用测试集对RF模型进行预测,结合公式(3),将得到各评价因子的权重归一化后导入ArcGIS中的栅格计算器生成滑坡易发性图,采用自然间断法将分区图划分为极高、高、中、低、极低5个等级(图5),易发性越高代表越容易发生滑坡。

    图  5  Gini–RF模型滑坡易发性分区图
    Figure  5.  Susceptibility zoning map of Gini–RF

    XGBoost是一种基于决策树模型和梯度提升的集成机器学习算法,为了控制模型的复杂度,它将正则化项添加到损失函数中,正则项包括每个叶子节点权重的平方和与节点个数。XGBoost处理缺失值并通过学习模型选取缺失值最佳的默认分割方向(Inan et al.,2021)。

    描述的数据在预处理过程之后,基于Python3.6与R语言,采用Scikit-learn构建XGBoost多分裂滑坡易发性模型(Alsahaf et al.,2018)。同时为了在独立的验证数据集上对子序列进行测试降低偶然性,选取最优子树,通过贝叶斯算法优化,利用五折交叉验证获得每个模型评价度量的平均值,所有测试集的平均指标被认为是最终结果。将预测结果导入ArcGIS绘制滑坡易发性图(图6)。样本集在所选参数值上的交叉验证准确度结果显示:当进行第5次五折交叉后,训练集和测试集的AUC值达到最大值并趋于稳定(图7)。

    图  6  基于XGBoost的滑坡易发性图
    Figure  6.  Susceptibility zoning map of XGBoost
    图  7  XGBoost 五折交叉验证结果
    Figure  7.  XGBoost 50% ross validation results

    Light Gradient Boosting Machine (LightGBM)是一种高性能、开源、快速的分类、回归、排名的方法,同时也是基于决策树算法的梯度提升算法。LightGBM 采用直方图算法来降低内存消耗,使数据分割更简单,将浮点的连续特征离散化为式子中的k个离散值,构造一个宽度为 k的直方图,将数据进行遍历训练,计算直方图中每个离散值的累积统计信息,在特征选择中,只要根据直方图离散值搜索最佳的分割点即可(Zeng et al.,2019)。

    在4.2使用方法基础上,将研究区的123 156 296个栅格提取各评价因子的属性值到点,生成123 156 296×7的表格,导入训练好的机器学习模型中,预测每个栅格发生滑坡的概率,利用点转栅格工具将所有的点生成栅格数据,再用自然间断法将研究区的滑坡易发区分为极高、高、中、低、极低5个类别(图8)。图9为LightGBM的学习曲线。

    图  8  基于LightGBM的滑坡易发性图
    Figure  8.  Susceptibility zoning map of Gini–RF
    图  9  LightGBM学习曲线
    Figure  9.  LightGBM learning curve

    基于ArcGIS,分别统计3种不同机器学习模型在每个易发性分区的栅格个数与滑坡点个数(表2),3种模型的滑坡易发性结果呈现出一定的差异,但整体趋同。Gini–RF、XGBoost 和LightGBM模型均在极低类别中的百分比值最高。对于Gini–RF模型,从极高到极低易发性的面积比分别为11.99%、12.63%、19.58%、26.77%和29.03%。XGBoost模型的极高、高、中、低和极低易发性区域分别占12.05%、12.50%、19.62%、26.78%和29.05%。对于LightGBM模型,极低、低、中、高和极高易发性区域分别占12.14%、12.41%、19.43%、26.47%和29.55%。根据滑坡位置的分布可以看出,大多数历史滑坡记录位于高易发性地区,正如Gini–RF、XGBoost和 LightGBM模型所预测的那样。LightGBM模型的性能最高,其次为XGBoost与Gini–RF。

    表  2  机器学习模型易发性分区对比
    Table  2.  Comparison of machine learning model vulnerability zones
    类别机器学习模型
    Gini–RFXGBoostLightGBM
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    极高 14766439 11.99 44 23.40 14840333 12.05 52 27.66 14951174 12.14 56 29.79
    15554640 12.63 68 36.17 15394537 12.50 72 38.30 15283696 12.41 75 39.89
    24114003 19.58 38 20.21 24163265 19.62 40 21.28 23929268 19.43 42 22.34
    32968940 26.77 22 11.70 32981256 26.78 10 5.32 32599471 26.47 8 4.26
    极低 35752274 29.03 16 8.51 35776905 29.05 14 7.45 36392714 29.55 7 3.72
    下载: 导出CSV 
    | 显示表格

    根据评价因子的选取及易发性评价分区图可知,滑坡高和极高易发区多位于墨脱县的达木乡、帮辛乡,林芝县的丹娘、里龙、扎西饶登乡,朗县的陇村,工布江达的江达乡。在这些地区应采取相应的地质灾害防治措施。特别是位于雅鲁藏布江与尼洋河两岸海拔较低、坡度为30°~40°,距河流、道路、断裂带200 m以内的区域。

    究其原因,这类地区位于雅鲁藏布江与尼洋河两岸南部与印度板块和亚欧板块交界,地壳运动剧烈,孕育一系列区域性断裂,断裂带与断层降低了岩层的完整性和强度,并且高程多位于200~1 000 m,大多数坡度小于40°,在此范围内人工多进行切坡建房和道路建设等强烈活动,造成大量的裸露斜坡,加上长期的流水作用,使河流两岸遭受严重的侵蚀和冲刷,导致沉积物饱和,从而降低斜坡的完整性,使斜坡运动或质量运动,且距道路越近,道路建设所造成的破坏性会对边坡稳定性产生负面影响,因此滑坡灾害频发。

    相反,滑坡低易发区主要分布在工布江达县的错高、朱拉区,林芝市的冲果俄、港阿如,米林县的苏鲁胖地区,其特点是坡度较缓、人类活动较少,远离道路、河流、断裂带。

    在机器学习中,性能指标通常用于二进制分类中测试集的正确预测数。笔者使用准确度(Accuracy)、精确度(Precision)、召回率(Recall)、F1分数、(ROC)曲线和AUC值6个指标对不同机器学习模型的精度进行了评价。准确度分数是评估模型在二元分类问题中的性能的最常用指标,表示在所有样本中,能被正确识别的概率;精确度是通过计算模型预测为真时实例为正样本的频率来评估模型性能的度量;召回率是模型正确检测真阳性实例的度量;F1分数是召回率和精度之间的权衡指数,同时考虑了FP和FN,使模型整体更具准确性。具体公式如下:

    $$ 准确度=\frac{TP+TN}{TP+FP+TN+FN} $$ (5)
    $$ 精确度=\frac{TP}{TP+FP} $$ (6)
    $$ 召回率=\frac{TP}{TP+FN} $$ (7)
    $$ {\text{F}}1 = \frac{{2Precision \times Recall}}{{Precision + Recall}} $$ (8)

    式中:TPTN分别为真阳性和真阴性,代表正确分类的像素数;FPFN分别是假阳性和假阴性,代表错误分类的像素数。

    为了得到不同机器学习算法在测试数据集上的预测准确性,基于上述方法,利用公式(5)~公式(8)计算精确度、精确度、召回率和F1指数,随机抽取30%样本作为测试样本,得出模型的泛化能力和准确率(表3)。可以看出,基于不同框架算法的预测性能不一样。3种机器学习模型中,LightGBM模型在超参数优化下其AUC(0.843 2)、ACC(0.853 1)、F1分数(0.834 5)、Precesion(0.825 1)均高于另外两种机器学习模型。

    表  3  各机器学习模型准确率
    Table  3.  Accuracy of each machine learning model
    机器学习模型Gini–RFXGBoostLightGBM
    AUC0.752 40.803 50.825 6
    5–fold0.822 50.835 80.843 2
    ACC0.723 40.814 80.825 6
    5–fold0.753 40.835 90.853 1
    F1-score0.775 20.786 70.802 1
    5-fold0.802 60.825 60.834 5
    Precesion0.783 40.796 80.804 5
    5–fold0.802 60.813 20.825 1
    下载: 导出CSV 
    | 显示表格

    在机器学习中,ROC曲线被广泛应用于二分类问题中来评估分类器的可信度(张玘恺等,2020)。AUC为ROC曲线下面积。AUC=1表示该曲线存在至少一个阈值能得出完美预测。曲线纵轴为真阳率TPR,横轴为假阳率FPR,越靠近左上角,则认为该判断指标预测能力越好。从这条 ROC曲线可以看出,经过网格搜索与5折交叉验证后的蓝色曲线LightGBM模型更接近左上角,AUC值为0.843 2,与Gini–RF模型的0.822 5有较大提升,且准确率高于XGBoost模型的0.935 8(图10)。XGBoost相比Gini–RF而言,对模型的损失函数进行了改进,并加入了模型复杂度的正则项,而LightGBM是在XGBoost基础上,优化了模型的训练速度。因此,LightGBM的泛化能力最好,易发性划区可靠性高。

    图  10  机器学习模型ROC曲线
    Figure  10.  ROC curve of machine learning model

    对比近几年来雅鲁藏布江与尼洋河两岸发生的滑坡事件(表4),将9个滑坡信息导入生成的滑坡易发性图中,可知3个滑坡点位于中易发区,3个滑坡点位于高易发区,剩余均出现在极高易发区。

    表  4  近几年以来滑坡事件
    Table  4.  Landslide events in recent years
    地区位置发生时间来源易发性分区
    林芝市加拉村E 94°54′04″,N 29°41′45″2018.10.29新华社
    林芝市加拉村下游7公里处E 94°54′24″,N 29°41′27″2022.01.22中国青年网
    林芝市波密县古乡索通村羌纳自然村E 95°27′41″,N 30°00′21″2017.8.24中国军视网
    林芝市朗县辖区560国道K80处E 92°49′24″,N 29°04′03″2022.7.22朗县公安局
    林芝市米林县派镇加拉村E 94°54′04″,N 29°41′45″2018.10.17西藏之声
    林芝市朗县E 93°00′48″,N 29°04′42″2022.7.23朗县住建局
    林芝市墨脱县达木乡E 95°27′46″,N 29°29′35″2021.7.4中国自然资源报极高
    国道559线波密至墨脱路段E 97°02′03″,N 29°19′14″2019.5.16西藏自治区交通运输厅极高
    林芝市墨脱县达木珞巴民族乡小学E 95°27′52″,N 29°29′46″2020.8.26新京报极高
    下载: 导出CSV 
    | 显示表格

    为了进一步验证本研究分析方法的可靠性,选择羌纳巴嘎滑坡与墨脱县公路滑坡两处滑坡现场调查进行对比验证(图11)。

    图  11  典型滑坡验证
    Figure  11.  Verification of typical landslides

    西藏自治区林芝地区米林县羌纳乡巴嘎村滑坡位于E 94°24′34″,N 29°20′16″;所处地形地貌为高山河谷地貌;下付基为板岩;斜坡结构为岩土复合斜坡,坡度为30°;植被覆盖率一般,土地利用较低;滑坡前缘至斜坡下方公路,后缘至斜坡山脊处,滑坡体主要为碎土石,滑床为板岩。该滑坡变形特征主要为前方公路开挖斜坡坡脚,导致斜坡失稳。

    林芝地区墨脱县公路地处E 93°38′10″,N 29°08′28″,滑坡长为30 m,宽为40 m,厚度为2 m,面积为1 200 m²,体积为2 400 m3,坡度为35°,坡向为260°,滑坡侧边界、前缘清晰可辨。该滑坡微地貌为陡坡,地层岩性为泥岩,位于白龙断层附近,斜坡结构类型为土质斜坡,坡形为凸形,滑坡下方人类活动较少,仅有一小段公路,植被覆盖率较低,为低矮灌丛,滑坡位于河流右凸岸。目前状况为不稳定。

    两处滑坡均处于滑坡高易发区,再次验证了本研究机器学习模型划区的准确性。研究结果可供区域滑坡防治相关部门参考。

    (1)统计各评价因子分级范围内滑坡点数量,表明在高程为32~1 544 m与2 722~3 752 m、坡度为30°~40°、地层岩性为雅鲁藏布江带闪片岩、土地利用为草地、距断裂带、河流与道路200 m以内滑坡发生的次数最多。

    (2)采用五折交叉验证后,基于贝叶斯优化算法的Gini–RF模型准确率由原来的0.752 4提升到0.822 5,XGBoost与LightGBM模型准确率也提升了0.032 3与0.017 6。3种模型对研究区的滑坡分区都具有很高的准确性,其中LightGBM模型的性能最好,AUC值、精确度、F1分数、泛化能力、拟合程度、精确率更高。

    (3)利用Gini–RF、XGBoost、LightGBM等3种集成机器学习模型对滑坡易发性进行分析,表明滑坡高和极高易发区多位于 墨脱县的达木乡、帮辛乡,林芝县的丹娘、里龙、扎西饶登乡,朗县的陇村,工布江达的江达乡。特别是位于雅鲁藏布江与尼洋河两岸海拔较低、坡度为30°~40°、距河流、道路、断裂带200 m以内的区域。在这些地区应采取相应的地质灾害防治措施。

    (4)滑坡极高与高易发性区占比分别为12.14%和12.41%,低和极低易发区分别占26.47%与29.55%,区内一半以上的地区不容易发生滑坡灾害。滑坡易发性分区结果与现场滑坡灾害调查结果吻合较好,同时利用研究区近几年已发生的滑坡点进行验证,表明模型的可靠性高,滑坡分区图可为有关地方部门的防灾减灾活动提供指导。

  • 图  1   研究区地理位置及滑坡分布

    Figure  1.   Geographical location and landslide distribution of the study area

    图  2   流程图

    Figure  2.   Flow Chart

    图  3   各评价因子分级图

    Figure  3.   Grading chart of evaluation factors

    图  4   各评价因子与灾害点的关系

    Figure  4.   Relationship between assessment factors and disaster points

    图  5   Gini–RF模型滑坡易发性分区图

    Figure  5.   Susceptibility zoning map of Gini–RF

    图  6   基于XGBoost的滑坡易发性图

    Figure  6.   Susceptibility zoning map of XGBoost

    图  7   XGBoost 五折交叉验证结果

    Figure  7.   XGBoost 50% ross validation results

    图  8   基于LightGBM的滑坡易发性图

    Figure  8.   Susceptibility zoning map of Gini–RF

    图  9   LightGBM学习曲线

    Figure  9.   LightGBM learning curve

    图  10   机器学习模型ROC曲线

    Figure  10.   ROC curve of machine learning model

    图  11   典型滑坡验证

    Figure  11.   Verification of typical landslides

    表  1   因子间皮尔逊相关系数表

    Table  1   Pearson correlation coefficient between factors

    因子高程道路河流坡度断裂带与断层地层岩性土地利用类型
    高程1.000 0−0.162 40.155 4−0.170 80.231 7−0.256 4−0.029 8
    道路−0.162 41.000 00.140 50.349 3−0.207 6−0.093 00.002 5
    河流0.155 40.140 51.000 00.126 9−0.067 20.301 10.012 2
    坡度−0.170 80.349 30.126 91.000 0−0.237 1−0.051 0−0.064 9
    断裂带与断层0.231 7−0.207 6−0.067 2−0.237 11.000 0−0.196 0−0.265 4
    地层岩性−0.256 4−0.093 00.301 1−0.051 0−0.196 01.000 00.072 5
    土地利用类型−0.029 80.002 50.012 2−0.064 9−0.265 40.072 51.000 0
    下载: 导出CSV

    表  2   机器学习模型易发性分区对比

    Table  2   Comparison of machine learning model vulnerability zones

    类别机器学习模型
    Gini–RFXGBoostLightGBM
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    栅格
    个数
    栅格
    占比(%)
    滑坡
    点个数
    滑坡
    占比(%)
    极高 14766439 11.99 44 23.40 14840333 12.05 52 27.66 14951174 12.14 56 29.79
    15554640 12.63 68 36.17 15394537 12.50 72 38.30 15283696 12.41 75 39.89
    24114003 19.58 38 20.21 24163265 19.62 40 21.28 23929268 19.43 42 22.34
    32968940 26.77 22 11.70 32981256 26.78 10 5.32 32599471 26.47 8 4.26
    极低 35752274 29.03 16 8.51 35776905 29.05 14 7.45 36392714 29.55 7 3.72
    下载: 导出CSV

    表  3   各机器学习模型准确率

    Table  3   Accuracy of each machine learning model

    机器学习模型Gini–RFXGBoostLightGBM
    AUC0.752 40.803 50.825 6
    5–fold0.822 50.835 80.843 2
    ACC0.723 40.814 80.825 6
    5–fold0.753 40.835 90.853 1
    F1-score0.775 20.786 70.802 1
    5-fold0.802 60.825 60.834 5
    Precesion0.783 40.796 80.804 5
    5–fold0.802 60.813 20.825 1
    下载: 导出CSV

    表  4   近几年以来滑坡事件

    Table  4   Landslide events in recent years

    地区位置发生时间来源易发性分区
    林芝市加拉村E 94°54′04″,N 29°41′45″2018.10.29新华社
    林芝市加拉村下游7公里处E 94°54′24″,N 29°41′27″2022.01.22中国青年网
    林芝市波密县古乡索通村羌纳自然村E 95°27′41″,N 30°00′21″2017.8.24中国军视网
    林芝市朗县辖区560国道K80处E 92°49′24″,N 29°04′03″2022.7.22朗县公安局
    林芝市米林县派镇加拉村E 94°54′04″,N 29°41′45″2018.10.17西藏之声
    林芝市朗县E 93°00′48″,N 29°04′42″2022.7.23朗县住建局
    林芝市墨脱县达木乡E 95°27′46″,N 29°29′35″2021.7.4中国自然资源报极高
    国道559线波密至墨脱路段E 97°02′03″,N 29°19′14″2019.5.16西藏自治区交通运输厅极高
    林芝市墨脱县达木珞巴民族乡小学E 95°27′52″,N 29°29′46″2020.8.26新京报极高
    下载: 导出CSV
  • 贾俊, 毛伊敏, 孟晓捷, 等. 深度随机森林和随机森林算法的滑坡易发性评价对比—以汉中市略阳县为例[J]. 西北地质, 2023, 56(3): 239−249. doi: 10.12401/j.nwg.2023084

    JIA Jun, MAO Yimin, MENG Xiaojie, et al. Comparison of Landslide Susceptibility Evaluation by Deep Random Forest and Random Forest Model: A Case Study of Lueyang County, Hanzhong City[J]. Northwestern Geology, 2023, 56(3): 239−249. doi: 10.12401/j.nwg.2023084

    康孟羽, 朱月琴, 陈晨, 等. 基于多元非线性回归和BP神经网络的滑坡滑动距离预测模型研究[J]. 地质通报, 2022, 41(12): 2281−2289.

    KANG Mengyu, ZHU Yueqin, CHEN Chen, et al. Research on landslide sliding distance prediction model based on multiple nonlinear regression and BP neural network[J]. Geological Bulletin of China, 2022, 41(12): 2281−2289.

    孟晓捷, 张新社, 曾庆铭, 等. 基于加权信息量法的黄土滑坡易发性评价——以1∶5万天水市麦积幅为例[J]. 西北地质, 2022, 55(2): 249−259.

    MENG Xiaojie, ZHANG Xinshe, ZENG Qingming, et al. The Susceptibility Evaluation of Loess Landslide Based on Weighted Information Value Method: Taking 1∶50 000 Map of Maiji District of Tianshui City As an Example[J]. Northwestern Geology, 2022, 55(2): 249−259.

    乔德京, 王念秦, 郭有金, 杨盼盼. 加权确定性系数模型的滑坡易发性评价[J]. 西安科技大学学报, 2020, 40(02): 259-267

    QIAO Dejing, WANG Nianqin, GUO Youjin, et al, Landslide susceptibility assessment based on weighted certainty factor model[J]. Journal of Xi'an University of Science and Technology, 2020, 40(02): 259-267.

    沈玲玲, 刘连友, 许冲, 王静璞. 基于多模型的滑坡易发性评价——以甘肃岷县地震滑坡为例[J]. 工程地质学报, 2016, 24(01): 19-28 doi: 10.13544/j.cnki.jeg.2016.01.003

    SHEN Lingling, LIU Lianyou, XU Chong, et al. Multi-models based landslide susceptibility evaluation—illustrated with landslides triggered by minxian earthquake[J]. Journal of Engineering Geology, 2016, 24(01): 19-28. doi: 10.13544/j.cnki.jeg.2016.01.003

    苏立彬, 郭永刚, 吴悦, 杨永涛. 基于DEM的尼洋河流域地貌形态分析[J]. 中国水土保持科学, 2020, 18(03): 12-21 doi: 10.16843/j.sswc.2020.03.002

    SU Libin, GUO Yonggang, WU Yue, et al. Analysis of geomorphology of Niyang River Basin based on digital elevation model[J]. soil and water conservation science, 2020, 18(03): 12-21. doi: 10.16843/j.sswc.2020.03.002

    王瑞琪, 王学良, 刘海洋, 等. 基于精细 DEM 的崩塌滑坡灾害识别及主控因素分析——以雅鲁藏布江缝合带加查-朗县段为例[J]. 工程地质学报, 2019, 27(5): 1146-1152

    WANG Ruiqi, WANG Xueliang, LIU Haiyang, et al. Identification and main controlling factor analysis of collapse and landslide based on fine dem——taking jiacha-langxian section of yarlung zangbo suture zone as an example[J]. Journal of Engineering Geology, 2019, 27(5): 1146-1152.

    武辰爽. 基于GIS的川藏铁路林芝段地质灾害危险性评价[D]. 拉萨: 西藏大学, 2021

    WU Chenshuang. Evaluation of Geological Hazard Risk Based on Geological Information System in Nyingchi of Sichuan-Tibet Railway[D]. Lasa: Tibet University, 2021.

    杨创奇, 陶攀, 杨正. 基于逻辑回归树耦合熵指数模型的滑坡易发性分区——以陕西省延安市吴起县滑坡为例[J]. 人民长江, 2022, 53(05): 128-134

    YANG Chuangqi, TAO Pan, YANG Zheng. Landslide susceptibility zoning based on logistic regression tree coupled entropy index model: case of landslide in Wuqi County, Yan'an City, Shaanxi Province[J]. People's Yangtze River, 2022, 53(05): 128-134.

    张玘恺, 凌斯祥, 李晓宁, 等. 九寨沟县滑坡灾害易发性快速评估模型对比研究[J]. 岩石力学与工程学报, 2020, 39(8): 1595-1610 doi: 10.13722/j.cnki.jrme.2020.0029

    ZHANG Qikai, LING Sixiang, LI Xiaoning, et al. Comparison of landslide susceptibility mapping rapid assessment models in Jiuzhaigou County, Sichuan province, China[J]. Chinese Journal of Rock Mechanics and Engineering, 2020, 39(8): 1595-1610. doi: 10.13722/j.cnki.jrme.2020.0029

    张林梵, 王佳运, 张茂省, 等. 基于BP神经网络的区域滑坡易发性评价[J]. 西北地质, 2022, 55(02): 260-270

    ZHANG Linfan, WANG Jiayun, ZHANG Maosheng, et al. Evaluation of Regional Landslide Susceptibility Assessment Based on BP Neural Network[J]. Northwest Geology, 2022, 55(02): 260-270.

    张琪, 巨能攀, 张成强, 等. 库水位变化时陡倾软弱顺层岩质滑坡变形机制[J]. 成都理工大学学报(自然科学版), 2023, 50(2): 206−217.

    ZHANG Qi, JU Nengpan, ZHANG Chengqiang, et al. Landslide deformation mechanism of steep weak bedding rock under the variation of reservoir water level[J], Journal of Chengdu University of Technology (Science & Technology Edition), 2023, 50(2): 206−217.

    张文龙, 张振凯, 杨帅. 勉略宁地区地质灾害危险性智能评价和区划研究[J]. 西北地质, 2023, 56(1): 276−283.

    ZHANG Wenlong, ZHANG Zhenkai, YANG Shuai. Study on Intelligent Evaluation and Zoning of Geohazards Risk in Mianluening Area[J]. Northwestern Geology, 2023, 56(1): 276−283.

    赵永辉. 雅鲁藏布江流域嘎贡沟巨型滑坡变形破坏模式及演化过程研究[J]. 防灾科技学院学报, 2019, 21(04): 1-7 doi: 10.3969/j.issn.1673-8047.2019.04.001

    ZHAO Yonghui. Deformation and Failure Model and Evolution Process of Giant Landslides in Gagong Valley in the Yarlung Zangbo River Basin[J]. Journal of Institute of Disaster Prevention, 2019, 21(04): 1-7. doi: 10.3969/j.issn.1673-8047.2019.04.001

    赵永辉. 雅鲁藏布江公路滑坡发育特征及破坏机理研究[J]. 公路, 2021, 66(4): 6 -10.

    ZHAO Yonghui. Research on Development Characteristics and Failure Process of Highway Landslide along the Yarlung Zangbo River[J]. Highway, 2021, 66(4): 6-10.

    周硼焜, 张洪波, 赵伟华, 等. 基于Massflow的西南山区某大型岩质滑坡-碎屑流运动模拟研究[J]. 成都理工大学学报(自然科学版), 2023, 50(3): 361−368.

    ZHOU Pengkun, ZHANG Hongbo, ZHAO Weihua, et al. Study of a large-scale rock landslide-debris flow in the southwest mountainous region of China based on Massflow numerical simulation[J]. Journal of Chengdu University of Technology (Science & Technology Edition), 2023, 50(3): 361−368.

    Alsahaf A, Azzopardi G, Ducro B, et al. Predicting Slaughter Weight in Pigs with Regression Tree Ensembles[C]. APPIS, 2018: 1−9.

    Arabameri A, Pradhan B, Rezaei K, et al. Assessment of landslide susceptibility using statistical-and artificial intelligence-based FR–RF integrated model and multiresolution DEMs[J]. Remote Sensing, 2019, 11(9): 999. doi: 10.3390/rs11090999

    Batar A K, Watanabe T. Landslide susceptibility mapping and assessment using geospatial platforms and weights of evidence (WoE) method in the Indian Himalayan region: Recent developments, gaps, and future directions[J]. ISPRS International Journal of Geo-Information, 2021, 10(3): 114. doi: 10.3390/ijgi10030114

    Disha R A, Waheed S. Performance analysis of machine learning models for intrusion detection system using Gini Impurity-based Weighted Random Forest (GIWRF) feature selection technique[J]. Cybersecurity, 2022, 5(1): 1-22. doi: 10.1186/s42400-021-00103-8

    Hong H, Liu J, Bui D T, et al. Landslide susceptibility mapping using J48 Decision Tree with AdaBoost, Bagging and Rotation Forest ensembles in the Guangchang area (China)[J]. Catena, 2018, 163: 399-413. doi: 10.1016/j.catena.2018.01.005

    Inan M S K, Ulfath R E, Alam F I, et al. Improved sampling and feature selection to support extreme gradient boosting for PCOS diagnosis[C]. 2021 IEEE 11th Annual Computing and Communication Workshop and Conference (CCWC), IEEE, 2021: 1046−1050.

    Khan H, Shafique M, Khan M A, et al. Landslide susceptibility assessment using Frequency Ratio, a case study of northern Pakistan[J]. The Egyptian Journal of Remote Sensing and Space Science, 2019, 22(1): 11-24. doi: 10.1016/j.ejrs.2018.03.004

    Kouhartsiouk D, Perdikou S. The application of DInSAR and Bayesian statistics for the assessment of landslide susceptibility[J]. Natural Hazards, 2021, 105(3): 2957-2985. doi: 10.1007/s11069-020-04433-7

    Lee D H, Kim Y T, Lee S R. Shallow landslide susceptibility models based on artificial neural networks considering the factor selection method and various non-linear activation functions[J]. Remote Sensing, 2020, 12(7): 1194. doi: 10.3390/rs12071194

    Polykretis C, Chalkias C. Comparison and evaluation of landslide susceptibility maps obtained from weight of evidence, logistic regression, and artificial neural network models[J]. Natural hazards, 2018, 93(1): 249-274. doi: 10.1007/s11069-018-3299-7

    Rehman A, Song J, Haq F, et al. Multi-Hazard Susceptibility Assessment Using the Analytical Hierarchy Process and Frequency Ratio Techniques in the Northwest Himalayas, Pakistan[J]. Remote Sensing, 2022, 14(3): 554. doi: 10.3390/rs14030554

    Taalab K, Cheng T, Zhang Y. Mapping landslide susceptibility and types using Random Forest[J]. Big Earth Data, 2018, 2(2): 159-178. doi: 10.1080/20964471.2018.1472392

    Tanyas H, Rossi M, Alvioli M, et al. A global slope unit-based method for the near real-time prediction of earthquake-induced landslides[J]. Geomorphology, 2019, 327: 126-146. doi: 10.1016/j.geomorph.2018.10.022

    Tien Bui D, Shahabi H, Shirzadi A, et al. Landslide detection and susceptibility mapping by airsar data using support vector machine and index of entropy models in cameron highlands, malaysia[J]. Remote Sensing, 2018, 10(10): 1527. doi: 10.3390/rs10101527

    Zeng H, Yang C, Zhang H, et al. A lightGBM-based EEG analysis method for driver mental states classification[J]. Computational Intelligence and Neuroscience, 2019.

    Zweifel L, Samarin M, Meusburger K, et al. Investigating causal factors of shallow landslides in grassland regions of Switzerland[J]. Natural Hazards and Earth System Sciences, 2021, 21(11): 3421-3437. doi: 10.5194/nhess-21-3421-2021

  • 期刊类型引用(6)

    1. 李光明,杨玉飞,唐亚明,王小浩,尹春旺,冯凡,周永恒. 数据驱动模型评价滑坡易发性的对比研究:以黄河中游流域为例. 西北地质. 2025(02): 51-65 . 本站查看
    2. 张天宇,李林翠,刘凡,洪增林,钱法桥,胡斌,张淼. 基于优化最大熵模型的黄土滑坡易发性评价:以陕西省吴起县为例. 西北地质. 2025(02): 172-185 . 本站查看
    3. 胡祥祥,石亚亚,胡良柏,吴涛,庞栋栋,刘帅令,宋宝. 融合InSAR与信息量–机器学习耦合模型的黄土滑坡易发性评价. 西北地质. 2025(02): 159-171 . 本站查看
    4. 刘伊铭,徐胜华,刘春阳,马钰. 顾及多方法集成特征选择与负样本优化的滑坡易发性评价. 测绘通报. 2024(09): 74-79 . 百度学术
    5. 瞿伟,李昕,李久元,唐兴友,高源. 一种改进自适应步长人工蜂群优化随机森林的滑坡风险性评价方法. 大地测量与地球动力学. 2024(12): 1211-1219 . 百度学术
    6. 芮焘,段国勇,王彦海,邹英杰,郑武略. 残差全连接神经网络在输电塔基边坡风险评价中的应用. 国外电子测量技术. 2024(11): 160-169 . 百度学术

    其他类型引用(5)

图(11)  /  表(4)
计量
  • 文章访问数:  219
  • HTML全文浏览量:  56
  • PDF下载量:  68
  • 被引次数: 11
出版历程
  • 收稿日期:  2022-10-16
  • 修回日期:  2023-10-20
  • 录用日期:  2023-10-25
  • 网络出版日期:  2023-03-16
  • 刊出日期:  2024-02-19

目录

/

返回文章
返回