GEE 10m 全球 LULC 数据集 ESRI Land Cover

2024-06-01 22:44

本文主要是介绍GEE 10m 全球 LULC 数据集 ESRI Land Cover,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

土地利用土地覆盖(LULC)地图在许多行业部门和发展中国家越来越成为决策者的重要工具。这些地图提供的信息有助于通过更好地理解和量化地球过程和人类活动的影响,从而制定政策和土地管理决策。


ESRI Land Cover 数据介绍

ArcGIS Living Atlas of the World 提供了详细、准确且及时的全球 LULC 地图。该数据是 Esri 和 Impact Observatory 合作的结果。有关数据的更多信息,请参阅 Sentinel-2 10 米土地利用/土地覆盖时间序列。

  • 网站访问链接:https://livingatlas.arcgis.com/landcoverexplorer/

  • 土地利用/土地覆盖(LULC)地图的重要性:

    • 土地利用/土地覆盖(LULC)地图是分析师和决策者在政府、民间社会、工业和金融领域中监测全球环境变化和衡量可持续生计与发展的风险时所需的基础地理空间数据产品。对高层次、自动化的地理空间分析产品有着强烈的需求,这些产品能够将像素转化为非地理空间专家可操作的见解。
  • Sentinel-2 卫星的优势:

    • Sentinel-2 卫星自2015年中期首次发射以来,凭借其高空间分辨率、光谱分辨率和时间分辨率,成为 LULC 制图的优秀候选者。深度学习和可扩展的云计算进步如今提供了所需的分析能力,能够解锁全球卫星影像观测的价值。
  • 利用深度学习创建全球 LULC 地图:

    • 基于一个包含超过 50 亿个人工标记 Sentinel-2 像素的全新大型数据集,我们开发并部署了一种深度学习分割模型,以10米分辨率在 Sentinel-2 数据上创建全球 LULC 地图。该地图实现了最先进的精度,并使时间序列观测的自动化 LULC 制图成为可能。

数据研制流程

  • 论文参考链接:https://ieeexplore.ieee.org/document/9553499/

K. Karra, C. Kontgis, Z. Statman-Weil, J. C. Mazzariello, M. Mathis and S. P. Brumby, “Global land use / land cover with Sentinel 2 and deep learning,” 2021 IEEE International Geoscience and Remote Sensing Symposium IGARSS, Brussels, Belgium, 2021, pp. 4704-4707, doi: 10.1109/IGARSS47720.2021.9553499. keywords: {Deep learning;Industries;Image segmentation;Satellites;Time series analysis;Government;Geoscience and remote sensing;land use land cover;deep learning;segmentation;Sentinel 2},

1 训练数据

  1. 全球、地理平衡的训练数据集

    • 使用了超过 24,000 个 5 公里 × 5 公里的图像片段。
    • 图像片段被手工标记为十个类别:水、树木、草、被淹没的植被、农作物、灌木丛/灌木丛、建筑区域、裸露地面、雪/冰和云。
    • 数据集采用随机分层抽样方法,从 14 个主要生物群落中收集。
  2. 密集标记方法

    • 注释者使用密集标记方法代替单像素标签。
    • 在场景中的各个要素类周围绘制矢量边界。
    • 密集标记使深度学习算法能够探索图像的空间和光谱特征,并且比单像素注释更快地恢复每个像素的标签。

2. 模型开发

  1. UNet 模型训练

    • 使用上述手工标记数据,从头训练了一个大型 UNet 模型。
      • UNet 是一种卷积神经网络架构,最初为生物医学图像分割而开发,也被证明在卫星图像的语义分割任务中有效。
  2. 分割任务

    • 将分割任务表述为一个逐像素分类问题。
    • 包含前述的十个类别以及一个针对未标记像素的额外“无数据”类别。
    • 利用分类交叉熵损失函数,并使用基于每个类别百分比比例的逆对数加权来处理数据集中的类别不平衡问题。

  1. 使用的 Sentinel-2 波段

    • 使用 Sentinel-2 L2A 表面反射校正影像的六个波段(红、绿、蓝、nir、swir1、swir2)。
    • 每个波段都转换为浮点数并在 0 和 1 之间缩放。
  2. 数据增强

    • 通过随机垂直和水平翻转图像进行数据增强。
    • 这样可以引入更多地理模式变化。
  3. 防止过度拟合

    • 在训练期间采用 dropout 技术,在每个批次中随机关闭 UNet 中 20% 的神经元。
      • dropout:一种防止神经网络过度拟合的技术,通过随机丢弃神经元来实现。
  4. 训练过程

    • 该模型经过 100 个 epoch 的训练才收敛。
      • epoch:机器学习中完成一次训练数据集迭代的过程。
    • 采用阶梯式学习率,在验证损失趋于稳定后,学习率会下降一个数量级。

结果表明,借助强大的训练数据集和深度学习模型,可以创建分辨率为 10 米的全球一致的 LULC 地图。我们的模型在十个类别中实现了 85% 的整体准确度,并且考虑到主要混淆因素具有直观意义,我们相信全球地图具有科学依据且实用。未来仍有几个有希望的改进途径。例如,包括 Sentinel-1 辐射校正地面范围检测 (GRD) 数据可以帮助处理所有类别,特别是在区分被淹没的植被与农田以及裸露与灌木丛/灌木方面。此外,添加时间序列特征(如一年内植被健康状况的测量值)可以区分草地、农作物和灌木丛/灌木。
对于表现较差的类别(例如草地、被淹没的植被),额外收集手工标记的训练数据以提供更多跨地域的此类示例可能会提高准确率。我们还计划试验模型架构、类别权重和其他数据增强技术,以提高模型性能和泛化能力。


GEE 使用数据集

以武汉为显示中心,ESRI Global-LULC 10m显示如下:

完整代码

// 加载 ESRI Land Cover 数据集
var esri_lulc10 = ee.ImageCollection("projects/sat-io/open-datasets/landcover/ESRI_Global-LULC_10m");// 设置可视化参数
var visualization = {bands: ['b1'],min: 1,max: 10,palette: ['1A5BAB', // 水'358221', // 树木'A7D282', // 草'87D19E', // 被淹没的植被'FFDB5C', // 农作物'EECFA8', // 灌木丛/灌木丛'ED022A', // 建筑区域'EDE9E4', // 裸露地面'F2FAFF', // 雪/冰'C8C8C8'  // 云]
};// 定义武汉的区域
var wuhan = ee.Geometry.Rectangle([113.6938, 29.9701, 115.0227, 31.2198]);// 裁剪函数
function clip(image) {return image.clip(wuhan);
}// 裁剪数据集
var clippedEsriLulc10 = esri_lulc10.map(clip);// 将裁剪后的 ESRI Land Cover 数据集添加到地图
Map.addLayer(clippedEsriLulc10.mosaic(), visualization, 'ESRI Land Cover - Wuhan');// 设置地图中心和缩放级别以显示湖北武汉
Map.setCenter(114.3055, 30.5928, 10); // 经度、纬度、缩放级别

代码说明

  1. 加载数据集

    var esri_lulc10 = ee.ImageCollection("projects/sat-io/open-datasets/landcover/ESRI_Global-LULC_10m");
    

    使用 ee.ImageCollection 函数加载 ESRI Land Cover 数据集。

  2. 设置可视化参数

    var visualization = {bands: ['b1'],min: 1,max: 10,palette: ['1A5BAB', // 水'358221', // 树木'A7D282', // 草'87D19E', // 被淹没的植被'FFDB5C', // 农作物'EECFA8', // 灌木丛/灌木丛'ED022A', // 建筑区域'EDE9E4', // 裸露地面'F2FAFF', // 雪/冰'C8C8C8'  // 云]
    };
    

    设置显示图层的波段、颜色范围和颜色调色板。

  3. 定义武汉的区域

    var wuhan = ee.Geometry.Rectangle([113.6938, 29.9701, 115.0227, 31.2198]);
    

    使用 ee.Geometry.Rectangle 函数定义武汉的区域。

  4. 裁剪函数

    function clip(image) {return image.clip(wuhan);
    }
    

    定义一个裁剪函数,将图像裁剪到武汉区域。

  5. 裁剪数据集

    var clippedEsriLulc10 = esri_lulc10.map(clip);
    

    使用 map 函数对数据集进行裁剪。

  6. 将裁剪后的数据集添加到地图

    Map.addLayer(clippedEsriLulc10.mosaic(), visualization, 'ESRI Land Cover - Wuhan');
    

    使用 Map.addLayer 函数将裁剪后的数据集添加到地图。

  7. 设置地图中心和缩放级别

    Map.setCenter(114.3055, 30.5928, 10);
    

    使用 Map.setCenter 函数设置地图中心为湖北武汉的经度(114.3055)和纬度(30.5928),缩放级别为 10。

ESRI Land Cover数据集是一个强大的资源,它在GEE平台上的应用为研究人员和决策者提供了深入洞察地球表面变化的能力。通过本博客的介绍,可以开始在GEE中探索和分析ESRI Land Cover数据集,以支持研究和项目。

如果这对您有所帮助,希望点赞支持一下作者! 😊

点击查看原文

file

这篇关于GEE 10m 全球 LULC 数据集 ESRI Land Cover的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1022305

相关文章

Pandas统计每行数据中的空值的方法示例

《Pandas统计每行数据中的空值的方法示例》处理缺失数据(NaN值)是一个非常常见的问题,本文主要介绍了Pandas统计每行数据中的空值的方法示例,具有一定的参考价值,感兴趣的可以了解一下... 目录什么是空值?为什么要统计空值?准备工作创建示例数据统计每行空值数量进一步分析www.chinasem.cn处

如何使用 Python 读取 Excel 数据

《如何使用Python读取Excel数据》:本文主要介绍使用Python读取Excel数据的详细教程,通过pandas和openpyxl,你可以轻松读取Excel文件,并进行各种数据处理操... 目录使用 python 读取 Excel 数据的详细教程1. 安装必要的依赖2. 读取 Excel 文件3. 读

Spring 请求之传递 JSON 数据的操作方法

《Spring请求之传递JSON数据的操作方法》JSON就是一种数据格式,有自己的格式和语法,使用文本表示一个对象或数组的信息,因此JSON本质是字符串,主要负责在不同的语言中数据传递和交换,这... 目录jsON 概念JSON 语法JSON 的语法JSON 的两种结构JSON 字符串和 Java 对象互转

C++如何通过Qt反射机制实现数据类序列化

《C++如何通过Qt反射机制实现数据类序列化》在C++工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作,所以本文就来聊聊C++如何通过Qt反射机制实现数据类序列化吧... 目录设计预期设计思路代码实现使用方法在 C++ 工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作。由于数据类

SpringBoot使用GZIP压缩反回数据问题

《SpringBoot使用GZIP压缩反回数据问题》:本文主要介绍SpringBoot使用GZIP压缩反回数据问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录SpringBoot使用GZIP压缩反回数据1、初识gzip2、gzip是什么,可以干什么?3、Spr

SpringBoot集成Milvus实现数据增删改查功能

《SpringBoot集成Milvus实现数据增删改查功能》milvus支持的语言比较多,支持python,Java,Go,node等开发语言,本文主要介绍如何使用Java语言,采用springboo... 目录1、Milvus基本概念2、添加maven依赖3、配置yml文件4、创建MilvusClient

SpringValidation数据校验之约束注解与分组校验方式

《SpringValidation数据校验之约束注解与分组校验方式》本文将深入探讨SpringValidation的核心功能,帮助开发者掌握约束注解的使用技巧和分组校验的高级应用,从而构建更加健壮和可... 目录引言一、Spring Validation基础架构1.1 jsR-380标准与Spring整合1

MySQL 中查询 VARCHAR 类型 JSON 数据的问题记录

《MySQL中查询VARCHAR类型JSON数据的问题记录》在数据库设计中,有时我们会将JSON数据存储在VARCHAR或TEXT类型字段中,本文将详细介绍如何在MySQL中有效查询存储为V... 目录一、问题背景二、mysql jsON 函数2.1 常用 JSON 函数三、查询示例3.1 基本查询3.2

SpringBatch数据写入实现

《SpringBatch数据写入实现》SpringBatch通过ItemWriter接口及其丰富的实现,提供了强大的数据写入能力,本文主要介绍了SpringBatch数据写入实现,具有一定的参考价值,... 目录python引言一、ItemWriter核心概念二、数据库写入实现三、文件写入实现四、多目标写入

使用Python将JSON,XML和YAML数据写入Excel文件

《使用Python将JSON,XML和YAML数据写入Excel文件》JSON、XML和YAML作为主流结构化数据格式,因其层次化表达能力和跨平台兼容性,已成为系统间数据交换的通用载体,本文将介绍如何... 目录如何使用python写入数据到Excel工作表用Python导入jsON数据到Excel工作表用