GEE/PIE遥感大数据处理与典型案例丨数据整合Reduce、云端数据可视化、数据导入导出及资产管理、机器学习算法等

目录

​专题一：初识GEE和PIE遥感云平台

专题二：GEE和PIE影像大数据处理基础

专题三：数据整合Reduce

专题四：云端数据可视化

专题五：数据导入导出及资产管理

专题六：机器学习算法

专题七：专题练习与回顾

更多应用

---

随着航空、航天、近地空间等多个遥感平台的不断发展，近年来遥感技术突飞猛进。由此，遥感数据的空间、时间、光谱分辨率不断提高，数据量也大幅增长，使其越来越具有大数据特征。对于相关研究而言，遥感大数据的出现为其提供了前所未有的机遇，但同时也提出了巨大的挑战。传统的工作站和服务器已经无法满足大区域、多尺度海量遥感数据处理的需要。

为解决这一问题，国内外涌现了许多全球尺度地球科学数据（尤其是卫星遥感数据）在线可视化计算和分析云平台如谷歌Earth Engine（GEE）和航天宏图的PIE Engine等。其中，Earth Engine最为强大，能够存取和同步遥感领域目前常用的MODIS、Landsat和Sentinel等卫星图像和NCEP等气象再分析数据集，同时依托全球上百万台超级服务器，提供足够的运算能力对这些数据进行处理。目前，Earth Engine上包含超过900个公共数据集，每月新增约2 PB数据，总容量超过80PB。作为国内最先进的遥感云平台，PIE Engine近年来发展发非常迅速，拥有丰富的国产卫星数据，以及中国区域的其它重要开源数据，在数据安全性和访问便利性方面具有独到的优势。与传统的处理影像工具（例如ENVI）相比，遥感云平台一方面提供了丰富的计算资源；另一方面，其巨大的云存储能力节省了科研人员大量的数据下载和预处理时间。

如今，GEE/PIE等遥感云平台凭借其强大的功能正受到越来越多国内外科技工作者的关注，应用范围也在不断扩大。本课程致力于帮助科研工作者掌握GEE和PIE的实际应用能力，以JavaScript编程语言为基础，结合实例讲解遥感云的基本概念知识、影像大数据分析、经典应用案例等方面的进阶技能。为了提高教学质量，本课程将融合最先进的ChatGPT等AI自然语言模型辅助教学，协助学员解答疑惑、提供针对性建议和指导，不仅让学员更深入地掌握课程内容，还为今后自助学习提供高效的个性化的学习体验。

​专题一：初识GEE和PIE遥感云平台

(1)GEE和PIE平台及典型应用案例介绍
(2)JavaScript基础，包括变量，运算符，数组，判断及循环语句等
(3)遥感云重要概念与典型数据分析流程
(4)遥感云基本对象及平台上手
影像与影像集
几何体、要素与要素集
日期、字符、数字
数组、列表、字典
影像/影像集、要素/要素集数据查询、时空过滤、可视化、属性查看等主要对象最常用API介绍

专题二：GEE和PIE影像大数据处理基础

(1)关键知识点讲解
影像数学运算、关系/条件/布尔运算、形态滤波、纹理特征提取等
影像掩码，裁剪和镶嵌
集合对象的循环迭代（map/iterate）
集合对象联合（Join）
影像面向对象分析
(2)主要功能串讲与演练
Landsat/Sentinel-2影像批量去云
Landsat/Sentinel-2传感器归一化、植被指数计算等
时间序列光学影像的平滑与空间插值

专题三：数据整合Reduce

(1)关键知识点讲解
影像与影像集整合，如指定时窗的年度影像合成
影像区域统计与领域统计，分类后处理
要素集属性列统计 
栅格与矢量的相互转换
分组整合与区域统计
影像集、影像和要素集的线性回归分析
(2)主要功能串讲与演练
研究区可用Landsat影像的数量和无云观测数量的统计分析
中国区域年度NDVI植被数合成及年度最绿的DOY时间查找
国家尺度30年尺度的降雨量时空变化趋势分析

专题四：云端数据可视化

(1)关键知识点讲解
要素与要素集属性制图（条形图、直方图、堆积柱形图、散点图等）
影像制图（区域统计、分类图、直方图、散点图、线型图，饼图等）
影像集制图（样点时间序列图、区域统计时间序列图等）
数组与链表制图（散点图、样线图等）
图形风格和属性设置
(2)主要功能串讲与演练
基于MODIS时间序列影像的不同地表植被物候分析与制图
基于Hansen产品的年度森林时空变化分析与专题图绘制

专题五：数据导入导出及资产管理

(1)关键知识点讲解
不同矢量数据上传个人资产
影像数据上传个人资产、属性设置等
影像批量导出（Asset和Driver）
矢量数据导出（Asset和Driver）
空间统计分析结果导出
(2)主要功能串讲与演练
PIE平台国产卫星数据下载
影像合成批量导出及下载
地面样地对应遥感指标数据导出

专题六：机器学习算法

(1)关键知识点讲解
样本抽样（随机抽样、分层随机抽样）
监督分类算法（随机森林、CART、贝叶斯、SVM、决策树等）
非监督分类算法（wekaKMeans、wekaLVQ等）
分类精度评估
(2)主要功能串讲与演练
联合光学与雷达时间序列影像的森林动态监测
水体自动提取与洪涝监测

专题七：专题练习与回顾

(1)GEE土地利用分类综合案例，实现主要功能串讲，包括地面样本准备、多源遥感影像预处理、算法开发、分类后处理、精度评估和空间统计分析与制图等环节
(2)经典PIE案例代码讲解与学习
夜间灯光指数提取
长时间尺度植被覆盖度反演
水域动态监测
农作物种植面积提取
荒漠化程度提取
(3)人口密度动态变化分析学员征集案例讲解与答疑
GEE与PIE平台切换、代码优化、常见错误与调试总结

---

更多应用

GEE入门学习，遥感云大数据分析、管理与可视化以及在林业应用丨灾害、水体与湿地领域应用丨GPT模型应用_WangYan2022的博客-CSDN博客近年来遥感技术得到了突飞猛进的发展，航天、航空、临近空间等多遥感平台不断增加，数据的空间、时间、光谱分辨率不断提高，数据量猛增，遥感数据已经越来越具有大数据特征。遥感大数据的出现为相关研究提供了前所未有的机遇，同时如何处理好这些数据也提出了巨大的挑战。传统的工作站和服务器已经无法胜任大区域、多尺度海量遥感数据处理的需要。https://blog.csdn.net/WangYan2022/article/details/131678440?spm=1001.2014.3001.5502【高分论文密码】大尺度空间模拟预测和数字制图技术和不确定性分析_WangYan2022的博客-CSDN博客结合经典的例子讲解R语言在空间数据处理、管理以及可视化的操作，从空间数据计量、大尺度时间序列分析与突变检测、空间数据插值、空间数据建模、机器学习空间预测、多种机器学习集成技术、空间升、降尺度技术、空间模拟偏差订正技术、数据可视化、知识图谱等方面让您全方位掌握R语言大尺度空间数据分析模拟预测及可视化技术。https://blog.csdn.net/WangYan2022/article/details/130800531?spm=1001.2014.3001.5502最新基于Citespace、vosviewer、R语言文献计量学可视化分析技术及全流程文献可视化SCI论文高效写作方法_WangYan2022的博客-CSDN博客通过文献计量学讲解、高效选题、数据库检索数据下载、软件使用等八个专题详细讲解，让学员系统全面的掌握文献计量学的基本理论和知识；熟练掌握Citespace和vosviewer及R语言文献可视化分析技术；最终实现从主题确定、数据分析绘图、文章框架与写作，全流程掌握一篇文献信息可视化分析报告（论文）的思路逻辑与技术方法。https://blog.csdn.net/WangYan2022/article/details/131889523?spm=1001.2014.3001.5502