【融合ChatGPT等AI模型】Python-GEE遥感云大数据分析、管理与可视化及多领域案例实践应用-CSDN博客
| 阿里云国内75折 回扣 微信号：monov8 |
| 阿里云国际，腾讯云国际，低至75折。AWS 93折 免费开户实名账号 代冲值 优惠多多 微信号：monov8 飞机：@monov6 |
随着航空、航天、近地空间等多个遥感平台的不断发展近年来遥感技术突飞猛进。由此遥感数据的空间、时间、光谱分辨率不断提高数据量也大幅增长使其越来越具有大数据特征。对于相关研究而言遥感大数据的出现为其提供了前所未有的机遇但同时也提出了巨大的挑战。传统的工作站和服务器已经无法满足大区域、多尺度海量遥感数据处理的需要。
https://mp.weixin.qq.com/s?__biz=Mzg2NDYxNjMyNA==&mid=2247547473&idx=2&sn=3ef060f71000bd90d47a5b4c1eccfb58&chksm=ce64d0baf91359acca93173af2d5e001b71e3426c3efc78cd08eab1556d5e022ac392d5560e8&token=1164927483&lang=zh_CN#rd为解决这一问题国内外涌现了许多全球尺度地球科学数据尤其是卫星遥感数据在线可视化计算和分析云平台如谷歌Earth EngineGEE、航天宏图的PIE Engine和阿里的AI Earth等。其中Earth Engine最为强大能够存取和同步遥感领域目前常用的MODIS、Landsat和Sentinel等卫星图像和NCEP等气象再分析数据集同时依托全球上百万台超级服务器提供足够的运算能力对这些数据进行处理。目前Earth Engine上包含超过900个公共数据集每月新增约2 PB数据总容量超过80PB。与传统的处理影像工具例如ENVI相比Earth Engine在处理海量遥感数据方面具有不可比拟的优势。一方面它提供了丰富的计算资源另一方面其巨大的云存储能力节省了科研人员大量的数据下载和预处理时间。可以说Earth Engine在遥感数据的计算和分析可视化方面代表世界该领域最前沿水平是遥感领域的一次革命。
如今Earth Engine凭借其强大的功能正受到越来越多国内外科技工作者的关注应用范围也在不断扩大。本课程致力于帮助科研工作者掌握Earth Engine的实际应用能力以Python编程语言为基础结合实例讲解平台搭建、影像数据分析、经典应用案例、本地与云端数据管理以及云端数据论文出版级可视化等方面的进阶技能。为了提高教学质量本课程将融合最先进的ChatGPT、文心一言等AI自然语言模型辅助教学协助学员解答疑惑、提供针对性建议和指导不仅让学员更深入地掌握课程内容还为今后自助学习提供高效的个性化的学习体验。
第一章、理论基础
1、Earth Engine平台及应用、主要数据资源介绍
2、Earth Engine遥感云重要概念、数据类型与对象等
3、JavaScript与Python遥感云编程比较与选择
4、Python基础语法、数据类型与程序控制结构、函数及类与对象等
5、常用Python软件包pandas、numpy、os等介绍及基本功能演示Excel/csv数据文件读取与数据处理、目录操作等
6、JavaScript和Python遥感云API差异学习方法及资源推荐
7、ChatGPT、文心一言等AI自然语言模型介绍及其遥感领域中的应用
第二章、开发环境搭建
1、本地端与云端Python遥感云开发环境介绍
2、本地端开发环境搭建
1Anaconda安装pip/conda软件包安装方法和虚拟环境创建等
2earthengine-api、geemap等必备软件包安装
3遥感云本地端授权管理
4Jupyter Notebook/Visual Studio Code安装及运行调试。
3、云端Colab开发环境搭建
4、geemap介绍及常用功能演示
5、ChatGPT、文心一言帐号申请与主要功能演示如遥感知识解答、数据分析处理代码生成、方案框架咨询等。
第三章、遥感大数据处理基础与ChatGPT等AI模型交互
1、遥感云平台影像数据分析处理流程介绍介绍遥感云平台影像数据分析处理流程的基本框架包括数据获取、数据预处理、算法开发、可视化等。
2、要素和影像等对象显示和属性字段探索介绍如何在遥感云平台上显示和探索要素和影像等对象的属性字段包括如何选择要素和影像对象、查看属性信息、筛选数据等。
3、影像/要素集的时间、空间和属性过滤方法介绍如何对影像/要素集进行时间、空间和属性过滤包括如何选择时间段、地理区域和属性条件以实现更精确的数据分析。
4、波段运算、条件运算、植被指数计算、裁剪和镶嵌等介绍如何在遥感云平台上进行波段运算、条件运算、植被指数计算、裁剪和镶嵌等操作以实现更深入的数据分析。
5、Landsat/Sentinel-2等常用光学影像去云介绍如何在遥感云平台上使用不同方法去除Landsat/Sentinel-2等常用光学影像中的云以提高影像数据质量。
6、影像与要素集的迭代循环介绍如何使用遥感云平台的迭代循环功能对影像和要素集进行批量处理以提高数据分析效率。
7、影像数据整合Reducer介绍如何使用遥感云平台的Reducer功能将多个影像数据整合成一个数据集以方便后续数据分析。
8、邻域分析与空间统计介绍如何在遥感云平台上进行邻域分析和空间统计以获取更深入的空间信息。
9、常见错误与代码优化介绍遥感云平台数据分析过程中常见的错误和如何进行代码优化以提高数据分析效率和精度。
10、Python遥感云数据分析专属包构建介绍如何使用Python在遥感云平台上构建数据分析专属包以方便多次使用和分享分析代码。
第四章、典型案例操作实践
11、机器学习分类算法案例本案例联合Landsat等长时间序列影像和机器学习算法展示国家尺度的基本遥感分类过程。具体内容包括研究区影像统计、空间分层随机抽样、样本随机切分、时间序列影像预处理和合成、机器学习算法应用、分类后处理和精度评估等方面。
12、决策树森林分类算法案例本案例联合L波段雷达和Landsat光学时间序列影像使用决策树分类算法提取指定地区2007-2020年度森林分布图并与JAXA年度森林产品进行空间比较。案例涉及多源数据联合使用、决策树分类算法构建、阈值动态优化、分类结果空间分析等方面。
13、洪涝灾害监测案例本案例基于Sentinel-1 C波段雷达等影像对省级尺度的特大暴雨灾害进行监测。案例内容包括Sentinel-1 C影像处理、多种水体识别算法构建、影像差异分析以及结果可视化等方面。
14、干旱遥感监测案例本案例使用40年历史的卫星遥感降雨数据产品如CHIRPS来监测省级尺度的特大干旱情况。案例内容包括气象数据基本处理、年和月尺度数据整合、长期平均值LPA/偏差计算以及数据结果可视化等方面。
15、物候特征分析案例本案例基于Landsat和MODIS等时间序列影像通过植被指数变化分析典型地表植被多年的物候差异样点尺度和大尺度如中国的物候空间变化特征。案例内容包括时间序列影像合成、影像平滑Smoothing与间隙填充Gap-filling、结果可视化等方面。
16、森林生物量遥感反演案例本案例联合GEDI激光雷达、Landsat/Sentinel-2多光谱光学影像反演森林生物量/碳储量。涉及GEDI激光雷达数据介绍、Landsat/Sentinel-2光学影像处理、生物量反演指标提取与相关性分析、与特征集筛选如XGboot、递归特征消除RFE、SelectKBest等与机器学习建模、变量重要度分析和可视化等内容。
17、生态环境质量动态监测案例该案例使用RSEI遥感生态指数和Landsat系列影像对选定城市的生态状况进行快速监测。主要涉及的技术包括植被指数的计算、地表温度的提取、数据的归一化、主成分PCA分析、RSEI生态指数的构建以及结果的可视化等。
18、高分遥感影像分割案例该案例使用Segment Anything Model SMA对指定区域的高分辨率遥感影像进行分割数据可视化和分割矢量结果保存等。主要涉及GPU虚拟环境搭建软件包安装程序调试及影像分割技巧等。
第五章、输入输出及数据资产高效管理
1.本地数据与云端交互介绍如何将本地端csv、kml、矢量和栅格数据与云端数据相互转换并讲解数据导出的方法。
2.服务器端数据批量下载包括直接本地下载、影像集批量下载以及如何快速下载大尺度和长时间序列数据产品例如GEE云端全球森林产品和20年8天尺度MODIS数据产品下载。
3.本地端数据上传与属性设置包括earthengine命令使用介绍如何上传少量本地端矢量与栅格数据并设置属性小文件以及如何批量上传数据并自动设置属性还将介绍如何使用快速上传技巧上传超大影像文件例如国产高分影像。
4.个人数据资产管理介绍如何使用Python和earthengine命令行来管理个人数据资产包括创建、删除、移动、重命名等操作同时还会讲解如何批量取消上传/下载任务。
第六章、云端数据论文出版级可视化
1.Python可视化及主要软件包简介介绍matplotlib和seaborn可视化程序包讲解基本图形概念、图形构成以及快速绘制常用图形等内容。
2.研究区地形及样地分布图绘制结合本地或云端矢量文件、云端地形数据等绘制研究区示意图。涉及绘图流程、中文显示、配色美化等内容还会介绍cpt-city精美调色板palette在线下载与本地端应用等。
3.研究区域影像覆盖统计和绘图对指定区域的Landsat和Sentinel等系列影像的覆盖数量、无云影像覆盖情况进行统计绘制区域影像统计图或像元级无云影像覆盖专题图。
4.样本光谱特征与物候特征等分析绘图快速绘制不同类型样地的光谱和物候特征动态下载并整合样点过去30年缩略图thumbnails和植被指数时间序列等。
5.分类结果专题图绘制及时空动态延时摄影Timelapse制作单幅或多幅分类专题图绘制及配色美化制作土地利用变化清晰的Timelapse还会介绍动画文字添加等内容。
6.分类结果面积统计与绘图基于云端的分类结果和矢量边界文件统计不同区域不同地类面积提取统计结果以不同图形展示统计面积制作土地利用变化统计绘图等。
