当前位置: 首页 > article >正文

别再到处找DEM了!手把手教你用ArcGIS Pro + Python脚本,从NASA官网免费下载并拼接出完整的中国90米高程数据

从NASA获取中国90米高程数据的自动化解决方案在GIS和遥感研究领域获取高质量的数字高程模型(DEM)数据是许多项目的基础工作。然而对于中国区域的完整覆盖、高精度且免费可用的DEM数据研究者们常常面临获取困难。本文将介绍如何利用ArcGIS Pro结合Python脚本直接从NASA官网获取SRTM 90米分辨率数据并实现自动化处理和拼接最终生成完整的中国区域DEM数据集。1. 数据源选择与准备NASA提供的SRTM(Shuttle Radar Topography Mission)数据是目前最广泛使用的全球DEM数据之一。90米分辨率的SRTM数据覆盖全球且完全免费开放获取。相比其他来源NASA的数据具有以下优势权威性由NASA官方发布数据质量有保障全球覆盖完整覆盖中国全境免费获取无需付费或特殊权限持续更新数据版本会定期修正和优化要获取这些数据我们首先需要了解NASA Earthdata的访问机制。NASA要求用户在下载数据前先注册账号并获取API密钥。以下是注册步骤访问Earthdata登录页面点击Register创建新账户填写必要信息并完成验证登录后在个人资料页面可以找到API访问凭证提示建议将API凭证保存在安全位置但不要直接硬编码在脚本中考虑使用环境变量或配置文件管理。2. 自动化下载流程设计手动下载SRTM数据不仅耗时而且容易出错。我们将使用Python脚本实现自动化下载流程。核心思路是确定中国区域的经纬度范围根据范围计算需要下载的SRTM图幅编号构建NASA数据服务器的请求URL批量下载所有需要的图幅以下是实现这一流程的关键Python代码片段import requests import os from concurrent.futures import ThreadPoolExecutor # NASA Earthdata认证信息 username os.getenv(EARTHDATA_USER) password os.getenv(EARTHDATA_PASS) # 中国区域边界坐标 china_bbox { min_lon: 73.5, max_lon: 135.0, min_lat: 18.0, max_lat: 53.5 } def get_srtm_tiles(bbox): 根据边界框计算需要的SRTM图幅编号 tiles [] # 计算逻辑略... return tiles def download_srtm_tile(tile): 下载单个SRTM图幅 url fhttps://e4ftl01.cr.usgs.gov/MEASURES/SRTMGL1.003/2000.02.11/{tile}.SRTMGL1.hgt.zip response requests.get(url, auth(username, password), streamTrue) # 保存处理略...为了提高下载效率我们使用多线程并发下载。同时代码中加入了断点续传和错误重试机制确保在大批量下载时的稳定性。3. 数据处理与格式转换下载的原始SRTM数据是HGT格式需要转换为ArcGIS Pro可以直接处理的格式。此外原始数据还存在以下常见问题需要处理数据缺失部分区域可能有数据空洞投影问题原始数据使用地理坐标系(WGS84)边缘效应图幅边缘可能出现不连续我们使用arcpy模块实现自动化处理流程import arcpy from arcpy.sa import * # 设置工作空间 arcpy.env.workspace path/to/workspace arcpy.env.overwriteOutput True def process_srtm_tile(input_hgt, output_raster): 处理单个SRTM图幅 # 转换为ArcGIS格式 arcpy.management.CopyRaster(input_hgt, output_raster) # 修复数据空洞 filled Con(IsNull(output_raster), FocalStatistics(output_raster), output_raster) # 重投影到适合中国区域的投影坐标系 arcpy.management.ProjectRaster(filled, projected_ output_raster, PROJCS[Asia_North_Albers_Equal_Area_Conic]) return projected_ output_raster对于数据缺失问题我们采用邻域填充算法进行修复。投影转换则选择适合中国区域的Albers等面积圆锥投影以减少面积计算时的变形。4. 数据拼接与裁剪当所有图幅都完成下载和处理后需要将它们拼接成一个完整的中国区域DEM数据集。这一过程需要考虑边缘匹配确保相邻图幅间无缝衔接数据融合消除图幅间的亮度差异范围裁剪精确匹配中国国界以下是实现拼接和裁剪的关键步骤创建镶嵌数据集# 创建镶嵌数据集 arcpy.management.CreateMosaicDataset(China_DEM.gdb, China_SRTM, PROJCS[Asia_North_Albers_Equal_Area_Conic]) # 添加所有处理后的图幅 raster_list [tile1.tif, tile2.tif, ...] # 所有图幅列表 arcpy.management.AddRastersToMosaicDataset(China_SRTM, Raster Dataset, raster_list)执行镶嵌操作# 设置镶嵌参数 arcpy.management.SetMosaicDatasetProperties(China_SRTM, mosaic_methodBLEND, blend_width2) # 生成最终镶嵌结果 arcpy.management.BuildOverview(China_SRTM)按中国边界裁剪# 加载中国边界矢量数据 china_boundary path/to/china_boundary.shp # 执行裁剪 arcpy.management.Clip(China_SRTM, in_memory/clipped, china_boundary, , ClippingGeometry)注意中国边界数据应使用官方发布的权威数据源确保边界精确性和合规性。5. 质量控制与优化生成最终DEM后需要进行质量检查以确保数据可用性。主要检查项包括检查项目方法标准数据完整性统计空值比例空值比例0.1%高程范围计算统计值符合中国地形特征边缘连续性可视化检查无明显接缝投影正确性元数据验证与设计一致对于发现的问题可以采取以下优化措施高程异常修正使用邻域统计值替换明显异常值平滑处理应用焦点统计减少数据噪声分辨率优化必要时进行重采样def quality_control(input_dem): DEM质量检查与优化 # 计算空值比例 null_count arcpy.management.GetRasterProperties(input_dem, COUNT)[0] total_cells arcpy.management.GetRasterProperties(input_dem, MEAN)[1] null_ratio float(null_count) / float(total_cells) if null_ratio 0.001: # 执行空值填充 filled Con(IsNull(input_dem), FocalStatistics(input_dem), input_dem) arcpy.management.CopyRaster(filled, input_dem) # 其他优化处理...6. 成果输出与应用完成所有处理后我们可以将最终DEM数据输出为多种格式以适应不同应用场景GeoTIFF通用栅格格式兼容大多数GIS软件File GeodatabaseArcGIS原生格式支持高效存储Cloud Optimized GeoTIFF (COG)适合网络共享和在线应用对于大型项目建议将处理流程封装为ArcGIS Pro工具箱工具方便团队其他成员使用。以下是一个简单的工具封装示例import arcpy class DemProcessor(object): def __init__(self): self.label SRTM DEM Processor self.description Automated SRTM DEM processing tool def getParameterInfo(self): params [] # 定义输入参数... return params def execute(self, parameters, messages): # 执行处理逻辑... arcpy.AddMessage(Processing completed successfully)在实际项目中这套自动化流程可以节省大量时间。以处理整个中国区域90米SRTM数据为例手动处理约需3-5天且容易出错自动化流程首次运行约4-6小时后续更新仅需1-2小时7. 进阶技巧与问题排查即使采用自动化流程在实际操作中仍可能遇到各种问题。以下是一些常见问题及解决方案问题1NASA服务器连接不稳定解决方案使用会话保持和重试机制避开美国白天的高峰时段考虑使用NASA提供的wget脚本批量下载import time from requests.adapters import HTTPAdapter from requests.packages.urllib3.util.retry import Retry def requests_retry_session(retries3, backoff_factor0.3): session requests.Session() retry Retry( totalretries, readretries, connectretries, backoff_factorbackoff_factor, status_forcelist(500, 502, 504), ) adapter HTTPAdapter(max_retriesretry) session.mount(http://, adapter) session.mount(https://, adapter) return session问题2图幅间存在高程差异解决方案使用直方图匹配算法统一色调在镶嵌时设置适当的重叠区域和混合宽度必要时进行手动调整问题3投影转换导致变形解决方案选择适合中国区域的投影如Albers等面积圆锥投影控制投影参数优化变形分布对大区域数据进行分块处理在实际使用中我发现将整个处理流程分解为多个独立步骤并设置检查点非常有用。这样当某一步骤失败时可以从最近的检查点重新开始而不必从头运行整个流程。

相关文章:

别再到处找DEM了!手把手教你用ArcGIS Pro + Python脚本,从NASA官网免费下载并拼接出完整的中国90米高程数据

从NASA获取中国90米高程数据的自动化解决方案 在GIS和遥感研究领域,获取高质量的数字高程模型(DEM)数据是许多项目的基础工作。然而,对于中国区域的完整覆盖、高精度且免费可用的DEM数据,研究者们常常面临获取困难。本文将介绍如何利用ArcGI…...

VCSA 7.0 报 vAPI Endpoint 黄灯告警?别慌,这份保姆级排查与修复指南帮你搞定

VCSA 7.0 vAPI Endpoint黄灯告警全流程诊断手册 凌晨三点,监控系统突然弹出一条告警——vCenter Server的vAPI Endpoint服务状态由绿转黄。作为运维负责人,你需要在最短时间内判断这是需要立即处理的严重故障,还是可以暂缓的偶发异常。本文将…...

德国工业4.0:从顶层设计到车间实践的制造业数字化转型

1. 工业4.0浪潮下的欧洲:一场由德国引领的深度变革提到德国制造,很多人脑海里蹦出来的词是“严谨”、“保守”甚至“刻板”。没错,德国人对于工业流程、制造工艺和质量标准的执着,有时近乎偏执。但正是这种对“传统”的极致坚守&a…...

云原生本地开发新范式:LDLT方法论与实践指南

1. 项目概述:从“LDLT”看云原生时代的本地开发范式革新如果你是一名云原生应用的开发者,大概率经历过这样的场景:为了调试一个微服务,你需要在本地启动一整套依赖——数据库、消息队列、缓存、甚至其他几个关联服务。你的开发机内…...

微信视频下载器wx_channels_download

微信视频下载器ltaoo/wx_channels_download(跨平台轻量首选) 特点:体积小、使用简单,在微信PC端视频下方添加“下载”按钮;支持 macOS 和 Windows。优点:集成式(无需单独监听)&…...

光纤偏振测量:从琼斯矢量到庞加莱球,六种工具深度解析与工程实践

1. 从一道周五小测题说起:光纤测量中的偏振态表征上周五,我在整理旧资料时,翻到了EE Times在2015年发布的一篇“周五小测”文章,主题是光纤光学测量。其中第一道题就很有意思,它问的是:“以下哪种工具不能用…...

从DataOperation接口到QuickSort实现:探究适配器模式在算法整合中的应用

1. 适配器模式:解决接口不兼容的桥梁 想象一下你从国外带回来一个三脚插头的电器,但家里的插座都是两孔的。这时候你会怎么做?大多数人会选择买一个转换插头。在编程世界里,适配器模式就是这个万能的"转换插头"。 最近我…...

Python金融数据分析实战:从数据清洗到LLM智能问答机器人构建

1. 项目概述:一个金融数据分析与智能问答的实战项目 最近在整理一些数据分析的实战项目,正好翻到了之前为Forage BCGX GenAI项目做的一个金融分析案例。这个项目麻雀虽小,五脏俱全,它完整地走了一遍从原始数据清洗、指标计算、可视…...

Windows风扇控制终极解决方案:FanControl深度配置指南

Windows风扇控制终极解决方案:FanControl深度配置指南 【免费下载链接】FanControl.Releases This is the release repository for Fan Control, a highly customizable fan controlling software for Windows. 项目地址: https://gitcode.com/GitHub_Trending/fa…...

SAP Fiori Launchpad Designer保姆级教程:手把手教你为ME29N采购订单审批创建自定义磁贴

SAP Fiori Launchpad Designer保姆级教程:手把手教你为ME29N采购订单审批创建自定义磁贴 当你所在的企业尚未部署HR模块,却需要快速启用ME29N采购订单审批功能时,SAP Fiori Launchpad Designer(FLPD_CUST)将成为你的得…...

半导体设备投资热潮:千亿美元流向、产业逻辑与工程师应对策略

1. 从百亿投资狂潮看半导体制造的底层逻辑最近和几个在晶圆厂和Fab设备商工作的老朋友聊天,话题总绕不开一个词:投资。无论是台积电、三星的先进制程军备竞赛,还是中芯国际、联电的成熟制程扩产,背后都是一台台价值数千万甚至上亿…...

New-API数据导出功能:轻松管理AI模型使用记录与账单数据

New-API数据导出功能:轻松管理AI模型使用记录与账单数据 【免费下载链接】new-api A unified AI model hub for aggregation & distribution. It supports cross-converting various LLMs into OpenAI-compatible, Claude-compatible, or Gemini-compatible for…...

为什么92%的SaaS团队在3个月内切换了语音服务商?——ElevenLabs与PlayAI在WebRTC集成、WebAssembly兼容性及低功耗端侧部署的实战踩坑全记录

更多请点击: https://intelliparadigm.com 第一章:语音合成服务商切换潮的底层动因解构 近年来,大量智能客服、有声阅读与车载交互系统密集启动 TTS(Text-to-Speech)服务商迁移项目。这一现象并非源于单一技术迭代&am…...

逻辑表达式与真值表转换

逻辑表达式与真值表转换 真值表与逻辑表达式是数字电路设计的两种等价表示,掌握它们之间的转换是基本功。 🎯 本章学习要点 理解真值表的结构和表示方法掌握从真值表写出逻辑表达式(最小项之和)掌握从逻辑表达式列出真值表了解最…...

Vex:VS Code向量数据库管理扩展,提升AI开发效率

1. 项目概述:Vex,一个为开发者设计的向量数据库管理利器如果你正在用 VS Code 开发 AI 应用,并且和向量数据库(比如 Milvus 或 ChromaDB)打交道,那你大概率经历过这样的场景:为了插入几条测试向…...

自动驾驶人机交接:DMS与安全验证如何破解控制权转移困局

1. 自动驾驶人机交接的核心困境与行业分野最近几年,自动驾驶(AV)和高级驾驶辅助系统(ADAS)无疑是汽车科技领域最炙手可热的话题。无论是传统车企的“新四化”转型,还是科技公司的颠覆性入局,大家…...

GPU内核优化:R3框架与分层自动调优实践

1. GPU内核优化的挑战与机遇在现代高性能计算和人工智能领域,GPU已经成为不可或缺的计算引擎。然而,随着硬件架构的快速迭代,保持应用程序的高性能表现变得越来越具有挑战性。传统的手工优化方法需要开发者投入数月时间,在算法设计…...

非确定有限自动机—计算机等级考试—软件设计师考前备忘录—东方仙盟

1. 先明确:圆圈里的数字是什么?圆圈里的 0,1,2,3,4,5 是状态编号,不是输入符号,也不是要识别的字符串内容。比如 状态0 是起始状态,状态5 是终止(接受)状态。箭头边上的 0,1,ε 才是输入符号&am…...

脉冲神经网络SAST训练方法:解决代理-硬件转换差距

1. 脉冲神经网络与传感器计算的挑战脉冲神经网络(SNNs)作为第三代神经网络模型,其核心特征是采用离散的脉冲信号进行信息传递和处理。这种事件驱动的计算方式与传统的连续激活神经网络(ANNs)有着本质区别。在传感器端计…...

为AI智能体构建持久化记忆系统:Shang Tsung项目实战解析

1. 项目概述:为AI智能体注入“灵魂”与“第二大脑”如果你和我一样,长期与各类AI智能体(Agent)打交道,无论是基于Claude Code、OpenClaw,还是其他本地化部署的LLM工具,你一定经历过那种令人沮丧…...

信发系统-排版/发布 配置操作教程-智慧大屏幕—东方仙盟

政务大屏幕节目管理-选择系统模板选择对应行业选择适合的模板选中你的节目点击设计设计节目直接管理/上传 资源:图片/视频/网页/文字/文档手指/鼠标选中显示区域上传资源,在右侧点击上传从资源库选择图片选择历史素材上传网站选中网页区域点击上传配置文…...

手把手教你用Gstreamer和V4L2在Zynq MPSoC上搭建视频流Pipeline(HDMI IN to DP OUT)

从HDMI到DP:Zynq MPSoC视频流处理全链路实战指南 当你的Zynq MPSoC开发板已经完成硬件设计,Petalinux系统也顺利启动,却发现HDMI输入的视频信号无法正确显示在DP接口的显示器上——这种"最后一公里"的集成问题往往最令人抓狂。本文…...

Google Calendar智能安排深度拆解(Gemini原生集成技术白皮书级解析)

更多请点击: https://intelliparadigm.com 第一章:Gemini Google Calendar智能安排技术全景概览 Gemini 与 Google Calendar 的深度集成标志着日程管理进入语义理解驱动的新阶段。该能力并非简单调用 API,而是依托 Gemini 模型对自然语言指…...

告别驱动开发:手把手教你用himm工具在用户空间玩转Hi3516的GPIO

用户空间高效操控Hi3516 GPIO:himm工具实战指南 在嵌入式开发领域,传统的内核驱动开发往往需要经历漫长的编译、加载和调试周期。对于快速硬件验证和原型开发而言,这种开发模式显得过于笨重。海思Hi3516平台提供的himm工具,为开发…...

Neovim涂抹光标插件:提升编码体验的动态轨迹设计

1. 项目概述:一个为Neovim设计的“涂抹光标”插件 如果你和我一样,是个重度Neovim用户,每天有超过8小时的时间泡在终端和代码编辑器里,那你肯定对光标的“存在感”有要求。默认的方块或下划线光标,在长时间编码后&…...

YouTube 转 MP3 工具里,为什么预览要放在下载前

很多转换工具看起来解决的是“我要一个 MP3 文件”,但真正影响体验的,往往不是页面上有没有下载按钮。 用户真正想确认的是:这个链接是不是被正确识别了,转换任务是不是还在进行,最后得到的音频是不是值得保存。对 Yo…...

搞定气象数据的基础统计与可视化

是不是看着一堆气象原始数据就头大? 不会处理、不会统计、更不会做可视化图表? 其实根本不用懂编程、不用啃复杂专业知识,普通小白也能零基础玩转气象数据,从数据整理、基础统计到出专业好看的成品图,新手也能一键拿…...

Go 里什么时候可以“panic”?

“Don’t panic.” —— Go 谚语 但……如果我真的想 panic 呢?在 Go 的世界里,panic() 就像厨房里的灭火器:平时你不会用它炒菜,但如果油锅着火了,你肯定得拉它一把。今天我们就来聊聊:Go 里什么时候 pani…...

别再只盯着密钥了!深入ESP32 eFuse,看懂flash加密背后的硬件安全逻辑

别再只盯着密钥了!深入ESP32 eFuse,看懂flash加密背后的硬件安全逻辑 当你在ESP32项目中使用flash加密功能时,是否曾疑惑过:为什么简单地烧录几个eFuse位就能实现固件保护?那些看似神秘的DISABLE_DL_DECRYPT、FLASH_CR…...

Google Maps路线响应延迟超800ms?Gemini边缘推理加速方案上线即降为112ms(附可复用TensorRT优化脚本)

更多请点击: https://intelliparadigm.com 第一章:Gemini Google Maps路线优化 Google Maps 与 Gemini 的深度集成正在重塑企业级物流与出行服务的智能边界。通过 Gemini 的多模态推理能力,开发者可将自然语言查询(如“避开施工路…...