2616 字
13 分钟
全球最大地球科学环境数据中心:NOAA NCEI

NOAA NCEI(National Centers for Environmental Information,国家环境信息中心)隶属于美国国家海洋和大气管理局(NOAA),是全球最大的环境数据归档和分发中心。其档案总量超过60PB,涵盖大气、海洋、地球物理、古气候等几乎所有地球科学领域。本文将全面介绍NCEI的数据体系、核心产品、技术架构和访问方式。


一、背景与使命#

NOAA NCEI 概览

地球观测数据每天都在以惊人的速度增长——NCEI每月从超过130个观测平台归档约229TB的新数据。然而,数据的价值不在于存储,而在于被发现和使用。

NCEI 的核心使命:保存、监测、评估并提供公共访问美国及全球的地球物理数据和信息,使之成为科学研究、气候监测、灾害预警和政策决策的基础。

组织沿革#

NCEI 于 2015 年 4 月 22 日(地球日)正式成立,由三个历史悠久的 NOAA 数据中心合并而成:

前身机构全称领域
NCDCNational Climatic Data Center气候和天气数据
NGDCNational Geophysical Data Center地球物理数据(地磁、地震、测深等)
NODCNational Oceanographic Data Center海洋观测数据

合并旨在统一数据管理实践,消除跨学科的数据壁垒,为用户提供一站式环境数据服务。

组织架构#

  • • 主管机构:NOAA/NESDIS(国家环境卫星、数据和信息服务局)
  • • 总部:北卡罗来纳州阿什维尔(Asheville, NC)
  • • 分支:科罗拉多州博尔德(Boulder, CO)、马里兰州银泉(Silver Spring, MD)、密西西比州斯滕尼斯航天中心(Stennis Space Center, MS)

二、数据规模与分类#

总体规模#

指标数值
档案总量60+ PB(约 7 亿个文件柜的文档量)
月增量~229 TB
观测平台130+ 个
数据集数量26,000+
产品类别25+

产品分类体系#

NCEI 25 大产品类别:大气、海洋、地球物理

NCEI 的数据产品覆盖 25 个主要类别:

大气与气候#

  • • 气候监测(Climate Monitoring)
  • • 气候数据记录(Climate Data Records)
  • • 地面天气观测(Surface Weather Observations)
  • • 高空观测(Upper Air Observations)
  • • 雷达气象(Radar Meteorology)
  • • 强对流天气(Severe Weather)
  • • 天气与气候模型(Weather and Climate Models)
  • • 卫星气象(Satellite Meteorology)

海洋#

  • • 物理海洋(Ocean Physics)
  • • 海洋化学(Ocean Chemistry)
  • • 海洋声学(Ocean Acoustics)
  • • 海洋探测(Ocean Exploration)
  • • 海洋气候实验室(Ocean Climate Laboratory)
  • • 海洋生物(Marine Biology)
  • • 海洋地质与地球物理(Marine Geology and Geophysics)
  • • 卫星海洋学(Satellite Oceanography)
  • • 海岸监测与指标(Coastal Monitoring and Indicators)
  • • 区域海洋气候学(Regional Ocean Climatologies)

地球物理与其他#

  • • 地磁学(Geomagnetism)
  • • 测深/地形(Bathymetry)
  • • 自然灾害(Natural Hazards)
  • • 空间天气(Space Weather)
  • • 古气候学(Paleoclimatology)
  • • 极地数据(Arctic, Antarctic, and Polar Data)

三、核心数据产品#

3.1 气候站网数据 — GHCN 系列#

GHCN(Global Historical Climatology Network)是全球最重要的历史气候观测数据集之一:

数据集说明站点数
GHCNd(daily)全球地面日值气候摘要100000+ 站,180+ 国家
GHCNm(monthly)全球地面月值气候摘要数千站
GHCNh(hourly)全球地面逐时观测持续扩展中

数据包含温度、降水、风速、气压等核心气象要素,以 ASCII 纯文本格式按站点提供,也可通过 API 获取 CSV/JSON 格式。

3.2 全球温度产品#

  • • NOAA Global Temp:结合陆地(GHCN-M)和海表(ERSST)数据的全球地表温度数据集
  • • ERSST v5(Extended Reconstructed Sea Surface Temperature):基于 ICOADS 海洋观测重建的长期海表温度网格数据

这两个产品是 NOAA 发布全球气候状况报告的基础数据。

3.3 海洋数据体系#

NCEI 核心海洋数据产品

World Ocean Database(WOD)#

全球最大的海洋剖面观测数据库,也是国际海洋学数据和信息交换(IODE)项目:

  • • 汇集 20000+ 个独立存档数据集
  • • 来源包括 CTD、XBT、Argo 浮标、锚系浮标、海洋哺乳动物仪器等
  • • 统一格式、去重处理、客观质量控制
  • • 是 World Ocean Atlas 的基础数据来源

World Ocean Atlas 2023(WOA23)#

基于 WOD 制作的全球海洋气候态场:

参数分辨率时间尺度
温度、盐度1° 和 0.25°年、季、月
溶解氧、AOU、氧饱和度1° 和 0.25°年、季、月
磷酸盐、硅酸盐、硝酸盐年、季、月

WOA23 相比 WOA18 新增约 180 万条海洋剖面数据。

International Comprehensive Ocean-Atmosphere Data Set(ICOADS)#

全球最大的海洋表面现场观测集合:5 亿+ 条独立记录,时间跨度从 1662 年至今。

Global Temperature and Salinity Profile Programme(GTSPP)#

由 WMO 和 IOC 联合管理的全球温盐剖面实时数据程序,整合 Argo、XBT、CTD、滑翔机、动物仪器等多源数据。

3.4 ETOPO 2022 — 全球地形地貌模型#

ETOPO 2022 是 NCEI 发布的全球地形(陆地)和测深(海底)融合模型:

特性参数
分辨率15 弧秒(约 500 米),ETOPO1 的 4 倍
数据源机载 LiDAR + 卫星地形 + 船测水深
版本Ice Surface(冰面)和 Bedrock(基岩)两个版本
验证使用 NASA ICESat-2 裸地地形数据独立验证
应用海啸预报、海洋环流模拟、地球可视化

3.5 气候数据记录(CDR)#

NCEI 维护的 CDR 是经过严格审核的长时间序列气候数据集,分为两类:

类型说明示例
基本 CDR(Fundamental)传感器级数据(辐亮度、亮温等)AMSU 亮温、微波成像仪亮温
专题 CDR(Thematic)由基本 CDR 导出的地球物理变量海表温度、海冰浓度、降水

CDR 的质量标准由美国国家研究委员会(NRC)制定,是气候变化评估的基石数据。

3.6 古气候数据#

古气候代用指标数据类型与时间覆盖

NCEI 管理着世界上最大的古气候数据档案,包含 10000+ 个数据集

代用指标来源时间尺度
树木年轮木材横截面数百至数千年
冰芯冰盖/冰川数十万年
珊瑚珊瑚骨骼数百年
石笋洞穴沉积数千至数十万年
海洋/湖泊沉积物沉积柱数百万年

这些数据将气候记录从仪器观测时代(约 150 年)延伸至数百万年前。


四、数据访问技术体系#

NCEI 数据访问技术栈

4.1 发现与搜索#

工具说明地址
NOAA OneStop跨学科搜索所有 NOAA 数据,104,000 集合 + 300 万+元数据data.noaa.gov/onestop
NCEI Data Access下载和裁剪环境数据,支持云端 APIncei.noaa.gov/access/search
Climate Data Online (CDO)历史天气和气候数据在线查询ncei.noaa.gov/cdo-web
Geoportal元数据目录搜索ncei.noaa.gov/metadata/geoportal
Map Viewers交互式地图浏览器(测深、海洋探测等)ncei.noaa.gov/maps

4.2 API 体系#

NCEI 提供一套完整的 RESTful API:

API功能端点
Data Access API数据访问和裁剪/access/services/data/v1
Search API数据集和数据发现/access/services/search/v1
Management API元数据发现/access/services/support/v3/datasets
Order API订单检索/access/services/order/v1
CDO Web Services v2气候数据在线服务ncdc.noaa.gov/cdo-web/api/v2
GIS Map ServicesOGC WMS/WFS/WCS 服务gis.ngdc.noaa.gov/arcgis/rest/services

CDO API 限流:5 次/秒,10000 次/天(需申请 Token)。

4.3 支持的数据格式#

格式说明
NetCDF科学数据标准格式,支持多维数组
CSV通用文本表格,适合轻量级数据
JSONAPI 默认响应格式
Shapefile地理信息系统矢量格式
KMZGoogle Earth 格式
PDF报告和文档
ASCII纯文本(GHCN 站点数据等)

还支持 OPeNDAP 远程数据访问协议,允许按需裁剪和传输数据的子集。


五、NODD — 云端开放数据分发#

NODD 云端开放数据分发计划

什么是 NODD?#

NOAA Open Data Dissemination(NODD)是 NOAA 的云端数据分发计划,将环境数据免费托管在三大云平台上:

云平台服务
AWSAmazon S3 对象存储
AzureMicrosoft Azure Blob 存储
GCPGoogle Cloud Storage

关键数据#

指标数值
云端数据总量24+ PB
月访问量5+ PB
支持日请求量数十亿次
用户成本完全免费,无需认证,无出口流量费

覆盖内容#

  • • 卫星影像(GOES、JPSS/NOAA-20 等)
  • • 雷达数据(NEXRAD)
  • • 天气模型(GFS、HRRR、NAM 等)
  • • 海洋数据库
  • • 气候数据记录(CDR)
  • • 历史天气观测

技术实现#

数据通过以下方式从 NOAA 内部系统流入云端:

  • • Apache NiFi 实例运行在 AWS/Azure/GCP 上
  • • Cloud Ingest Pipeline(北卡罗来纳州立大学合作研究所开发)
  • • 直接从 NOAA 内部系统推送到云对象存储

NODD 的意义在于:科研人员不再需要下载 TB 级数据到本地——可以直接在云端进行分析计算,彻底改变了传统数据使用模式。


六、典型应用场景#

场景使用的 NCEI 数据/产品
全球气候变化评估NOAAGlobalTemp、ERSST、CDR
气象灾害历史分析GHCNd、强对流天气数据、雷达数据
海洋环流与温盐研究WOD、WOA、GTSPP、Argo
海啸预警与海底地形ETOPO 2022、测深数据
古气候重建冰芯、树轮、珊瑚代用指标
卫星遥感产品开发基本 CDR(亮温、辐亮度)
海洋碳循环研究海洋化学数据、ICOADS
地磁导航与空间天气WMM(世界地磁模型)、空间天气数据

七、与国际数据网络的关系#

NCEI 不是孤立存在的,它是全球环境数据网络的核心节点:

  • • WMO(世界气象组织):气象数据交换
  • • IOC/IODE(政府间海洋学委员会):海洋数据交换,WOD 是 IODE 项目
  • • ICSU/WDS(世界数据系统):古气候数据的全球共享
  • • Argo 国际计划:NCEI 作为全球 Argo 数据仓库
  • • GCOS(全球气候观测系统):CDR 贡献

总结#

维度要点
定位全球最大环境数据归档和分发中心
规模60+ PB 档案,26,000+ 数据集,25+ 产品类别
核心气候数据GHCN(10 万+站)、NOAAGlobalTemp、ERSST、CDR
核心海洋数据WOD(2 万+数据集)、WOA23、ICOADS(5 亿+记录)、GTSPP
核心地球物理ETOPO 2022(15 弧秒)、地磁、自然灾害
云端分发NODD 计划:24+ PB 数据免费托管在 AWS/Azure/GCP
API 体系RESTful API 全覆盖,支持 NetCDF/CSV/JSON/Shapefile 等
古气候10,000+ 数据集,覆盖树轮/冰芯/珊瑚/沉积物

NCEI 本质上是地球科学领域的”数字图书馆”——它不产生数据,但它收集、整理、质控、归档和分发全球的环境观测数据,让每一位科研人员都能站在几十年甚至几百万年的观测记录之上开展研究。


References#

全球最大地球科学环境数据中心:NOAA NCEI
https://blog.scidatalab.net/posts/全球最大地球科学环境数据中心-noaa-ncei/
作者
Echo
发布于
2026-02-14
许可协议
CC BY-NC-SA 4.0