AI Earth 深度学习模型替换数值天气预报模型中的参数化方案-大气辐射传输方案

1.背景

太阳辐射和热辐射是大气和海洋运动的最根本的驱动力。大气辐射传输过程实际上已经可以通过一种叫做LBLRTM的辐射模型精确计算,但是LBLRTM模型同时也最为耗时。因此,有各种各样的辐射传输参数化方案用来近似计算辐射传输过程,并应用在数值天气预报中。参数化方案的概念源于数值天气预报模式。大气中一些至关重要的物理过程的规模都要小于当前数值预报模式的网格分辨率,比如小尺度流体运动(小涡,旋涡,涡旋),下图展示了次网格尺度下的水汽凝结最终生成云的过程。一些物理过程非常复杂包括湍流过程、散射等。网格尺度的运动和次网格尺度的运动必然存在一定程度的相互作用,可以通过引入一些参数,来近似建立网格尺度的物理量与次网格尺度的物理量之间的关系,而确定这些参数的方案,被称为参数化方案。

次网格中云的生成(gif动图)

此外辐射参数化方案尽管经过了简化,但是仍然是数值预报模式中最为耗时的,因此辐射传输参数化方案通常在比模式网格分辨率更低的网格中采用更低的频次调用。例如,在欧洲中尺度天气预报ECMWF的确定性预报中,辐射传输方案的调用空间分辨率比原网格粗糙10.24倍,时间调用频次为其他参数化方案和动力框架的1/8。

已经有许多科研工作者尝试一些方案用于替换原辐射参数化方案,包括采用神经网络的方式。早在1998年,欧洲中尺度数值预报中心的Chevallier等人利用单隐藏层的浅层神经网络去计算从一个有31层垂直层的数值模式中大气层顶到地面的长波辐射,也被称为NeuroFlux。NeuroFlux的精度达到了和原ECMWF中辐射传输方案相近的精度,并且要快22倍。但是当模式的垂直分层达到了60层及以上的时候,NeuroFlux就难以同时保持精度和加速的效果。2020年,韩国研究人员Roh, Soonyoung和Song, Hwan Jin通过实验证明:基于神经网络的辐射方案运算速度更快,高频次的调用基于神经网络的辐射方案与低频次调用原先基于物理的辐射方案,在耗时接近的情况下,获得的预报精度更高。

此外,基于深度学习模型的参数化方案除了追求精度以外,也应该通过将物理定律融入到模型中以获得更让人信服的结果。在大气辐射传输问题中,辐射通量和辐射加热率之间存在中一定的关系,如下面公式所表达的。早期的一些研究训练出来的模型直接输出辐射加热率廓线以及地面和大气层顶的辐射通量,没有考虑到能量守恒问题。近来,有部分研究人员通过让模型只预测出辐射通量,然后根据下面公式计算辐射加热率,保证物理上的一致性。但是,Ukkonen等人发现辐射加热率对于辐射通量的误差,特别是相邻垂直层的辐射通量差值非常敏感,很小的辐射通量误差即会造成辐射加热率的相对较大的误差。因此,有必要同时对辐射通量和辐射加热率同时监督,并满足物理规律。

 

公式中,HRl​为辐射加热率(单位为K/day),g为重力常数,cp为定压热容量, Flup​、Fldown​和pllev​分别为模式第l个level上的向上辐射通量、向下辐射通量,和气压。

我们在训练深度学习模型模拟辐射传输计算之前,通过跨尺度大气预报模式MPAS-A模型以及使用非常普遍的RRTMG辐射传输方案生成大量的训练和验证数据集。同时,我们提出了一种包含前面提到的物理约束的训练框架。基于该框架,我们采用和对比了不同类型的深度学习模型网络结构,并分析了每种网络结构在辐射传输问题上的优缺点。

2.数据

2.1.数据生成

数据集生成采用跨尺度大气预报模式MPAS-A模型(7.1版本),美国国家环境预报中心(NCEP)的全球预报系统(GFS)数据作为初始场。本次MPAS-A模型的设置采用了约60公里的准均匀网格,总共包含了163842个网格点。垂直分层方面采用混合的地形跟随坐标系,共57个垂直层(level),大气层顶在30公里高空。并且,垂直分层的间隔从近地面到大气层顶显著增加。

物理参数化方案上采用了称为"mesoscale reference"的套装。MPAS-A模型运行12次,每次为在2020年的1个月份随机选择一天运行连续3天,3天中的前两天数据作为训练数据,后一天作为测试数据。模型每隔1小时(模拟时间,并非真实时间)输出1次。随机选择的初始时间如下:20200108,20200213,20200302,20200420,20200528,20200615, 20200719,20200811,20200927,20201012, 20201124,20201204。

2.2.模型的输入和输出

下面表格列举了所有的输入和输出变量,包含29个输入变量,6个输出变量。输入变量中,11个变量为地面变量,其他的为3维变量(模式layer或level)。因此,有必要对不同类型的变量进行预处理,通过将地面变量重复拷贝以及将模式layer的变量的地面layer变量拷贝一份的方式,将所有变量的维度都统一成与模式level层变量相同。基于训练数据集,采用z-score的归一化方式,并且对于任一一种原三维变量,均采用该变量的所有模式layer或level的数值计算平均值和标准差。

Type

Variable name

Definition

Location

Unit

Input

aldif

Surface albedo (near-infrared spectral regions) for diffuse radiation

Surface

1

aldir

Surface albedo (near-infrared spectral regions) for direct radiation

Surface

1

asdif

Surface albedo (UV/visible spectral regions) for diffuse radiation

Surface

1

asdir

Surface albedo (UV/visible spectral regions) for direct radiation

Surface

1

cosz

Cosine solar zenith angle for current time step

Surface

1

landfrac

Land mask (1 for land, 0 for water)

Surface

1

sicefrac

Sea ice fraction

Surface

1

snow

Snow water depth

Surface

kg/m2

solc

Solar constant

Surface

AI Earth地球科学云平台
关注 关注
  • 7
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Linux.Shell Scirpt.基本够用的操作
随便写写
09-01 672
基本够用的 Shell Script 语法 选择 Shell 在 Shell 脚本的第一行设置,如下选择 bash 来运行 #!/bin/bash Linux 的 Shell 有多种,常见有以下: Bourne Shell(sh),是 UNIX 最初使用的 Shell,在不同 UNIX 下均能使用。 sh 在 Shell 编程上非常好用,但在与用户的交互上不如其他。 Bourne Ag...
基于机器学习和辐射传输的地表温度模拟方法对比
2301_77907355的博客
04-28 387
对于不同的地表类型和不同的年份,经验方法是实用的,虽然整体精度不如物理方法,但具有计算速度快、对模型内部结构考虑较少等优点。尽管深度学习等回归的经验方法不需要考虑辐射传输和能量平衡的具体过程, 但在其输入数的选择上也不能是无序和随机的,而是应选择有关相应物理过程的数。经验方法在处理不同年份相同地表类型或表现相对较好, RMSE 约为 1.50K,但在不同地表类型且不同年份模拟结果较差, RMSE 约为 3.0K, 虽然精度不如物理方法,但它具有计算速度快,不需过多考虑模型内部结构的优点。
3种常见深度学习参数化论文、解读、使用方法、实现代码整理(Re-Parameter)
03-27
3种常见深度学习参数化论文、解读、使用方法、实现代码整理(Re-Parameter)
MPAS跨尺度、可变分辨率模式实践技术应用及典型案例分析
weixin_46747075的博客
07-24 243
MPAS-A模式的大气动力内核求解的是完全可压的非静力学运动方程,其最显著的特点是非结构化的质心 Voronoi 网格。SCVT 网格为全球框架内的区域降尺度提供了机会(下图),因为它允许网格从更粗的分辨率平滑地转换到更高分辨率,而不是使用嵌套来转换网格的传统区域气候模型 RCM(如WRF)。
深度学习Day-16:实现天气预测
最新发布
m0_51359915的博客
05-08 1263
深度学习探索分析
AI EARTH——1972-2019全球不透水面30米分辨率产品(GISA-2.0)
qq_31988139的博客
03-05 1170
此数据集采用自1972年来的超过三百万景Landsat影像, 研发了一套从20世纪70年代至今的最细时空粒度的全 球不透水面产品(GISA)。
6S辐射传输模式使用例子
wokaowokaowokao12345的专栏
03-24 6571
6S模型构成 6S模型主要包括以下5个部分,考虑了大气顶的太阳辐射能量通过大气传递到地表,以及地表的反射辐射通过大气到达传感器的整个辐射传输过程。 (1)太阳、地物与传感器之间的几何关系:用太阳天顶角、太阳方位角、观测天顶角、观测方位角四个变量来描述; (2)大气模式:定义了大气的基本成分以及温湿度廓线,包括7种模式,还可以通过自定义的方式来输入由实测的探空数据,生成局地更为精确、实时的大气模式,此外,还可以改变水汽和臭氧含量的模式; (3)气溶胶模式:定义了全球主要的气溶胶数,如气溶胶相函数、非对称因子
浅谈经典大气辐射传输模型
weixin_41697159的博客
12-16 8432
5S模型 1986年由法国里尔科技大学大气光学实验室Tanre D.等人研发了5S模型,5S模型不仅可以用来模拟太阳辐射传输过程,还可以计算辐亮度。该模型假设大气吸收和散射作用可以耦合。 6S模型 6S模型是美国马里兰大学地理系的Vermote等人于1997年在5S模型的基础上研发的。该模型很好地模拟了地气系统太阳辐射传输过程,适用于辐射波长200nm到4000nm的大气辐射传输模型。相对于5S模型,6S模型考虑了目标高度(这对于传输路径有很大的影响),非朗伯平面的情况和新的吸收气体种类(CH4,N2O
大气快速辐射传输模型RTTOV12.2安装教程及心得体会
weixin_43471242的博客
11-26 8605
写在前边的话 安装RTTOV这条路是真的不容易啊,一不小心全是坑!为此我还请教了我的二导,导师手把手地教我,让我感激涕零,在此要特别感谢我的二导!!鞠躬!再次被二导的学识渊博所折服!我一定会好好跟着您学习的!!! 现在RTTOV大气快速辐射模型的安装,没有太多文教程,就连uesrguide全部都是英文的。。。所以为了能让后来者少走一点弯路,也为了完成“想为人类科学进步贡献自己一份力量”的小目标#...
(附源码)计算机毕业设计SSM基于框架的人力资源管理系统
学姐计算机毕设程序
10-22 381
(附源码)计算机毕业设计SSM基于框架的人力资源管理系统项目运行环境配置:(Webstorm也行)+ Eclispe(IntelliJ IDEA,Eclispe,MyEclispe,Sts都支持)。项目技术:等等组成,B/S模式 + Maven管理等等。环境需要1.运行环境:最好是java jdk 1.8,我们在这个平台上运行的。其他版本理论上也可以。2.IDE环境:IDEA,Eclipse,Myeclipse都可以。推荐IDEA;3.tomcat。
自建遥感AI模型 探索沙漠的绿色怪圈
AIEarth的博客
12-22 304
遥感大数据与人工智能深度融合的时代,利用遥感AI算法,一起寻找地球上有趣的地物。
数值预报产品的天气模型识别 (2001年)
05-11
数值预报产品的天气模型识别 (2001年)
著名大气辐射传输模式Mod4
08-12
美国著名大气辐射传输模式,专业工具,可用于辐射传输仿真建模
基于工作流的数值天气预报模型和气象数据服务平台设计与实现
06-03
在本文,我们提供了一套用于数字天气预报模型和气象数据服务的工作流设计和实现的最佳实践,这些最佳实践已在国气象局(CMA)运营了多年,并已被证明可以有效地管理复杂性大规模的气象相关工作流程。 根据以前在平台上的工作,我们认为强烈建议在整个平台建立过程至少使用一组指导方针,包括工作流程方案,模块设计,实施标准和维护注意事项,以减少将来的维护和调整需求。 通过基于工作流的项目可以显着提高性能。 我们认为,良好的工作流程系统在天气预报服务起着重要的作用,它为监视整个过程,修复错误,修复工作流程或使用新组件重新设计等效的工作流程模式提供了有用的工具。
人工智能-深度学习-OCR-利用语言模型,纠正OCR识别错误
07-03
OCR-Corrector 专为OCR设计的纠错器。 未来考虑增加OCR需要的各种NLP工具,包括: 粘连文本分词 命名实体识别 键值对匹配 功能 输入OCR识别结果(文本+单字符置信度),输出修正后的文本。 (单字符置信度:识别...
人工智能-深度学习-基于深度学习模型的网络流量分类方法研究.pdf
06-27
基于深度学习模型的网络流量分类方法研究 作为网络信息安全领域的研究热点,网络流量分类是一种有效的网络防护手段。随着互联网规模的增长和各类网络应用的不断出现,网络已经成为人类生活的必需品。然而,互联网上...
人工智能-深度学习-基于LBP牲与深度学习模型的人脸表情识别研究.pdf
06-26
"人工智能-深度学习-基于LBP牲与深度学习模型的人脸表情识别研究" 人脸表情识别是人工智能领域的一项重要研究方向,旨在通过对人脸表情的分析和识别,来了解人类的情感和情绪状态。近年来,随着计算机技术和人工...
人工智能-深度学习模型
12-23
矩阵与 神经网络模型深度学习模型 关系 机器学习 与 深度学习 在训练数据的区别 点乘与叉乘区别 深度学习模型 浅层与深层 关系 线性关系与非线性 权重和偏置 超数(训练数据与可调整数据(var)) 误差其他...
人工智能数值天气预报的优势
03-25
1. 提高精度:人工智能可以对海量的数据进行自动处理和学习,从而可以更准确地预测天气变化,提高预报精度。 2. 建模能力强:人工智能模型可以根据天气数据的时空特征和复杂相互作用建立有效的数值模型,从而更好地...

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
写文章

热门文章

  • 技术分享 | 遥感影像中的旋转目标检测系列(一) 2408
  • AI Earth 深度学习模型替换数值天气预报模型中的参数化方案-大气辐射传输方案 1333
  • 遥感影像百分比线性拉伸 1322
  • 典型光谱指数 982
  • ICLR2022系列解读之三:一个新的目标检测网络结构范式GiraffeDet 844

最新评论

  • 按区域检索和下载影像

    giser_bing: 今天试用了一下,求问有没有办法能把数据集存储到处理结果中?

  • 技术分享 | 遥感影像中的旋转目标检测系列(一)

    n_xier: 求论文地址和源码,谢谢

  • 技术分享 | 遥感影像中的旋转目标检测系列(一)

    weixin_45366412: 博主求源码以及论文ip

  • 技术分享 | 遥感影像中的旋转目标检测系列(一)

    一杯坏牛奶: 请问代码开源了吗?论文地址能提供下吗,谢谢!

  • 技术分享 | 半监督学习介绍

    遥感青年: 浅尝辄止,希望后续能有更多详细 介绍

最新文章

  • 功能上新 | 新增地图服务接入功能,内含惊喜
  • 数据上新|AI Earth首套农业专题数据上线(中山大学袁文平教授团队共享)
  • 典型光谱指数
2023年4篇
2022年14篇

目录

目录

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI Earth地球科学云平台

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或 充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值

深圳SEO优化公司泰安百度关键词包年推广推荐台州百度关键词包年推广多少钱白城百搜标王哪家好丽江百姓网标王价格深圳建网站报价中山seo排名公司泰安网站优化按天计费哪家好黄南营销网站推荐青岛百度标王价格安康营销型网站建设公司郑州网站seo优化黔西南网站建设价格阳江营销网站价格南山网站关键词优化固原网站优化软件哪家好吉祥至尊标王报价延安网站优化按天收费多少钱信阳建站公司玉树seo网站优化多少钱迪庆网站关键词优化报价吉安seo排名东莞网站建设价格湖州网站优化按天计费丽水网站优化按天计费推荐咸宁英文网站建设推荐拉萨SEO按天计费公司丹竹头百度标王推荐茂名网站优化按天计费哪家好庆阳百度关键词包年推广推荐果洛关键词排名包年推广推荐歼20紧急升空逼退外机英媒称团队夜以继日筹划王妃复出草木蔓发 春山在望成都发生巨响 当地回应60岁老人炒菠菜未焯水致肾病恶化男子涉嫌走私被判11年却一天牢没坐劳斯莱斯右转逼停直行车网传落水者说“没让你救”系谣言广东通报13岁男孩性侵女童不予立案贵州小伙回应在美国卖三蹦子火了淀粉肠小王子日销售额涨超10倍有个姐真把千机伞做出来了近3万元金手镯仅含足金十克呼北高速交通事故已致14人死亡杨洋拄拐现身医院国产伟哥去年销售近13亿男子给前妻转账 现任妻子起诉要回新基金只募集到26元还是员工自购男孩疑遭霸凌 家长讨说法被踢出群充个话费竟沦为间接洗钱工具新的一天从800个哈欠开始单亲妈妈陷入热恋 14岁儿子报警#春分立蛋大挑战#中国投资客涌入日本东京买房两大学生合买彩票中奖一人不认账新加坡主帅:唯一目标击败中国队月嫂回应掌掴婴儿是在赶虫子19岁小伙救下5人后溺亡 多方发声清明节放假3天调休1天张家界的山上“长”满了韩国人?开封王婆为何火了主播靠辱骂母亲走红被批捕封号代拍被何赛飞拿着魔杖追着打阿根廷将发行1万与2万面值的纸币库克现身上海为江西彩礼“减负”的“试婚人”因自嘲式简历走红的教授更新简介殡仪馆花卉高于市场价3倍还重复用网友称在豆瓣酱里吃出老鼠头315晚会后胖东来又人满为患了网友建议重庆地铁不准乘客携带菜筐特朗普谈“凯特王妃P图照”罗斯否认插足凯特王妃婚姻青海通报栏杆断裂小学生跌落住进ICU恒大被罚41.75亿到底怎么缴湖南一县政协主席疑涉刑案被控制茶百道就改标签日期致歉王树国3次鞠躬告别西交大师生张立群任西安交通大学校长杨倩无缘巴黎奥运

深圳SEO优化公司 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化