速度提升1万倍!“几分钟”就完成7天天气预报成为可能

2023-07-12 17:17:15 来源:网络

■本报记者 赵广立 实习生 沈秋月

毕恺峰是清华大学钱学森力学班2016级本科生,他于2020年毕业后加入华为,成为一名工程师。3年后,他作为第一作者在《自然》发表论文。

该论文通讯作者、华为云人工智能首席科学家田奇向《中国科学报》证实:数据显示,这是近年来中国科技公司首篇作为唯一署名单位的《自然》正刊论文。

这篇论文发表于7月6日,介绍了华为云盘古气象大模型研发团队研究成果,报告了业内“首个在中长期气象预报上精度超过传统数值预报方法的AI模型”。

《中国科学报》进一步了解得知,毕恺峰加入华为云后,曾“半年内连升两级”,目前已是主任工程师。论文主要完成人、华为云高级研究员谢凌曦透露:“这篇文章90%以上的工作量是毕恺峰完成的。”

盘古气象预训练模型已于2023年3月公开。“我们公开了论文中使用的1小时、3小时、6小时、24小时模型,这些模型的运行速度很快,即使在CPU上单步迭代所需时间也不超过1分钟。这意味着研究者在电脑上花几分钟就能完成未来7天的高分辨率全球天气预报。”谢凌曦说。

适应地球坐标系统的三维神经网络

盘古气象大模型的研究始于2021年。这年正是毕恺峰选定AI气象预报方向的时间。2020年底,毕恺峰开始涉足AI科学计算领域。在做了许多科学计算课题的调研后,2021年下半年他选定了AI气象预报方向。

人们日常看到的每日天气预报、极端灾害预警、气候变化预测等均属于“数值天气预报”,它比较依赖高性能计算和复杂的物理模型,因此瓶颈问题比较突出。田奇告诉《中国科学报》,传统数值方法预报一次28公里×28公里水平精度的未来10天全球天气,需要在有3000台服务器的超级计算机集群上计算4至5小时。而如果想得到更高精度、更小范围的预测,算力需求和计算时间都将呈几何级数增长。

但AI天气预报也存在问题。比如,在传统数值方法应用最广泛的中长期预报中,现有的AI预报方法精度有限,并受到“可解释性欠缺”“极端天气预测不准”等问题的制约。

田奇团队认为,这主要有两个原因:一是原有的AI气象预报模型都是基于2D神经网络,难以很好地处理不均匀的3D气象数据;二是AI方法缺少数学物理机理约束,因此在迭代过程中会不断积累迭代误差。

为此,研究团队提出了适应地球坐标系统的三维神经网络(3D-EST)来处理复杂的不均匀3D气象数据,并使用层次化时域聚合策略减少预报迭代次数,从而减少迭代误差。

3D-EST方法在理论上可以解决很多问题,但很快,“缺少实际气象数据”又成为新的难题——空有理论,无法进行模型训练,也无法对比预测结果并不断优化模型。

从欧洲气象中心下载超200TB的数据

到底是年轻人,毕恺峰干劲十足。

他花费了大半年时间,从欧洲气象中心下载了超过200TB的再分析数据,并且利用早期的10年数据,逐步搭建起AI气象预报的训练框架。有了一定的调参经验后,2022年中,他开始在40年数据上做实验。

“我们使用了全球40年的天气数据,用了200张GPU卡进行预训练,大概经过2个月,训练出了参数量达到亿级的盘古气象大模型。”田奇对《中国科学报》说。

结果出乎预料地喜人。盘古气象大模型在1小时至7天预测精度上均高于传统数值方法(对比欧洲气象中心的IFS系统),同时,在一张V100显卡上,盘古气象大模型只需要1.4秒就能完成24小时的全球气象预报,包括位势、湿度、风速、温度、海平面气压等数值。相比传统数值方法,预测速度提升1万倍。

2022年11月,欧洲气象中心通过邮件与研究团队取得联系,并沟通试用事宜。模型开放后,欧洲气象中心积极测试,并给出了一系列反馈正面的测试报告。报告肯定了盘古气象大模型在确定性预报和一些天气过程的预报中表现良好,还指出其提供了一种“推理功耗显著低于传统方法”的技术模型。

今年5月,台风“玛娃”的走向受到广泛关注。中央气象台称,华为云盘古气象大模型在“玛娃”的路径预报中表现优异,提前5天预报出其转向路径。

欧洲气象中心的系列报告和中央气象台的反馈,无疑给盘古气象大模型的天气预报能力“背了书”。

投稿后,《自然》编辑对论文非常认可,并找来3位审稿人,他们不是计算机或人工智能领域的专家,而是气象领域的学者。

3位审稿人均对该成果给出高度评价。其中一位审稿人称赞:“华为云盘古气象大模型让人们重新审视气象预报模型的未来,模型的开放将推动该领域的发展。”

论文审稿人之一、美国科罗拉多州立大学教授Imme Ebert-Uphoff还为《自然》撰写了一篇观点文章,进一步补充说明了这项工作的价值,该文与盘古气象大模型的论文同日在线发表。

不是替代而是互补

华为云盘古气象大模型在天气预报中的亮眼表现,让人不禁好奇:AI预报会替代传统预报吗?

“谈替代传统数值预报方法是不合适的。”田奇表示,盘古气象大模型的目标不是替代,而是让每个行业、企业乃至每个人都拥有专家助手,让工作更高效、更轻松。

毕恺峰、谢凌曦也表示,AI气象预报还存在诸多缺陷,例如未做同化、高度依赖于再分析数据、极端天气估计能力偏弱等。“至少在未来一段时间,AI气象预报方法和传统气象预报方法会结合起来,形成一种混合预报系统。两种方法会发挥各自优势,例如传统方法的可解释性和AI方法的高效性。”

“我们认为,AI天气预报应该和数值天气预报并存、互相对比验证,为人类提供更加精准可信的天气预报。”田奇表示。

“AI与医学影像分析已经结合了10年以上,至今AI还是辅助作用,无法替代医生,特别是高水平专家。同理,在气象领域也是一样。”谢凌曦说,虽然盘古气象大模型在一定程度上得到了业界认可,但前方的路还很长,未解决的问题还很多。他希望能有更多同仁一起,探索AI在气象预报以及更广阔的科学领域中的应用。

,速度提升1万倍!无锡 旅游 “几分钟”就完成7天天气预报成为可能

相关:

57岁北漂女工,在3㎡管道间里画画每天一条独家原创视频王柳云今年57岁,出生于湖南农村,嫁到台州。前50年的生活轨迹和一般农妇无异,辍学,种田,打工,持家。51岁的那一年,她独自前往福建和深圳学画,成了一名“流浪艺术家”。如今在北京的一栋写字楼里,一边打扫卫生,一边画画、读书、写字。▲王柳云和她的画上图摄影师:张京石2021年,她因为一篇报道爆火,被各大媒体争相采访,上了央视,100多幅画被网友买光。在她成名两年后,一条前往北京和台州拜访了..

在扩张中玩火的北约,需要亚洲给他们“上一课”导读:当地时间7月11日,2023年北约峰会在立陶宛维尔纽斯举行。在俄乌战争焦灼、欧洲乱局不断的背景下,北约是否会在分歧中继续扩张,这一立足欧洲的军事联盟是否将在中美战略竞争的背景下将触角伸向东亚?本文为观察者网专栏作者罗思义针对北约扩张将引发的全球动荡发表在境外媒体的实时分析文章,授权发布中文版,以飨读者。【文/观察者网专栏作者 罗思义】7月11日至12日,北约将在立陶宛首都维尔纽斯举行首脑会议。本次峰会..

51岁的退休阿姨,在四线城市逐梦互联网我们都慢慢退休了,周围有生气的、生病的、打麻将说闲话的,我都不想。文|徐 嘉编|陈梅希“他打了一个急方向,车就窜上树了。我在天上飞的时候,心里说完了完了,要去死了,不能死啊我还有好多事没做,闭着眼念了十声阿弥陀佛,车落在地上,我眼睛一睁,嘿,还活着。”大雨中的高速路旁,雪姨站在被撞烂的轿车前——这是她曾经努力销售的回报之一,后备箱里的保险单、宣传单在雨里飞,送客户的油洒了一地。眼前饭桌上没人夹菜..

浙江宣传:“虚热”的研讨会该降降温了\n 近期,11部门联合出手,在全国范围内部署开展论坛活动专项清理整治,引发业界和社会关注。一方面,研讨会、论坛、学术会议等“虚热”“泛滥”现象近年来颇有扩大之势,有知名学者感慨,如果所有在国内召开的“国际会议”的邀请函,他都一一接受的话,一年到头恐怕不是在会场,就是在赶往会场的路上。另一方面,“虚热”的表象下隐藏的问题不少,比如随意冠以“全国”“国际”“高峰”等字样,名不符实;主题交叉重复、内容空..

俄防长:乌军在反攻中损失26000余人和3000多件军事装备【环球网报道】综合塔斯社、俄罗斯卫星通讯社报道,俄国防部长绍伊古11日表示,自上月4日以来,乌克兰武装部队在所谓“反攻”行动中未能全面实现其目标,并损失2.6万余名军人和3000多件军事装备。塔斯社称,用绍伊古的话说,俄军在此期间摧毁了21架飞机、5架直升机、1244辆坦克和其他类型的装甲车辆,其中包括17辆德制“豹”式坦克、5辆法制AMX-10RC轮式轻型坦克和12辆美制“布雷德利”战车。报道还称,绍伊古尤其提到乌军炮兵遭..

北约公报15次提中国,鬼话连篇7月11日至12日,北约峰会在立陶宛首都维尔纽斯举行。当地时间11日傍晚,北约官网发布与会政府首脑达成的维尔纽斯峰会公报。长安街知事注意到,此次峰会共达成90条共识,主要分为重申北约原则、欢迎新成员、批评俄罗斯并支持乌克兰、提升国防开支和防御能力四大方面。公报中提到中国15次,言辞激烈、鬼话连篇。刻意渲染“中国挑战”维尔纽斯北约峰会的公报称,中国的政策对北约利益、安全和价值观构成挑战,对欧洲-大西洋安全构成..

松口同意瑞典加入北约,埃尔多安态度为何急转弯?在北约峰会召开前夕,围绕瑞典加入北约一事出现戏剧性进展。当地时间7月10日,北约秘书长斯托尔滕贝格称,土耳其政府已同意将瑞典加入北约的议定书提交给本国议会批准。这意味着,瑞典的“入约”之路上又少了一个障碍。就在10日早些时候,土耳其总统埃尔多安还表示,只有给土耳其加入欧盟打开通道,才会给瑞典加入北约“开路”。埃尔多安的态度为何“急转弯”?土耳其的松口又会对土美、土俄关系产生怎样的影响?土耳其松口一年..

特朗普批美国向乌提供集束弹药:一场超乎想象的噩梦海外网7月12日电 据美国《国会山报》网站报道,当地时间11日,美国前总统特朗普就美政府批准向乌克兰提供集束弹药一事回应称,此举正将人们推向战争,是“一场超乎想象的噩梦”。特朗普在个人社交平台上发布声明称,美国政府应努力结束战争,阻止可怕的破坏和死亡事件发生。特朗普表示,出于人道主义和战略层面原因,他反对使用集束弹药,“在战争结束之后,未爆炸的弹药将在未来几十年内残害无辜的乌克兰民众。”美国宣布对乌..

富士康决定不玩了,给莫迪狠狠一耳光\n 还记得4个月前的那张照片吗?四手交错,紧紧握在一起。白胡子的莫迪笑得很欢,旁边的刘杨伟更是一脸灿烂。随后,刘杨伟担任董事长的鸿海集团(富士康)发推,这样说:刘扬伟董事长正在印度访问,今天(3月3日)我们与尊敬的莫迪总理举行了热情的会面,向他介绍了我们在该国取得的良好进展。富士康将继续在印度建立一个生态系统,让我们所有的利益相关者能够共享、协作和繁荣。莫迪随即转发了这条推特,然后说:我和刘先生的..

加拿大的“不速之客”,把美国折腾惨了?2023年,地广人稀的高纬度国家加拿大“火”了一把——可惜是令人谈虎色变的山火。2023年6月3日,消防员在加拿大新斯科舍省谢尔本县的森林灭火。图|新华社加拿大跨部门林火中心最新数据显示,今年以来加拿大已发生近3500起森林火灾。截至当地时间7月6日,过火面积已达9万多平方公里,持续破历史纪录。目前,加全国仍有670处火场在燃烧,其中半数以上处于失控状态。1迅速扩散的“不速之客”7月1日,美国广播公司(ABC)播放了“飞..