独家 | 机器学习x环境科学:实时预测下一小时的降雨

d9e28a235785fc4bd8d51ba5dc8e44b2.png

作者︰The Nowcasting Team, Deepmind
翻译︰Gabriel Ng校对:陈汉青


本文约1700字,建议阅读6分钟
本文结合环境科学和AI领域知识,为决策者开辟实时降雨预报的新途径。

我们的生活与天气息息相关。根据一项研究,每一时刻都有三分之一的英国人,曾在过去一小时内讨论过天气,反映出天气(至少对英国人来说)在日常生活中的重要性。在各种天气现象中,下雨是特别重要的,因为它会直接影响到我们的日常决策。出门时应该带伞吗?遇到大雨时,要如何调度车辆路线?在户外活动中又应采取哪些安全措施?会不会有洪水?最新的研究和接近完美的模型推进了降水实时预报(Precipitation Nowcasting)的发展,这里降水实时预报即指预测未来 1-2 小时内的降雨(和其他降水现象)。

一篇与气象局合作撰写并发表在《自然》杂志上的论文中直接解决了这一天气预报中的重要挑战。这是个由环境科学和人工智能一起合作的成果,聚焦于决策者,开辟了实时降雨预报的新途径,并指出人工智能可以帮助我们在不断变化的环境下做出决策。

短期天气预报

纵观历史,天气预测一直在社区和国家有着重要意义。一开始,中世纪的气象学家利用星星来进行预测。渐渐地,记录着季节和降雨模式的表格开始被保留下来。几个世纪后,刘易斯·弗莱 (Lewis Fry) 设想了一个“预测工厂”,其使用计算和大气物理方程来预测全球天气。在这部不断发展的天气预报历史中,我们现在增添了一个机器学习的角色。

如今我们的天气预报是由强大的数值天气预报 (NWP) 系统驱动的。通过求解物理方程,NWP 可以提前几天提供基本的行星尺度的预测。然而,他们很难在两小时以下这样的较短时间内,生成高分辨率的预测。而实时预报填补了这一关键时间区间的性能差距。

实时预报对于水资源管理、农业、航空、紧急应对和户外活动等行业至关重要。在天气传感方面的进步使得高分辨率的雷达数据(用作测量地面降水量)可以高频地使用(例如,在 1 公里分辨率下每 5 分钟收集一次数据)。在现有方法难以解决的关键领域,通过利用可用的高质量数据,机器学习有机会对实时预报做出贡献。

3f1e2e600bba973987f4f04cf4777b36.png

利用深层降雨生成模型 (DGMR),过去 20 分钟观测到的雷达数据可被用于为接下來的 90 分钟提供概率性预测

实时预报的生成模型

我们关注于降雨的实时预报:最多可提前 2 小时预测降雨量、时间和降雨位置。我们使用一种称为生成建模(generative modeling)的方法,根据过往的雷达数据,对未来的雷达数据进行详细合理的预测。概念上来说,这个问题就像是要生成一部电影,只不过电影的每一帧是雷达影像。利用这些方法,我们一方面可以准确地捕捉大规模事件,另一方面还可以生成许多其他可供选择的降雨场景(称为集合预测),从而可以探索降雨的不确定性。我们在研究结果中使用了来自英国和美国的雷达数据。

我们对这些模型预测中雨到大雨的能力特别感兴趣,而这类型事件是对人们生活和经济影响最大的事件;并且与竞争方法相比,我们的方法在这些场景中显示出统计上的显著改进。重要的是,我们与英国国家气象局气象局的 50 多位专家气象学家进行了一项认知任务评估,与目前被广泛使用的实时预报方法相比,在 89% 的案例中专家们将我们的新方法评为他们的首选,证明了我们的方法能为现实世界的决策者提供洞察先机。

bea752fcdc1df702408d7b5c3700d3dc.png

一个在2019 年 4 月在英国发生的高难度预测事件(预测目标是观测到的雷达数据)。我们的生成方法 (DGMR) 比起平流方法 (PySTEPS) 更好地描述了环流、强度和结构,并且更准确地预测东北部的降雨和活动。与确定性深度学习方法 (UNet) 不同,DGMR 还可以生成清晰的预测

09f83dd5a0bbb98d8fd5340ca9fbbe52.png

2019 年 4 月在美国东部发生的强降水事件(预测目标是观测到的雷达数据)。与平流方法 (PySTEPS) 相比,生成方法 DGMR 平衡了降水的强度和范围,而前者的预测强度通常太高;并且DGMR的预测不像确定性深度学习方法 (UNet) 那样模糊

接下来的发展

通过使用统计、经济和认知分析,我们能够展示一种全新、具有竞争力的利用雷达来进行降水实时预报的方法。没有方法是完美的,接下来我们需要做更多的工作来提高长期预测的准确性以及对罕见和大强度事件的准确性。未来的工作需要我们开发其他评估性能的方法,并进一步将这些方法特化于特定的实际应用。

我们认为这是一个令人兴奋的研究领域,而我们希望我们的论文能够成为未来新工作的基础,通过提供数据和验证方法,使之有可能提供具有竞争力的验证和实操效能。我们更希望与气象局的这次合作将促进机器学习和环境科学之间进一步的整合,更好地支持在不断变化的气候中的决策。

原文标题︰

Nowcasting the Next Hour of Rain

原文链接:

https://deepmind.com/blog/article/nowcasting

编辑:黄继彦

校对:林亦霖

译者简介

fffd907c461a3b8587c19692e3b4cdd4.png

Gabriel Ng,清华大学概率统计方向本科生在读,一个热爱于数据分析和语言学习(和音乐)的THUer,平日活动离不开学习、健身和音乐。喜欢从数据探勘各类问题的本质,从语言认识不同文化的故事。希望通过学习和经验的累积,能以不同的角度,理性地分析问题,感性地认识问题。

翻译组招募信息

工作内容:需要一颗细致的心,将选取好的外文文章翻译成流畅的中文。如果你是数据科学/统计学/计算机类的留学生,或在海外从事相关工作,或对自己外语水平有信心的朋友欢迎加入翻译小组。

你能得到:定期的翻译培训提高志愿者的翻译水平,提高对于数据科学前沿的认知,海外的朋友可以和国内技术应用发展保持联系,THU数据派产学研的背景为志愿者带来好的发展机遇。

其他福利:来自于名企的数据科学工作者,北大清华以及海外等名校学生他们都将成为你在翻译小组的伙伴。

点击文末“阅读原文”加入数据派团队~

转载须知

如需转载,请在开篇显著位置注明作者和出处(转自:数据派ID:DatapiTHU),并在文章结尾放置数据派醒目二维码。有原创标识文章,请发送【文章名称-待授权公众号名称及ID】至联系邮箱,申请白名单授权并按要求编辑。

发布后请将链接反馈至联系邮箱(见下方)。未经许可的转载以及改编者,我们将依法追究其法律责任。

9429b47cc9c2f4ddf8c8ba78ad29f292.png

点击“阅读原文”拥抱组织

  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值