更改AI天气预报！90分钟后 降雨量在1秒内计算完毕 DeepMind论文登上了Nature

cfnx7593

据说9月30日，谷歌母公司Alphabet最高级的英国AI研究机构DeepMind又扩大了！

此次DeepMind重点关注天气预报这一重大挑战，与英国气象厅合作，将AI应用于预测降雨，优于现有预测模式3358www.sina.com/。





迪普米德的AI模型提前90分钟预测天气事件

根据论文，DeepMind使用了深度生成模型，更准确地预测未来1-2小时内的降雨量，以实现准确的降雨预测。

据DeepMind研究组称，气象专家评价说，与传统方法相比，他们对DeepMind提出的新AI模型普遍比较喜欢，从而开辟了利用AI大幅提高准确度的新天气预报方法的道路。

该研究刚刚发表在顶级学术杂志Nature上，题目是《用雷达深度生成模型进行有技巧的降雨临近预报》，论文系统地整理和讨论了模型、数据和验证方法。





另外，DeepMind还向GitHub传达了教育数据和经过预先训练的英国模式。

01.现代天气预报的棘手问题

2小时内精准预测天气

“今天晚上会下雨，记得带雨伞！单击这样围绕天气话题的讨论和嘱咐在人们的聊天中相当常见。

从小生活日常，到预防大灾害，天气预报要越早越好，越准确。但是预测到今天为止的降水量是气象学家面临的重大挑战。

中世纪，气象学家首先使用星星进行预测。慢慢地，记录季节和降雨模式的样式开始保存。几个世纪后，英国物理学家兼数学家路易斯弗莱理查森构想了“预测工厂”，利用计算和大气物理方程预测全球天气。

今天，在天气预报系统中，DeepMind增加了一个新的元素：“机器学习”。

现代天气预报由数值天气预报(NWP，numerical  weather  prediction)系统驱动。解物理方程后，NWP可以提前几天预测未来天气。这种方法通常在预测6至2周后的天气时准确度很好，但在预测2小时内的天气时准确度会下降。

现在，临近的预报填补了这个重要时间间隔的性能差异。

临近的天气预报对水资源管理、农业、航空、应急计划、野外活动等非常重要，支持依赖天气决定的许多行业的现实社会经济需求。

天气探测技术的发展使我们能够以高频(例如，每5分钟1公里的分辨率)提供测量地面降水量的高分辨率雷达数据。传统方法将难以解决的核心领域与高质量数据的可用性相结合，为机器学习对临近的预测做出贡献提供了机会。

近年来，出现了一些以机器学习为基础的方法，他们在雷达观测的大数据集上进行了训练，以更好地模拟降雨和其他不可预测的降雨现象。(威廉莎士比亚、Northern  Exposure(美国电视连续剧)、机器名言)例如，谷歌正在与国家海洋和大气管理局(NOAA)合作，研究可以注入NOAA企业的机器学习系统，微软通过从历史数据中识别重复的天气和气候模式。

在我国，彩云天气等天气预报公司以气象雷达图和AI算法为基础进行了分等级精密降水预报，短时间降雨预报准确度为1分钟，预报范围缩小到1公里，达到80%至90%。

02.临近预报的深度生成模型

准确性和实用性均排名第一

DeepMind的重点是对附近降雨的预测。也就是说，两个小时前预测降雨的数量、时间和地点。

研究人员使用与GAN相似的深度生成模型方法DGMR，以过去的雷达数据为基础，对未来的雷达做出了详细可靠的预测。(威廉莎士比亚，《北方执行报》)。

从概念上说，这是一个生成雷达图像的问题。降雨深度生成模型DGMR学习数据的概率分布，描述随机变量可以获得的所有可能值，从学习的分布中生成“接近预测”。

通过这种方法，研究小组不仅可以准确捕捉大规模降雨事件，还可以生成多种替代降雨方案(也称为综合预测可观测性)，探索降雨的不确定性。研究期间，研究小组使用了英国和美国的雷达数据。

在培训过程中，研究组通过比较CPU(10核AMD  EPYC)和GPU(NVIDIA  V100)硬件的速度来评估采样率，发现了生成每个样品所需的平均时间。
间为23.7秒，GPU为1.3秒。



▲利用过去20分钟的观测雷达资料，用降雨深度生成模型（DGMR）提供未来90分钟的概率预测。

DeepMind团队在博客中提到：“我们特别感兴趣的是这些模型对中到大雨事件的预测能力，这些事件对人们和经济的影响最大。”他们展示了与竞争方法相比，这些模型在统计方面的显著改进。

为了验证DGMR生成预测结果的精度，研究团队准备了2个现有降雨预测模型，分别隐藏模型名，请英国国家气象局的56名气象预报专家来评估。

与其他主流临近预测方法相比，DGMR对1536公里乘1280公里的区域做出了更现实、更一致的预测，提前5~90分钟进行预测。

“与广泛使用的临近预报方法相比，他们（56名气象专家）在89%的案例中将我们的新方法评为他们的首选，这体现我们的方法有能力为现实世界决策者提供洞察力。”DeepMind研究人员写道。相对于另外两种竞争方法，DGMR在准确性和实用性评估方面排名第一。

如图所示，下图左上角为观测到的实际雨云的移动，右上是DGMR模型生成的预测结果，相比降水强度过高的对流方法（PySTEPS）和模拟结果模糊的确定性深度学习方法（UNet），DGMR能更好地捕捉环流、强度和结构，并更准确地预测东北部的降雨量和运动，同时生成清晰的预测。



▲2019年4月英国上空的一个具有挑战性的事件（目标是观察到的雷达）

论文提到：“我们证明，生成式临近预报可以提供概率预测，提高预测值，支持运营效用，并在解决方案和交付时间方面，替代方法难以做到。”



▲2019年4月美国东部的一次大降水事件（目标是观测到的雷达）。生成方法DGMR平衡了降水强度和程度，相比之下，PySTEPS方法的强度往往过高，UNet的结果相对模糊。

天气预报往往受多重因素影响，也许一个预测对了降雨位置但算错强度，另一个预测在错误的位置预测对了强度等。在这项研究中，研究人员付出了很多努力，根据广泛的指标来评估其算法。

DeepMind研究人员称，DGMR可以预测由于潜在的随机性而本质上难以追踪的天气事件，还可以像调整任务的系统一样准确地预测降雨的位置，同时保留对决策有用的属性。

03.下一步计划：提高长期预测准确性
通过使用统计、经济和认知分析，DeepMind展示了一种新的、有竞争力的雷达降雨临近预报方法。

“建模复杂现象、快速预测和代表不确定性的能力使AI成为环境科学家的强大工具。”DeepMind高级专职科学家Shakir Mohamed说。

他认为尽管现在还为时过早，但这次试验表明，AI能让预测人员不必将时间耗费在不断增加的预测数据堆里，而是专注于更好地了解其预测的影响。“这将是减轻当今气候变化不利影响、支持适应不断变化的天气模式并可能拯救生命不可或缺的一部分。”

不过，任何方法都有局限性，需要做更多的工作来提高长期预测的准确性和对罕见和激烈事件的准确性。

因此研究团队计划在未来的工作中，开发更多的评估性能的方法，并进一步将这些方法专业化，以适应具体的现实应用。

DeepMind研究人员相信，这是一个令人兴奋的研究领域，他们希望这篇论文能为新的工作提供数据和验证方法，使提供有竞争力的验证和操作效用成为可能。

他们还希望与英国气象局的合作将促进机器学习和环境科学的更大整合，并更好地支持应对气候变化的决策。

04.结语：DeepMind用AI破解
科学难题的又一突破
AI和数据分析的价值正更多渗透到天气预报领域。去年年初，华为云与深圳市气象局合作，采用AI方法将预测准确率提高10%~20%。借助AI及大数据，国内的彩云天气应用、苹果去年4月收购的第三方天气应用Dark Sky均实现了分钟级的降雨预测，预测准确度还在不断提升。

Facebook首席AI科学家Yann LeCun、知名AI科学家吴恩达均曾表示，缓解气候变化和促进能源效率对于AI研究人员来说是值得的挑战。

环境科学和AI之间的合作侧重于决策者的价值，为临近预报降雨开辟了新渠道，也体现出AI在不断变化的环境中支持应对决策挑战的机会。

从去年发布破解蛋白质折叠难题的AI蛋白质预测模型AlphaFold，到如今AI降雨预测模型DGMR再登Nature，DeepMind的AI研究正愈发展现出解决关键科学问题的实际应用价值。

本文来自微信公众号“智东西”（ID：zhidxcom），作者：ZeR0，。

VvWnBo198515

前排支持下分享

快快来

真是 收益 匪浅

K6XdEv760836

好帖，来顶下

gFainl635759

不错，支持下楼主

qNVdsf359577

支持一下

PHTGsv821606

找到好贴不容易，我顶你了，谢了

oCIdPY825016

相当不错，感谢无私分享精神！

Petrtug

找到好贴不容易，我顶你了，谢了

Vk50F6676908

不错，支持下楼主