编辑 | ScienceAI
猜测降水、温度和风等气候变量对于社会生产生活至关重要。随着更多的极端气候出现，比如洪水、干旱和热浪等，准确的预告对于准备和减轻其影响尤为重要。未来的前 24 小时很关键，因为它们具有高度可猜测性和可操作性，可以帮助人们及时做出明智的决策并保证安全。
深度神经网络为气候条件建模供应了另一种范例。一旦数据可用，神经模型就能在不到一秒的光阴内做出猜测，并且具有非常高的光阴和空间分辨率，以及直接从大气察看中学习的能力。
使用大气察看、最高保真度和最低延迟数据训练的神经模型，与最先进的几率数值气候预告模型相比，迄今为止仅在 12小 时的迟延期内取得了良好的功能，并且仅适用于降水这一唯一变量。
近日， Google Research 和 Google DeepMind 开发了一个名为 MetNet-3 的新气候模型。它大大扩展了鉴于观察的神经模型可以猜测的前置光阴范围和变量。
图：MetNet-3 模型架构。（起原：论文）
MetNet-3 以早期的 MetNet 和 MetNet-2 模型为基础，可迟延 24 小时对更多核心变量进行高分辨率猜测，包括降水、表面温度、风速和风向以及露点。
MetNet-3 供应了一个光阴平滑且高度精细的预告，迟延光阴间隔为 2 分钟，空间分辨率为 1 至 4 公里。与传统方法相比，MetNet-3 实现了强大的功能，优于最好的鉴于物理的单成员和多成员数值气候预告 (NWP) 模型（例如 HRRR 和 ENS），可迟延 24 小时预告多个地区。该研究为鉴于察看的神经模型树立了新的功能里程碑。
研究人员在与气候相关的各种 Google 产品和技术中集成了 MetNet-3 的功能。MetNet-3 目前在美国本土和欧洲部分地区推出，重点是 12 小时降水预告，正在帮助为多个国家和语言的人们供应准确可靠的气候信息。
该研究以《Deep Learning for Day Forecasts from Sparse Observation》为题，发布在 arXiv 预印平台上。
论文链接：https://doi.org/10.48550/arXiv.2306.06079
图示：MetNet-3 降水输入在移动设备上的 Google 搜索中汇总为可行的猜测。（起原：报导）
稀疏察看的致密化
最近的许多机器学习气候模型使用传统方法（例如，NWP 的数据夹杂）生成的大气状态作为建立预告的主要起点。相比之下，MetNet 模型的一个决定性特征是使用对大气的直接察看来进行训练和评估。直接观察的优点是它们通常具有更高的保真度和分辨率。然而，直接察看来自不同高度的各种传感器，包括地面气象站和轨道卫星，并且可能具有不同程度的稀疏性。例如，来自 NOAA 多雷达/多传感器系统 (MRMS) 等雷达的降水估计是相对密集的图像，而位于地面的气象站供应诸如温度和风等变量的测量值，只是分布在一个地区的点。
除了之前 MetNet 模型中使用的数据源之外，MetNet-3 还包括气象站的点测量作为输入和目标，目的是在所有位置进行猜测。为此，MetNet-3 的关键创新是一种称为致密化（densification）的技术，它将鉴于物理的模型中传统的数据夹杂和模拟的两步过程合并到神经网络的单次传递中。致密化的主要组成部分如下所示。尽管致密化技术单独适用于特定的数据流，但由此产生的致密化猜测受益于进入 MetNet-3 的所有其他输入流，包括地形、卫星、雷达和 NWP 分析功能。MetNet-3 的默认输入中不包含 NWP 猜测。
图：致密化技术。（起原：报导）
空间和光阴高分辨率
使用直接察看的一个核心优势是其高空间和光阴分辨率。例如，气象站和地面雷达站分别每隔几分钟在特定点以 1 公里的分辨率供应测量结果；这与 SOTA 模型 ENS 的夹杂状态形成鲜明对比，该模型每 6 小时生成一次，分辨率为 9 公里，并进行每小时猜测。
为了处理如此高分辨率，MetNet-3 保留了该系列模型的另一个定义特征，即迟延期调节。以分钟为单位的猜测迟延光阴直接作为神经网络的输入给出。这使得 MetNet-3 能够有效地对短至 2 分钟的光阴间隔内的察看的高光阴频率进行建模。致密化与迟延光阴调节和高分辨率直接察看相结合，可生成光阴分辨率为 2 分钟的全密集 24 小时预告，同时从遍布美国的一分钟察看 (OMO) 气象站网络中的 1,000 个点进行学习。
MetNet-3 猜测每个输入变量和每个位置的边际多项式几率分布，供应超出平均值的丰富信息。这使研究人员能够将 MetNet-3 的几率输入与高级几率集成 NWP 模型的输入进行比较，包括欧洲中期气候预告中心的集合预告ENS和美国国家海洋和大气管理局的高分辨率集合预告（HREF）。由于两个模型输入的几率性质，研究人员能够计算分数，例如连续排名几率分数（CRPS）。下图突出显示了致密化结果，并说明 MetNet 的猜测不仅具有更高的分辨率，而且在重叠交付周期进行评估时也更加准确。
图：MetNet-3对未来24小时内每2分钟的风速进行猜测，空间分辨率为4公里；ENS 每小时预告，空间分辨率为 18 公里。（起原：报导）
图：鉴于 CRPS 的 MetNet-3 和 NWP 风速基线的功能比较（越低越好）。（起原：报导）
与气象站变量相比，降水估计更密集，因为它们来自地面雷达。MetNet-3 的降水建模与 MetNet-1 和 2 类似，但将 1 公里空间粒度的高分辨率降水预告扩展到与其他变量相同的 24 小时迟延光阴，如下面的动画所示。MetNet-3 在降水方面的功能在整个 24 小时范围内实现了比 ENS 更好的 CRPS 值。
图：ENS 的每小时猜测；地面实况，起原 NOAA 的 MRMS；MetNet-3 猜测的几率图。（起原：报导）
图：CRPS 上瞬时降水率的 MetNet-3 和 NWP 基线之间的功能比较（越低越好）。（起原：报导）
供应及时 ML 猜测
根据历史数据训练和评估像 MetNet-3 这样的气候预告模型只是向用户供应鉴于 ML 的猜测过程的一部分。开发及时气候预告 ML 系统时需要考虑很多因素，例如从多个不同起原获取及时输入数据、运行推理、实现输入的及时验证、从模型的丰富输入中构建洞察，从而带来直观的用户体验，并以 Google 规模供应结果——所有这些都是连续循环的，每隔几分钟刷新一次。
该团队开发了这样一个及时系统，能够每隔几分钟为整个美国本土和欧洲 27 个国家供应降水预告，交付光阴长达 12 小时。
图：使用 MetNet-3 生成降水预告的过程。（起原：报导）
该系统的独特性源于其使用近乎连续的推理，这使得模型能够根据传入的数据流不断创建完整的猜测。这种推理模式不同于传统的推理系统，由于输入数据的独特特征，这种推理模式是必要的。该模型采用各种数据源作为输入，例如雷达、卫星和数值气候预告夹杂。这些输入中的每一个都具有不同的刷新频率以及空间和光阴分辨率。一些数据源（例如气候察看和雷达）具有类似于连续数据流的特征，而其他数据源（例如数值气候预告夹杂）则类似于批量数据。该系统能够在空间和光阴上对齐所有这些数据源，从而使模型能够以非常高的节奏创建对未来 12 小时降水的最新猜测。
通过上述过程，模型能够猜测任意离散几率分布。研究人员开发了新颖的技术，将这种密集的输入空间转换为用户友好的信息，从而在整个 Google 产品和技术中供应丰富的体验。
Google 产品中的气候功能
世界各地的人们每天都依靠 Google 来供应有用、及时且准确的气候信息。这些信息有多种用途，例如规划户外活动、旅行打包以及在恶劣气候事件中保持安全。
MetNet-3 的最先进的准确性、高光阴和空间分辨率以及几率性质使得创建独特的超本地气候见解成为可能。对于邻近的美国和欧洲，MetNet-3 已投入运行，可生成及时 12 小时降水预告，这些预告现已在与气候相关的 Google 产品和技术（例如搜索）中供应服务。模型的丰富输入被合成为可操作的信息，并立即供应给数百万用户。
例如，通过移动设备搜索精确位置的气候信息的用户将收到高度本地化的降水预告数据，包括根据产品细分的光阴线图。
图：Android 上的 Google 应用程序（左）和移动网络搜索（右）显示气候中的 MetNet-3 降水量输入。（起原：报导）
结论
MetNet-3 是一种新的气候预告深度学习模型，在对一组核心气候变量进行 24 小时预告方面，其功能优于最先进的鉴于物理的模型。它有潜力为气候预告创造新的可能性，并提高许多活动的安全性和效率，例如交通、农业和能源生产。MetNet-3 已投入运行，其预告可在多个与气候相关的 Google 产品中供应。
相关报导：https://blog.research.google/2023/11/metnet-3-state-of-art-neural-weather.html