今天小編分享的科學經驗:清華&中國氣象局大模型登Nature:解決世界級難題,「鬼天氣」預報時效首次達3小時,歡迎閲讀。
真 · " 未雨綢缪 ",清華大學「鬼天氣」預報大模型來了!
是能破解世界未解難題的那種——
公裏尺度下0~3 小時極端降水都能預報。
包括短時強降水、暴風雨、暴雪、冰雹等在内的極端降水天氣,都能做到提前預警。
完成這項研究可實屬不易。
清華大學軟體學院與國家氣象中心、國家氣象信息中心合作,聯合突破瓶頸三年才提出這個名為NowcastNet的極端降水臨近預報大模型,并用了近六年的雷達觀測資料完成了模型的訓練。
在全國62 位氣象預報專家的過程檢驗中,該方法大幅領先國際上的同類方法,研究成果現已登 Nature。
目前,NowcastNet 已經在國家氣象中心短臨預報業務平台(SWAN 3.0)部署上線,将為全國極端降水天氣短臨預報業務提供支撐。
那麼極端降水的臨近預報為什麼這麼難?清華團隊又是如何解決這一難題的?
為什麼被列為科學難題?
近年來,受全球氣候變化影響,極端降水天氣頻發,實現更準确、更精細和更長預警提前量的降水臨近預報成為人們的關注點。
由于極端降水天氣過程大多只持續幾十分鍾且空間尺度在幾公裏範圍,受到對流、氣旋、地形等復雜過程和大氣系統混沌效應的影響較為嚴重。
而基于物理方程模拟的數值預報技術很難對公裏尺度的極端降水做出有效預報。
因此,在今年 5 月 27 日世界氣象組織峰會上,三小時内降水臨近預報就被列為了未解決的重要科學難題之一。
△基于雷達觀測的降水臨近預報是世界性難題之一
此前也有預測極端降水天氣的方法。
數值計算和深度學習就是降水臨近預報的兩類主流方法,但均存在明顯的缺陷:
數值計算方法難以有效建模降水過程的時空多尺度特征,同時受到預報累積誤差的制約,預報時效往往在一小時以内。
深度學習方法雖然擅長建模非線性系統,但統計模型存在固有的小樣本過平滑問題,預報求解過程缺少物理守恒規律約束,生成的數值場模糊失真嚴重,難以提供有業務價值的極端降水預報。
臨近預報大模型 NowcastNet
針對上述挑戰,2017 年起,清華大學軟體學院王建民教授、龍明盛副教授團隊就與國家氣象中心、國家氣象信息中心建立研究團隊,就人工智能技術在氣象大數據的應用開展合作。
經過三年聯合突破瓶頸,提出了臨近預報大模型 NowcastNet,并在美國和中國近六年雷達觀測資料上完成了訓練。
該模型的核心是端到端建模降水物理過程的神經演變算子,實現了深度學習與物理規律的無縫融合。
△物理建模與深度學習融合的臨近預報大模型 NowcastNet
具體而言,研究團隊首先設計了中尺度演變網絡,用以建模平流運動等物理性質更顯著的中尺度降水過程,并基于物質連續性方程(即質量守恒定律)設計了神經演變算子,端到端模拟降水過程中的十公裏尺度運動,并通過反向傳播最小化預報累積誤差。
其次,研究團隊提出了對流尺度生成網絡,以中尺度演變網絡預測結果為條件,通過概率生成模型進一步捕捉對流生消等混沌效應更顯著的公裏尺度降水過程。
得益于上述融合設計,該模型兼具深度學習與物理建模的優勢,在國際上首次将降水臨近預報的時效延長至3 小時(上文提到,此前數值計算方法通常在 1 小時内),并彌補了極端降水預報的短板。
為了充分檢驗臨近預報大模型 NowcastNet 對典型天氣過程的業務指導價值,國家氣象中心邀請了62 位來自 23 個省市氣象台的一線預報專家,針對中美兩國2400 個極端降水過程進行了後驗檢驗和先驗檢驗,并與目前業務中使用的方法進行了對比。
其中,pySTEPS 是一種基于平流的方法,是目前世界各地氣象中心所廣泛采用的預報系統。PredRNN 是一種數據驅動的神經網絡,已在中國氣象局部署。而 DGMR 是由谷歌 DeepMind 與英國氣象局聯合提出的模型。
所有模型都在美國和中國降水事件的大型雷達數據集上進行訓練和測試。
△氣象專家檢驗結果和數值指标評測結果,CSI 用于衡量預報的位置準确性;PSD 用于衡量預報的頻譜特征與雷達觀測的降水變化性之間的比較。
正如上圖所示,NowcastNet 在臨界成功指數(CSI)、能量譜密度(PSD)等數值指标上全面超越現有技術,在 71% 的天氣過程中被認為具有最高的預報價值。
在極端降水過程中,NowcastNet 是唯一展現較強業務價值的臨近預報技術。
以中美兩國的典型極端天氣過程為例:
2021 年 5 月 14 日 23 時 40 分,中國江淮地區出現強降水過程,湖北、安徽等多個地區發布了暴雨紅色預警,NowcastNet 可以準确預測出三個強降水超級單體的變化過程。
△a. 預測的地理信息、b. 不同模型在 T+1 小時、T+2 小時和 T+3 小時上的預測結果、c. CSI 是一種用于評估預測準确性的指标
2021 年 12 月 11 日 9 時 30 分,美國中部地區突發龍卷風災害,造成 89 人死亡、676 人受傷,NowcastNet 可以對強降水的強度、落區和運動形态等給出更清晰、更準确的預報結果。
檢驗表明,NowcastNet 對于極端災害天氣的精準防控具有良好的指導意義。
目前,該研究成果以 " 高技巧極端降水臨近預報大模型 "(Skilful Nowcasting of Extreme Precipitation with NowcastNet)為題發表在《自然》(Nature)上,同時被《自然 · 新聞和觀點》以 "The Outlook for AI Weather Prediction" 為題做了報道。
研究人員認為:
該研究探索了數據驅動與物理驅動的 " 科學學習 " 新範式,提出了物理守恒約束下時空物質場建模和預測的一般方法,對其他具有多尺度物理特性的問題也具有應用前景。
他們還表示:
未來将進一步推進該方案在物理問題求解、大氣海洋模拟、工業設計仿真等場景下的應用。
團隊信息
清華大學軟體學院王建民教授、龍明盛副教授,以及機器學習泰鬥、加州大學伯克利分校教授、清華大學榮譽教授 Michael I. Jordan 為論文的通訊作者。
清華大學軟體學院博士生張育宸和龍明盛副教授為論文的第一作者,碩士生陳凱源、邢藍翔參加了研究工作。
國家氣象中心金榮花研究員提供了氣象知識和數據支持并主持了全國範圍内氣象專家檢驗工作,羅兵、張小玲、薛峰、盛傑、韓豐、張小雯等專家為研究工作提供了指導、建議和幫助。
研究得到國家自然科學基金創新研究群體項目、優秀青年科學基金項目和大數據系統軟體國家工程研究中心的支持。
論文鏈接:https://www.nature.com/articles/s41586-023-06184-4