給定一段時期的歷史數據，AI能否準確預測天氣變化、電網負荷需求、交通擁堵狀況？這是個時序預測問題。阿里巴巴達摩院近期提出一種長時序預測的新模型FEDformer，精準度比業(yè)界最優(yōu)方法提升14.8%以上，模型已應用于電網負荷預測。相關論文已被機器學習頂會ICML2022收錄。

ICML是機器學習領域的頂級學術會議，2022年度會議將于本周日（7月17日）開幕。達摩院決策智能實驗室的論文《FEDformer: Frequency Enhanced Decomposed Transformer for Long-term Series Forecasting》關注了機器學習領域的經典問題：時序預測。

時間序列預測（Time Series Forecasting），通俗理解就是利用歷史數據預測未來信息。預測可分為短期、中期和長期預測，需要預測的時間窗口越長，預測難度就越大。這項技術在氣象、電力、零售、交通等諸多行業(yè)有廣泛應用。

傳統(tǒng)的時序預測模型一般采用LSTM、CNN等方法，精準度和使用場景都較為有限，無力處理大規(guī)模數據。近些年來，研究人員開始將transformer模型引入長時序預測，但效果仍不夠理想，簡單地說該模型核心中的注意力機制模塊對時序數據不夠敏感。

達摩院提出的長時序預測模型FEDformer，融合transformer和經典信號處理方法。比如，利用傅立葉/小波變換將時域信息拆解為頻域信息，讓transformer更好地學習長時序中的依賴關系。FEDformer也能排除干擾，具有更好的魯棒性。其中專門設計了周期趨勢項分解模塊，通過多次分解以降低輸入輸出的波動，進一步提升預測精度。

達摩院FEDformer模型架構

實驗證明，達摩院新模型在電力、交通、氣象等6個標準數據集上均取得最佳紀錄，預測精準度較此前業(yè)界最佳模型分別提升14.8%（多變量）和22.6%（單變量）。值得一提的是，該模型已走出實驗室，在區(qū)域電網完成概念驗證，明顯提升電網負荷預測準確率。

達摩院FEDformer模型在6個數據集均取得最佳紀錄

據了解，達摩院決策智能實驗室旨在用數學建模來解決真實世界的復雜問題，其重點研究方向包括時序預測，今年剛在ICASSP'22 AIOps Challenge獲得冠軍。基于自研的時序預測、優(yōu)化求解器MindOpt、安全強化學習等底層技術，達摩院打造的綠色能源AI，已逐步落地全國多家電網和發(fā)電企業(yè)，促進綠色能源消納和電網安全運行。