在數(shù)據(jù)流隨時間變化的領域，開發(fā)可以快速學習的更靈活的人工智能是關鍵任務。具有時間序列數(shù)據(jù)的實際應用包括視頻處理、流行病學、金融市場、經(jīng)濟學、國內(nèi)生產(chǎn)總值 (GDP)、健康監(jiān)測、天氣預報、大氣污染、自動駕駛汽車、機器人技術、航空和醫(yī)學成像等一些。

　　流體智力與晶體智力的概念可以追溯到 1963 年，當時它是由 20 世紀最有影響力的心理學家之一雷蒙德·卡特爾 (Raymond Cattell) (1905-1998) 提出的。流體智力是靈活思考、推理和實時處理新信息的能力。相比之下，結晶智力是指從先前學習的事實、技能和經(jīng)驗中獲得的知識。

　　流體智力(Fluid Intelligence)是一種以生理為基礎的認知能力，如知覺、記憶、運算速度、推理能力等。流體智力是與晶體智力相對應的概念，流體智力隨年齡的老化而減退。流體智力屬于人類的基本能力，受先天遺傳因素影響較大，受教育文化影響較少。流體智力的發(fā)展與年齡有密切的關系：一般人在20歲以后，流體智力的發(fā)展達到頂峰，30歲以后隨著年齡的增長而降低。而晶體智力則并不隨年齡的老化而減退，晶體智力主要指學會的技能、語言文字能力、判斷力、聯(lián)想力等。

　　“我們引入了一類新的時間連續(xù)循環(huán)神經(jīng)網(wǎng)絡模型，”該研究的作者寫道。 Ramin Hasani 是計算機科學與人工智能實驗室 (CSAIL) 的博士后，也是該研究的主要作者。該團隊的其他研究人員包括麻省理工學院教授兼 CSAIL 主任 Daniela Rus、麻省理工學院博士生 Alexander Amini、奧地利科學技術研究所的 Mathias Lechner 和維也納科技大學的 Radu Grosu。

　　當存在時間序列數(shù)據(jù)時，經(jīng)常使用使用常微分方程 (ODE) 來確定連續(xù)時間隱藏狀態(tài)的循環(huán)神經(jīng)網(wǎng)絡。研究人員團隊著手改進這種結構，以“實現(xiàn)更豐富的表征學習和表達能力”。

　　研究人員寫道：“我們不是通過隱式非線性來聲明學習系統(tǒng)的動態(tài)，而是構建通過非線性互連門調(diào)制的線性一階動態(tài)系統(tǒng)網(wǎng)絡?！?/p>

　　作為替代方案，研究人員創(chuàng)建了一個液體時間常數(shù) (LTC) 循環(huán)神經(jīng)網(wǎng)絡 (RNN)。這種新型循環(huán)神經(jīng)網(wǎng)絡的優(yōu)勢在于它在設計上更具表現(xiàn)力，因此本質(zhì)上更透明和可解釋。

　　這種表現(xiàn)力使研究人員能夠更好地了解神經(jīng)網(wǎng)絡的一些“思考”過程，這一好處有助于揭開人工智能機器學習“黑匣子”的一些復雜認知的神秘面紗。

　　研究小組寫道：“由此產(chǎn)生的模型代表了動態(tài)系統(tǒng)，其變化的(即液體)時間常數(shù)與其隱藏狀態(tài)耦合，輸出由數(shù)值微分方程求解器計算?！? “這些神經(jīng)網(wǎng)絡表現(xiàn)出穩(wěn)定和有界的行為，在神經(jīng)常微分方程族中產(chǎn)生卓越的表現(xiàn)力，并提高了時間序列預測任務的性能?！?/p>

　　為了評估他們的新模型，該團隊對他們的液體時間約束遞歸神經(jīng)網(wǎng)絡進行了大量實驗。實驗包括訓練分類器從運動數(shù)據(jù)中識別手勢，從傳感器數(shù)據(jù)流(溫度、二氧化碳水平、濕度和其他傳感器)預測房間占用，以及從智能手機數(shù)據(jù)識別人類活動(例如，站立、行走和坐著)。其他測試包括順序 MNIST、運動動力學建模以及交通預測、每小時家庭用電量、臭氧濃度水平和更多類型的人類活動。

　　與其他循環(huán)神經(jīng)網(wǎng)絡模型(LSTM、CT-RNN、Neural ODE 和 CT-GRU)相比，研究人員觀察到，在關于時間序列預測的七項實驗中有四項改進了 5% 到 70%。

　　人工智能正在跨行業(yè)和許多功能迅速擴展。 AI 機器學習變得越靈活、流暢和透明，未來提高 AI 安全性和性能的潛力就越大。