亞馬遜研究人員推 Fortuna:提高模型預測準確性和量化不確定性能力


劃重點:

- 🔍 Fortuna 是一種開源不確定性量化庫,旨在使先進的不確定性量化方法在回歸和分類應用中更容易應用。

- 📊 Fortuna 支持校準技術和可擴展的貝葉斯推斷工具,有助於提高模型預測的準確性和量化不確定性能力。

- 🌐 這個庫為用戶提供一個一致、直觀的界面,集成現代、可擴展的不確定性量化方法,幫助確保機器學習系統的可靠性和安全性。

站長之傢(ChinaZ.com) 11月9日 消息:近年來,人工智能和機器學習領域的最新進展使人們的生活變得更加便利。憑借其令人難以置信的能力,人工智能和機器學習正在涉足各個行業並解決問題。而機器學習的一個關鍵組成部分就是預測的不確定性,它能夠評估模型預測的準確性。為確保機器學習系統的可靠性和安全性,正確估計不確定性非常重要。

過度自信是一個普遍存在的問題,尤其是在深度神經網絡的背景下。過度自信指的是模型預測某個類別的可能性遠遠高於實際可能性。這可能會影響到現實世界的判斷和行為,因此是一個令人擔憂的問題。

已經開發許多能夠估計和校準機器學習不確定性的方法,其中包括貝葉斯推斷、一致性預測和溫度縮放等方法。雖然這些方法存在,但將它們應用到實踐中是一項挑戰。許多開源庫提供特定技術或通用概率編程語言的獨特實現,但缺乏一個支持最新方法的連貫框架。

為克服這些挑戰,一個研究團隊提出 Fortuna,這是一個開源的不確定性量化庫。Fortuna 將現代可擴展技術從文獻中整合到庫中,並通過一致、直觀的界面提供給用戶。其主要目標是使回歸和分類應用中復雜的不確定性量化方法的應用更簡單。

團隊分享 Fortuna 的兩個主要特點,它們極大地改進深度學習的不確定性量化能力。

首先是校準技術:Fortuna 支持多種校準工具,其中之一是一致性預測。任何預訓練的神經網絡都可以與一致性預測一起使用,產生可靠的不確定性估計。它有助於平衡模型的置信度得分和其預測的實際準確性。這對於幫助醫生確定 AI 系統的診斷或自動駕駛汽車對環境的解讀是否可靠非常有幫助。

其次是可擴展的貝葉斯推斷:除校準過程,Fortuna 還提供可擴展的貝葉斯推斷工具。這些工具可以在從頭開始訓練的深度神經網絡中使用。貝葉斯推斷是一種概率方法,可以將模型參數和預測中的不確定性結合起來。通過實施可擴展的貝葉斯推斷,用戶可以提高 Fortuna 的整體準確性以及模型量化不確定性的能力。

Fortuna 為模型預測的不確定性量化提供一個一致的框架,無疑是機器學習領域中的一個有用的補充。

論文地址:https://www.amazon.science/publications/fortuna-a-library-for-uncertainty-quantification-in-deep-learning


相關推薦

2024-03-21

減少預測的方差並提高預測的穩定性。真實效果怎麼樣?研究人員收集大量的氣象數據和河流流量數據,來訓練這一模型。這些數據來自於不同的數據源,包括氣象預報、歷史記錄和地理信息。通過將數據標準化處理,模型得以

2022-09-15

力較弱,並證明需要使用基於機器學習的方法進行建模來提高模型性能,以更好地利用AlphaFold2 進行藥物發現。該論文“Benchmarking AlphaFold-enabled molecular docking predictions for antibiotic discovery”發表在Molecular Systems Biology 期刊上。論文

2023-03-08

力下降和癡呆。自該疾病被發現以來的一個世紀裡,醫學研究人員一直未能找到治療方法和可靠的早期檢測方法。上周四(3月2日)發表在國際著名科學期刊PLOS ONE上的一篇研究文章表明,深度學習技術在阿爾茨海默氏癥診斷中

2024-02-05

歷史數據進行深度學習,AI 模型能夠不斷自我優化,逐漸提高對大氣動力學和氣象學的理解。這種迭代的學習過程,使得 AI 模型能夠更好地適應不同的氣象條件,並迅速反應氣候變化的復雜性。(來源:Pixabay)值得一提的是,

2023-01-13

地知道一些關於全球變暖的事情......。他們知道的和學術研究人員一樣多,"哈佛大學的研究助理和新論文的主要作者傑弗裡-蘇普蘭說。"可以說,他們知道他們需要知道的一切,以便開始采取行動並警告公眾。但他們當

2024-05-07

劃重點:⭐ 研究人員在 Meta、Ecole des Ponts ParisTech 和 Université Paris-Saclay 的一項研究中提出通過同時預測多個token來改進 AI 大型語言模型(LLMs)的準確性和速度。⭐ 多token預測使模型在推理時間上提升3倍,並在生成任務上表現更

2022-08-17

。除石油企業之外,其他一些企業也在偷偷收益。微軟、亞馬遜和其他雲服務企業開始越來越多地為石油巨頭們尋找和開采更多石油和天然氣的努力提供算力。微軟正在幫助埃克森對大量的油田數據進行分析。亞馬遜正在幫助鉆

2022-10-18

以讓CODE-AE可靠地預測新藥在人體內的濃度和代謝效果。研究人員還指出,該人工智能模型有可能在經過一定的調整後來準確預測藥物對人體的副作用。

2023-04-07

所需資源規模巨大,全球中期天氣預報的有效性每10年才提高1天,難以滿足社會和經濟的發展需求。“風烏”提供一個強大有效的全球中期天氣預報的AI框架,在預報精度、預報時效和資源效率三方面都領先。在預報精度方面,

2024-05-06

學模型具有Gemini基礎模型的所有優點,但對其進行微調。研究人員測試這些以藥物為重點的調整,並將結果寫入論文中。這篇論文長達 58 頁,內容豐富,我們選取其中最令人印象深刻的部分。自我培訓和網絡搜索功能要做出診

2024-04-10

ian在公司園區Alphabet Inc.旗下的谷歌在雲計算方面落後於亞馬遜和微軟,但隨著其核心搜索廣告業務的成熟,雲計算市場是這傢科技巨頭實現增長的最佳選擇之一。谷歌報告其雲部門在2023年首次實現全年盈利,並希望利用在人

2023-04-14

據報道,亞馬遜今日推出一項名為“Bedrock”的雲服務,允許開發者使用類似於ChatGPT聊天機器人的人工智能系統,來進一步強化他們的軟件。此舉表明,作為最大的雲計算服務提供商,亞馬遜不會將生成式人工智能領域的巨大商

2022-09-22

是研究當前模型穩健性、泛化、能力、偏差和約束的 AI 研究人員。與此同時,它也很適合作為面向開發者的自動語音識別解決方案尤其是英語語音識別。感興趣的朋友,可以從托管平臺上下載 Whisper 系統的多個版本,其模型在

2023-11-29

AI賦能亞馬遜物流,從購買前的需求預測,到路線規劃和優化、以及預測道路意外狀況……每一個環節都嵌入AI技術。人工智能助力“最後一公裡”,亞馬遜把物流玩得透透的。應戰“剁手星期一”(感恩節後的第一個星期一11月