大酷樂
  • 汽車
  • 理财
  • 軍事
  • 科技
  • 遊戲
  • 互聯網
  • 娛樂
  • 财經
  • 科學
  • 社會
  • 親子
  • 電影
  • 健康
  • 教育
  1. 首頁
  2. 科學

剛剛,諾貝爾物理學獎頒給AI教父!

2024-10-09 简体 HK SG TW

今天小編分享的科學經驗:剛剛,諾貝爾物理學獎頒給AI教父!,歡迎閱讀。

諾貝爾物理學獎,今年頒給AI!

機器學習先驅Hinton、Hopfield共同獲獎,出乎所有人意料。

沒錯,不是事前預測中熱門的凝聚态或量子物理等方向,就是 AI,是機器學習,更具體來說,神經網絡。

以表彰他們為利用人工神經網絡進行機器學習做出的基礎性發現和發明 "。

那麼,他們的貢獻與物理關聯何在呢?

諾貝爾獎委員會揭秘:

他們利用了物理學方法來尋找信息的特征,構建了為當今強大的機器學習奠定基礎的方法。

Hopfield 提出的"Hopfield 神經網絡 ",以相當于物理學中自旋系統能量的方式進行描述。

Hinton 提出的" 玻爾茲曼機 ",則使用了統計物理學中的工具。

後來 Hinton 在這項工作的基礎上,幫助啟動了當前機器學習的爆炸性發展,也就是我們熟知的深度學習革命了。

人工神經網絡的第一塊重要基石

約翰 · 霍普菲爾德(John Joseph Hopfield)出生于 1933 年 7 月 15 日。

1954 年獲得斯沃斯莫爾學院物理學學士學位。1958 年在康奈爾大學獲得博士學位。

他早期聚焦于物理化學和凝聚态領網域研究。後來在貝爾實驗室工作期間,對分子生物學產生了濃厚興趣。

從 20 世紀 40 年代起,研究人員開始推理大腦神經元和突觸網絡背後的數學邏輯。

後來,人們便開始嘗試利用計算機來模拟大腦網絡功能。也就是開始構建人工神經網絡。

在這些網絡中,大腦的神經元被賦予不同值的節點所模仿,突觸由節點之間的連接表示,這些連接可以變得更強或更弱。唐納德 · 赫布的假設仍然被用作通過稱為訓練的過程更新人工網絡的基本規則之一。

之後很長一段時間裡,學界都在嘗試用數學、物理的方法來探索生物神經學。

比如 Hopfield,他曾利用他在物理學的背景來探索分子生物學的理論問題。

當他被邀請參加一個關于神經科學的會議時,他遇到了關于大腦結構的研究。他對所學到的東西感到着迷,并開始思考簡單神經網絡的動态。

當神經元一起作用時,它們可以產生新的和強大的特性,這些特性對于只觀察網絡單獨組件的人來說并不明顯。

1980 年,Hopfield 離開了他在普林斯頓大學的職位,他的研究興趣已經超出了他在物理學的同事們工作的領網域,他跨越大陸搬到了加利福尼亞州帕薩迪納的加州理工學院(Caltech),那裡他可以免費使用計算機資源進行實驗,并發展他對神經網絡的想法。

然而,他并沒有放棄他在物理學方面的基礎,并在其中找到了靈感,理解了如何系統地使用許多小組件一起工作可以產生新的和有趣的現象。

他特别受益于對磁性材料的學習,這些材料由于它們的原子自旋——一種使每個原子成為微小磁鐵的屬性——具有特殊特性。

鄰近原子的自旋相互影響;這可以允許形成自旋方向相同的網域。他能夠通過使用描述材料如何發展的物理學來構建一個具有節點和連接的模型網絡,當自旋相互影響時。

大腦的神經網絡是由具有先進内部機制的活細胞神經元構成的。它們可以通過突觸向彼此發送信号。當我們學習事物時,一些神經元之間的連接變得更強,而其他連接變得更弱。

人工神經網絡是由編碼有值的節點構建的。節點相互連接,當網絡被訓練時,同時活躍的節點之間的連接變得更強,否則它們變得更弱。

Hopfield 構建的網絡節點通過不同強度的連接相互連接。

每個節點可以存儲一個單獨的值——在 Hopfield 的第一次工作中,這可以是 0 或 1,就像黑白圖片中的像素格一樣。

Hopfield 用一個屬性來描述網絡的總體狀态,這相當于物理學中自旋系統中的能量;能量是使用一個公式計算的,該公式使用所有節點的值和它們之間所有連接的強度。霍普菲爾德網絡通過将影像輸入到節點,賦予它們黑色(0)或白色(1)的值來編程。

然後,網絡的連接使用能量公式進行調整,以便保存的影像獲得低能量。當另一個模式輸入到網絡時,有一個規則是逐個檢查節點,看看如果改變該節點的值,網絡的能量是否會降低。

如果發現如果黑色像素是白色,能量會降低,它就會改變顏色。這個過程繼續進行,直到無法找到進一步的改進。

當達到這一點時,網絡通常已經在它被訓練的原始影像上復制了自己。

如果只保存一個模式,這可能看起來并不那麼引人注目。

也許你想知道為什麼你不只是保存影像本身并與正在測試的另一個影像進行比較,但 Hopfield 的方法之所以特别,是因為可以同時保存多張圖片,網絡通常可以在它們之間進行區分。

Hopfield 将搜索網絡以尋找保存的狀态比作在有摩擦減緩其運動的山峰和山谷景觀中滾動一個球。

如果球被放在一個特定的位置,它會滾進最近的山谷并在那裡停止。如果網絡被給予一個接近保存模式之一的模式,它将以同樣的方式繼續前進,直到它最終到達能量景觀中的山谷底部,從而找到記憶中最接近的模式。

Hopfield 等人之後更進一步深入研究霍普菲爾德網絡,包括可以存儲任何值的節點,不僅僅是 0 或 1。

如果将節點視為圖片中的像素,它們可以有不同的顏色,不僅僅是黑色或白色。

改進的方法使得保存更多圖片成為可能,并且即使它們非常相似,也能區分它們。同樣可以識别或重建任何信息,只要它由許多數據點構建。

不過記住一個影像是一回事,解釋它所代表的内容是另一回事。

即使是非常小的孩子也可以指向不同的動物,并自信地說它是狗、貓還是松鼠。

他們可能偶爾出錯,但是能很快正确分辨。孩子甚至可以在沒有看到任何圖表或解釋物種或哺乳動物等概念的情況下學習這一點。在遇到每種動物的幾個例子後,不同的類别在孩子的腦海中形成了。人們通過體驗周圍的環境來學習識别貓,或理解一個詞,或進入一個房間并注意到有些事情已經改變。

當 Hopfield 發表他的聯想記憶文章時,Hinton 正在卡内基梅隆大學工作。

他之前在英國和蘇格蘭學習實驗心理學和人工智能,并想知道機器是否能夠以類似于人類的方式學習處理模式,為排序和解釋信息找到自己的類别。

Hinton:現在是圖靈諾貝爾雙料得主

Hinton 的研究正是建立在霍普菲爾德神經網絡之上。

當時 Hinton 在卡内基梅隆大學工作,他之前曾在英國研究過實驗心理學和人工智能,想知道機器是否可以學習,是否可以與人類類似的方式處理信息。

他與同事 Terrence Sejnowski 一起,利用統計物理學的思想擴展霍普菲爾德網絡。

統計物理學描述由許多相似元素組成的系統,例如氣體中的分子。

追蹤氣體中的所有單獨分子是困難或不可能的,但可以将它們集中考慮以确定氣體的壓力或溫度等總體特性。

氣體分子有許多潛在的方式以各自的速度在其體積中擴散,可以使用統計物理學來分析各個組件可以共同存在的狀态,并計算它們發生的概率。

十九世紀物理學家路德維希 · 玻爾茲曼用方程描述了有些狀态比其他狀态更有可能發生。

Hinton 利用了該方程,提出玻爾茲曼機。

玻爾茲曼機與今天的深度神經網絡一樣,可以從例子中學習,通過更新網絡連接中的值來進行訓練。

最初版本的玻爾茲曼機效率相當低,到 20 世紀 90 年代,許多研究人員對人工神經網絡失去了興趣,Hinton 是少數堅持下來的人。

到 2006 年,他和同事們一起在玻爾茲曼機的基礎上開發了" 深度信念網絡 "(Deep Belief Nets),其中提出了無監督的逐層訓練方法,後來成為深度學習的基礎。

在最後,諾貝爾獎委員會提到,Hopfield 和 Hinton 兩人在 80 年代的工作為 2010 年左右開始的機器學習革命奠定了基礎。

物理學為機器學習的發展貢獻了工具,相應的,現在機器學習也惠及了物理研究。

例如,機器學習長期應用于希格斯粒子發現等諾獎領網域,用于處理海量數據 ; 它還可用于減少引力波測量中的噪聲,或搜尋系外行星。

近年來,這項技術還開始被用于計算和預測分子及材料的性質,如計算決定蛋白質功能的分子結構,或設計性能更佳、可用于高效太陽能電池的新型材料。

One More Thing

眾所周知,作為深度學習三巨頭之一的 Hinton,也是 2018 年圖靈獎得主。

往前看,在 Hinton 之前,同樣一手諾貝爾獎一手圖靈獎的科學家,有且僅有一位。

赫伯特 · 亞歷山大 · 西蒙(Herbert Alexander Simon,中文名司馬賀)。

與 Hinton 一樣,西蒙也是先拿圖靈獎,再拿諾貝爾獎——

1975 年,西蒙和艾倫 · 紐厄爾(Allen Newell)因在人工智能、人類心理識别和列表處理等方面進行的基礎研究,榮獲圖靈獎。

(他倆是符号主義的創始人和代表人物,提出了物理符号系統假說)

1978 年,西蒙因為 " 有限理性說 " 和 " 決策理論 " 獲諾貝爾經濟學獎。

參考鏈接:

[ 1 ] https://www.nobelprize.org/

[ 2 ] https://www.cs.toronto.edu/~fritz/absps/ncfast.pdf

熱門排行
  • 王治郅:楊瀚森主要的問題是速度 他的速度跟不上現代籃球的節奏 王治郅:楊瀚森主要的問題是速度 他的速度跟 郟君昊 | 2025-05-05
  • 貿易戰燒進電影院:特朗普拟重稅打擊外國電影 逼好萊塢等回美拍片 貿易戰燒進電影院:特朗普拟重稅打擊外國電影 習又夏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 寸飛蘭 | 2025-05-05
  • 手機電池突破8000mAh?矽碳技術的回旋镖:「折壽」換容量 手機電池突破8000mAh?矽碳技術的回旋镖:「折 衛青柏 | 2025-05-05
  • 貸款追高炒黃金的人後悔了!有人一天虧掉6年工資,賣掉舍不得,不賣扛不住 貸款追高炒黃金的人後悔了!有人一天虧掉6年 繁綺文 | 2025-05-05
  • 任天堂對Genki提起Switch 2商标侵權訴訟,後者回應稱将嚴肅對待 任天堂對Genki提起Switch 2商标侵權訴訟,後 郜萌運 | 2025-05-05
  • 哪吒汽車APP和官網恢復正常 知情人士:之前斷網因流量欠費 哪吒汽車APP和官網恢復正常 知情人士:之前斷 袁曼雁 | 2025-05-05
  • 極越汽車 CEO 夏一平名下青島/義烏兩家公司被列入經營異常 極越汽車 CEO 夏一平名下青島/義烏兩家公司 集玲琳 | 2025-05-05
  • 全國經濟第一大省明确,推動組建農商聯合銀行 全國經濟第一大省明确,推動組建農商聯合銀行 佼昌翰 | 2025-05-05
  • 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩更專注進球&更像C羅 桑保利:亞馬爾有配合意識&有點像梅西 姆巴佩 甄正浩 | 2025-05-05
  • 高露現身上海虹橋機場 黑色外套點綴亮色愛心裝飾俏皮亮眼 高露現身上海虹橋機場 黑色外套點綴亮色愛 惠惠君 | 2023-05-02
  • 《歧路旅人2》:向光而生 《歧路旅人2》:向光而生 衛青柏 | 2023-05-02
  • vivo X90S曝光:處理器更新為天玑9200+ 安卓最強芯 vivo X90S曝光:處理器更新為天玑9200+ 安卓最 袁曼雁 | 2023-05-05
  • “懶癌”發病率上升,定期體檢别忽視 “懶癌”發病率上升,定期體檢别忽視 幸聽楓 | 2023-05-02
  • 宋慧喬獲百想視後 韓素希發圖手動加愛心表情慶祝 宋慧喬獲百想視後 韓素希發圖手動加愛心表 賁芳蕤 | 2023-05-02
  • 曹操墓,裡面都有啥? 曹操墓,裡面都有啥? 衛青柏 | 2023-05-02
  • 十年了,他們終于要HE! 十年了,他們終于要HE! 惠惠君 | 2023-05-07
  • 中央部署經濟工作,釋放5大信号 中央部署經濟工作,釋放5大信号 郜萌運 | 2023-05-02
  • 高德上線手機彎道會車預警功能 高德上線手機彎道會車預警功能 習又夏 | 2023-05-02
  • 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露面 陳自瑤抱病為愛女做蛋糕慶生,王浩信點贊沒露 賁芳蕤 | 2023-05-02
  • 等比例長大的童星,李蘭迪算一個 等比例長大的童星,李蘭迪算一個 郟君昊 | 2023-05-02
  • 這些被抓來做實驗的流浪狗,最終拯救了無數糖尿病人 這些被抓來做實驗的流浪狗,最終拯救了無數糖 集玲琳 | 2023-05-02
  • 高端國產車:軍車血統,目前電動車越野的“天花板”? 高端國產車:軍車血統,目前電動車越野的“天花 謝飛揚 | 2023-05-02
  • 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 《雲襄傳》終于抬上來啦,男O女A讓人好上頭! 集玲琳 | 2023-05-02
  • 21家A股遊戲公司2022年收入651億 今年“遊戲+AI”能否逆風翻盤? 21家A股遊戲公司2022年收入651億 今年“遊 衛青柏 | 2023-05-04
  • 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15日 與周立波夫婦鬧糾紛成老賴,唐爽被司法拘留15 寸飛蘭 | 2023-05-05
  • 信用風險釋放趨緩,結構性風險需重點關注 ——2023年一季度債市信用風險回顧與下階段展望 信用風險釋放趨緩,結構性風險需重點關注 — 袁曼雁 | 2023-05-02
  • 普京籤署總統令,批準對俄刑法典相關法條的修正案 普京籤署總統令,批準對俄刑法典相關法條的修 集玲琳 | 2023-05-02
  • 中銀證券給予南京銀行增持評級 中銀證券給予南京銀行增持評級 袁曼雁 | 2023-05-03
  • 解除資格!停止一切合作 解除資格!停止一切合作 佼昌翰 | 2023-05-02
  • 3699起 聯想小新mini主機上架 13代酷睿标壓處理器 3699起 聯想小新mini主機上架 13代酷睿标壓 習又夏 | 2023-05-05
  • 前董事長被免,天山生物全面進入“中植系”時代?股價曾在一月内暴漲超400% 前董事長被免,天山生物全面進入“中植系”時 惠惠君 | 2023-05-02
  • 瘋成這樣,怎麼還能被全網吹捧? 瘋成這樣,怎麼還能被全網吹捧? 郜萌運 | 2023-05-02
  • 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 狂吼11次“讓一下”!交警咆哮開道嘶吼到吐 寸飛蘭 | 2023-05-03
  • 摩根大通收購美國第一共和銀行 摩根大通收購美國第一共和銀行 謝飛揚 | 2023-05-02
  • 台劇赢麻了,又來一部8.9 台劇赢麻了,又來一部8.9 衛青柏 | 2023-05-02
  • 下降45分,上漲35分!34所自劃線院校復試分數線漲幅匯總 下降45分,上漲35分!34所自劃線院校復試分數線 袁曼雁 | 2023-05-07
  • 事關農村土地承包和農民權益,《農村土地承包合同管理辦法》5月1日起施行 事關農村土地承包和農民權益,《農村土地承包 郟君昊 | 2023-05-02
  • "三高"已盯上青少年,做好這件事是關鍵 "三高"已盯上青少年,做好這件事是關鍵 習又夏 | 2023-05-05
  • 五一檔沒一個能打的 五一檔沒一個能打的 集玲琳 | 2023-05-05
  • 恐怖韓劇下神壇,這次膽小可入 恐怖韓劇下神壇,這次膽小可入 袁曼雁 | 2023-05-05
  • 這劇是不是用ChatGPT寫的呀? 這劇是不是用ChatGPT寫的呀? 惠惠君 | 2023-05-02
  • 200戶連夜疏散,原因讓人憤怒!“損失超一億”,官方通報 200戶連夜疏散,原因讓人憤怒!“損失超一億”, 袁曼雁 | 2023-05-03
  • 性騷擾慣犯,滾出娛樂圈 性騷擾慣犯,滾出娛樂圈 謝飛揚 | 2023-05-05
  • 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的生活》證實将停辦 48歲何炅自曝已老花眼,黃磊睡前認老,《向往的 佼昌翰 | 2023-05-02
  • 一個《長月燼明》倒了,《狐妖》《長相思》《與鳳行》…在路上了 一個《長月燼明》倒了,《狐妖》《長相思》《 惠惠君 | 2023-05-02
  • 張天愛假期曬“酷”存照 卷發披肩穿黑色吊帶裙大秀好身材 張天愛假期曬“酷”存照 卷發披肩穿黑色吊 嬴覓晴 | 2023-05-02
  • 當年輕人開始不随份子錢 當年輕人開始不随份子錢 袁曼雁 | 2023-05-02
  • 畢滢用8年時間成功逼宮?曾被傳已婚生子的她,不容小觑 畢滢用8年時間成功逼宮?曾被傳已婚生子的她, 幸聽楓 | 2023-05-03
  • 宋慧喬獲視後首次曬照,拿獎杯笑容溫柔 宋慧喬獲視後首次曬照,拿獎杯笑容溫柔 郜萌運 | 2023-05-02

©2022 大酷樂 版權所有

隱私政策 | 服務條款 | 聯繫我們