今天小編分享的科學經驗:大模型創新中心落户上海!助推AI框架生态共建進入加速道,歡迎閲讀。
大模型時代一來,AI 框架扮演的角色愈加重要。
行業深谙此理,于是人工智能框架生态峰會 2023為此召開。
參會的成員都是產學研界耳熟能詳的名字:上海人工智能研究院、中國科學院自動化研究所、上海白玉蘭開源開放研究院、OpenI 啓智社區、華為、昇思 MindSpore ……
他們齊聚上海的目的只有一個,共建人工智能框架生态,将中國人工智能產業推向一個新階段。
具體的動作有:
聯合啓動上海昇思 AI 框架 & 大模型創新中心,已入駐 20+ 部門
發布 " 共建人工智能框架生态,繁榮中國人工智能產業 " 聯合倡議
成立昇思 MindSpore 開源社區理事會
總之,是要以 AI 框架生态為中心,讓產業 " 朋友圈 " 更牢固。
為什麼以 AI 框架生态為核心?
想要回答這一問題,要從 AI 框架的定位和重要性説起。
一直以來,AI 框架被視為 AI 發展中基建一般的存在。
縱向角度,AI 框架在 AI 全棧體系中處于承上啓下的位置,承擔着 AI 技術生态中作業系統的角色,對于 AI 軟體生态構建非常關鍵。
橫向角度,AI 框架是 AI 學術創新與產業商業化的重要基礎軟體,對人工智能從理論走向實踐、快速進入場景化應用時代,有着非常重要的意義。
對于開發者而言,它能提升開發能效、簡化開發流程,同時還提供豐富的功能和工具,加速 AI 應用創新和推廣。
随着大模型趨勢席卷而來,AI 領網域内的開發創新工作更加如火如荼,那麼 AI 框架作為核心開發工具,就顯得尤為重要。
它的底層能力、功能豐富度、生态完善度,都會影響開發效率,進而影響新技術和應用創新的速度。
在這幾方面中,生态構建又顯得格外重要。因為它将直接影響框架的能力、功能、以及產業化應用等。
而 AI 框架生态的發展,離不開政產學研用各界夥伴的大力支持。
一方面需要高校、科研機構合作,探索人工智能行業前沿方向,豐富算子和模型,培養 AI 人才的同時持續豐富技術生态。
另一方面也需要與商業夥伴合作,将人工智能技術廣泛應用到千行百業,推進全球智能化的發展。
由此也就不難理解,為什麼要召開人工智能框架生态峰會,并且圍繞中國 AI 框架領軍代表昇思 MindSpore,開展一系列生态共建。
如成立昇思 MindSpore 開源社區理事會(下文簡稱昇思社區理事會),目标就是面向產業、商業、生态等各方向吸納對社區有貢獻、有潛力的企業,通過理事會加強核心夥伴粘性,助力夥伴商業生态成功。
啓動上海昇思 AI 框架 & 大模型創新中心,則是抓住大模型趨勢,快速拉起一個產業 " 朋友圈 ",共同推動國内大模型趨勢創新不斷湧現。
當然,行業内會如此重視 AI 框架生态,除了其身位特殊之外,更直接的原因或許還是因為,多年來 AI 框架生态的建設已經為產業發展帶來了切實好處。
昇思 MindSpore 正是代表之一。
昇思 MindSpore 為構建生态做了哪些事?
昇思 MindSpore 是華為在 2020 年開源的全場景 AI 框架。
昇思 MindSpore 在技術層面,基于當下產業的需求和挑戰,提出了自動并行、動靜态圖結合、二階優化、全場景部署、全棧協同加速幾大關鍵特性。
比如自動并行可以降低切分數據、切分模型等技術問題門檻,提升開發能力和效率;全場景協同支持智能匹配端邊雲多樣設備;面向系統軟硬體 co-design 能讓昇思 MindSpore 做到整圖完整解除安裝,達到與通用 GPU 硬體對比的程度……
由此,昇思 MindSpore 即便沒有老牌 AI 框架的先發優勢,但在解決超大規模模型訓練、AI for Science 等產業實際問題上,已經占據領先身位。
具體技術架構上,昇思 MindSpore 共分為四層,分别是:
模型層:提供開箱即用的功能,主要包含預置的模型和開發套件,以及圖神經網絡、深度概率編程、科學計算庫等拓展庫;
表達層(MindExpression):提供模型開發、訓練、推理的 API 接口,支持用原生 Python 語法開發和調試神經網絡,特有的動靜态圖統一能力可以兼顧開發效率和執行性能兩方面需求,同時在生產和部署階段提供全場景統一的 C++/Python 接口;
編譯優化(MindCompiler):這部分是 AI 框架的核心,以全場景統一中間表達(MindIR)為媒介,将前端表達編譯成執行效率更高的底層語言,同時進行全局性能優化,包括自動微分、代數化簡等硬體無關優化,以及圖算融合、算子生成等硬體相關優化;
運行時,按照上層編譯優化的結果對接并調用底層硬體算子,同時通過 " 端 - 邊 - 雲 " 統一的運行時架構,支持包括聯邦學習在内的 " 端 - 邊 - 雲 "AI 協同。
如今,基于昇思 MindSpore 的技術成果也相繼湧現。
比如今天剛剛正式對外發布的紫東 . 太初 2.0。
它由中科院自動化所牽頭,基于 AI 框架昇思 MindSpore 打造。
作為業界領先的全模态大模型,紫東 . 太初 2.0 可實現文本、圖片、語音、視頻、3D 點雲、傳感信号等不同模态的統一表征和學習。其 3.8B 模型已經在昇思 MindSpore 社區開源。
此外還有武漢 .LuoJia、鵬程 . 神農等產學研界成果,都是以昇思 MindSpore 為底座。據悉,共有 400+ 模型、900+ 頂會論文基于昇思 MindSpore 技術生态實現。
由此可以看到,昇思 MindSpore 作為 AI 框架,不僅鏈接南北向生态,同時也已構建出一個貫穿產學研的生态圈。
通過不斷完善、繁榮自身生态圈,昇思 MindSpore 不僅成長為國内最活躍的開源社區之一,還更進一步助推產業技術創新、人才培養、應用落地。
具體可以從技術生态、開源生态和行業生态幾個方面看起。
技術生态方面,除了如上提到的算法模型方面的成績,昇思打造了大模型開源生态。
昇思大模型平台,向全球百萬開發者提供了包括紫東 . 太初、鵬程 . 神農、武漢 .LuoJia 等大模型能力。
該平台集大模型在線推理、算法選型、創意分享、產學研專區為一體,提供免費課程資源、經典樣例代碼、企業落地案例、垂直行業專區和多層級挑戰賽。
開源生态方面,2022 年,中國信息通信研究院發布《AI 框架發展白皮書》,指出昇思 MindSpore 作為國内優質 AI 框架代表,在 Gitee 千萬個開源項目中綜合排名第一,已是國内開源社區最活躍的 AI 框架。
目前共計有 13000+ 名核心開發者在昇思 MindSpore 社區做出貢獻。
昇思在海内外 30 個地區成立本地研究小組 MindSpore Study Group(簡稱 MSG),開展 MSG 企業行、MSG 高校行、MSG 行研會等線上線下活動。
同時,昇思還加入 Hugging Face 社區,賦能全球開發者;每半年舉辦一次 MindCon 極客周,目前已引導 3 萬 + 開發者參與社區貢獻;開展從入門到精通的全場景 AI 實戰線上課程,與 290+ 所高校展開昇思 MindSpore 教學合作,設定初、中、高級别課程,轉型全新開源創新實踐課程。
并且已經形成清晰明确的高效開發者成長路徑圖,轉化核心技術貢獻者。現已走進 290+ 所高校。
最後在行業生态建設上,昇思 MindSpore 目前已服務 5500 家企業,涵蓋數字政府、金融、制造、交通、能源、終端等端邊雲全場景行業。
總之,參考昇思 MindSpore 三年以來的發展可以感受到,在當下發展階段内,一個 AI 框架能帶來的影響早已不局限于提升開發者的效率和能力,通過構建完善的生态圈,AI 框架可以作為中心樞紐将人才、技術、資源、應用場景等緊密聯結,加速行業内整體的開發效率和能力,以此推動產業向前發展。
AI 框架生态該怎麼做?
那麼,昇思 MindSpore 的發展,同樣也為 AI 開源框架生态構建提供一定思考。
簡單總結有這樣 2 點:
產業導向
開源開放
首先是 AI 框架的自身定位上,昇思遵循了產業導向原則。
在 TensorFlow、PyTorch 憑借先發優勢占據市場主導位置的情況下,新興的 AI 框架想要在全球市場中占據一席之地,差異化競争是關鍵。
脱胎于產業界的昇思,自然從產業界入手,在工業化能力上形成差異化,盡可能滿足產業内對開發門檻、運行效率、部署靈活的要求。
同時深入行業洞察趨勢,在一些熱門領網域内形成競争優勢。比如在大模型訓練上,昇思已經支持了業界最多的并行模式。
第二,開源開放。
昇思 MindSpore 開源後,提出 " 立足中國、放眼世界 " 的目标,基于開放、融合、共享的理念,持續推動構建 " 南向多芯和北向應用生态 "。
"南向" 為 AI 芯片算力提供标準化技術生态接口和開發工具,構建自主開源 AI 框架生态和人工智能算力多芯生态;
"北向" 為開發者和算法廠商開展技術聯創,圍繞場景創新重大需求開展聯合突破瓶頸。
以昇思社區理事會為抓手,在大模型、科學智能等前沿技術領網域持續推動創新,構築面向未來的核心競争力,提取共性能力,沉澱框架和數據資產。昇思積極支持與南向芯片廠商的适配,目前已經與 20+ 芯片廠商開展适配工作。
此外,他們也是國内第一個采用開放治理架構的 AI 框架開源社區。
在昇思 MindSpore 社區,有來自全球 18 名技術專家組成的技術委員會,他們通過公開的讨論,公開的會議,把控整個社區的技術發展方向。
在技術委員會的指導之下,設立了特殊興趣小組(Special Interest Group),來負責各個模塊的開發;如果需要跨模塊協作,則成立對應的工作組。
昇思還基于自身生态内的力量,盡可能協同上下遊、聯動產學研力量,快速推動社區規模發展。
結合當下趨勢來看,ChatGPT 引爆大模型趨勢後,未來一段時間内行業内将保持高速發展,誰跑得更快、誰就更有優勢。
而這種競速并不只是單純地拼人才、拼資源,更大程度上還是拼基礎設施和生态。
AI 框架始終被視為 AI 領網域的根技術,是模型的 " 土壤 "。
如何讓這個 " 土壤 " 更加肥沃?開源、開放、共建。
《經濟日報》發文中也強調了算法開源生态的重要性:要搶占人工智能大模型產業發展制高點,必須加強戰略規劃和深度治理,推進新型算力生态基礎設施建設,打造穩定可靠的算法開源生态。
這也是為什麼人工智能框架生态峰會 2023 要在此時此刻召開,核心目的就是為了吸引、呼籲更多人,一同共建中國 AI 框架生态。
而在新一輪技術周期的影響和帶動下,中國 AI 框架生态會怎樣發展,也值得我們期待。
— 完 —
點這裏關注我,記得标星哦~
一鍵三連「分享」、「點贊」和「在看」
科技前沿進展日日相見 ~
>