今天小編分享的科學經驗:越影視覺,讓AI看見這世界的繁花,歡迎閲讀。
2024 年,AI 大模型的熱度持續增高,全世界都在期待大模型會給我們帶來哪些變化。要讓前沿的 AI 技術落地,要讓遙遠的智能化浪潮走進日常生活,還需要一些切實可行的產業通道,否則 AI 終究是一粒遙遠的種子,難以在千行百業中開出繁花。
在 AWE 2024,我們可以看到各個領網域的廠商都在展示 AI 技術,推出 AI 產品,但其中有一件作品,或許值得我們更多關注。那就是來自海思的——越影視覺解決方案。
3 月 14 日,2024 年中國家電及消費電子博覽會(AWE2024)在上海拉開帷幕。海思以 " 以創新 領新境 " 為主題,向業界展示了 "5+2" 智能終端解決方案。其中就包括 " 越影視覺 "。
AI 行業有一個判斷,叫做爆火的總是自然語言處理,真正發揮作用的卻是機器視覺。同時還有大量數據表明,絕大多數 AI 推理任務應該在端側完成,才能發揮 AI 技術的最大效率。
而全新更新的越影,就是在視覺芯片中集成了最新的 AI 大模型技術,将端側、CV、大模型等關鍵詞融合為一。
這樣的越影視覺,将給視覺芯片產業帶來哪些改變?AI 大模型,如何在無人機、攝像頭、運動相機的沃土中開出繁花?
我們可以一起走進 AWE 2024,看看第一次來到這個舞台的海思,為我們帶來的視覺盛宴。
千行百業智能化
離不開機器看清,看懂
随着 AI 技術的廣泛發展,具有主動識别能力的機器視覺攝像頭,已經成為無人機、攝像頭等領網域的标配。
但随着產業發展與技術進步,我們卻會發現相關領網域的視覺能力依舊具有不小的挑戰。總體來説,無人機、攝像頭等領網域的視覺 +AI 挑戰,可以歸納為三點:
1. 通過雲端算力來實現機器視覺任務,帶來了高成本,高延遲,穩定性差的問題。
2. 傳統視覺芯片搭載的 CNN 算法架構泛化性和通用性較差,帶來了個性化 AI 需求難以滿足,AI 開發成本過高等問題。具有更強泛化性的 Transformer 大模型架構還難以在視覺場景落地。
3. 視覺芯片的聯接能力、安全能力等綜合能力不理想,導致多設備組成的場景化方案難以實現。
這些難題,給安防、機器視覺、影像產品等領網域帶來了諸多痛點。總體來看,實現将 AI 大模型固化在硬體端,形成圍繞智能需求的場景化視覺解決方案,已經迫在眉睫。
而就在此時,越影視覺完成了具有行業引領意義的更新。
當越影
開出 AI 的繁花
新一代越影視覺解決方案具有諸多智能能力上的進化點。其中最引人注目的,就是其在硬體側固化了 Transformer 大模型算子,為 Transformer 在端側芯片運行提供了硬體加速,從而實現了大模型與端側視覺能力的跨時代結合。
根據相關數據統計,如果基于傳統的機器視覺算法,一個相對垂直的應用場景,用户往往需要采集 100 萬以上數量的數據,才能實現 98% 的準确率與 98% 的召回率。而基于開放網域大模型,則可以通過每個需求十張圖片左右的數據量進行微調,即實現了 90% 的準确率和 95% 的召回率,算法開發的工作量降低了 90% 以上。由此可以看出,越影視覺将大模型與端側機器視覺結合,能夠極大降低視覺類 AI 算法的綜合成本開銷,帶來了更敏鋭的即時反饋,從而全面提升視覺芯片的智能化水平。
端側大模型,是越影視覺全新更新四大創新點中的一項。總體來看,四大創新點包括:
1. 專業影像。越影視覺實現更強的 AI 算力賦能,打造了全面更新的 AI ISP 能力,從而讓設備獲得更好的黑光全彩效果。
2. 極致智能。端側 AI 大模型的加入,極大降低了 AI 開發成本,提升了機器視覺算法的應用邊界。
3. 星閃互聯。面向未來更廣闊的短距物聯需求,越影視覺解決方案集成了具有更快更穩聯接,以及 AI 抗幹擾能力的星閃技術。伴随着星閃的全面崛起,越影視覺也将通過星閃與其他海思提供的芯片解決方案同頻協作,帶來更多智能化價值。
4. 全棧安全。在安全能力上,越影視覺解決方案還将 AI 技術帶到了安全能力當中,實現了安全隐私能力的更新。
綜合來看,AI 技術全面促成了越影視覺的產業差異化,同時通過綜合性、多層次的技術創新,越影視覺在 AI 算法應用、影像質量提升,以及安全隐私方面都實現了行業領先。各個方向、領網域的技術如同繁花,開在越影身上,也開在了視覺能力智能化更新的路途中。
讓視覺
結出場景的碩果
AI 技術,構成了越影的核心差異化優勢。這種優勢與多個領網域的結合,最終形成了适配場景化應用的整體視覺解決方案。
目前階段,以安防為代表的多個產業,對視覺芯片的整體更新需求來自三個方面,即智能能力、物聯能力與安全能力。
而越影的綜合能力差異化也來自三個方面:
在智能領網域,越影實現了芯片級的端側 AI 技術,完成了端側大模型的固化,讓萬物識别,萬物檢測成為可能。
在物聯領網域,越影帶來了鴻蒙原生。從而基于鴻蒙特性,極大降低了產品的物聯化開發成本,并且通過支持星閃聯接,帶來了更強大的全場景短程通信能力。
在安全方面,越影具有全新一代安全編碼 SVAC3.0,打造了從芯片到編碼、系統、聯接的全棧安全方案。
三大能力的交相呼應下,越影可以讓智能能力契合開發需求,契合場景化應用,從而真正推動各個領網域視覺與智能的雙向進化。
海思 COO 支浩認為:" 視覺領網域是 AI 最先爆發的地方。海思将端側 AI 能力集成進去,将在視覺領網域創新不止,持續引領。越影視覺基于 SOC,在原有的 CIS、星閃連接,多維感知的基礎上,還把鴻蒙、AI、黑光、全彩真正結合起來,形成了一整套的解決方案。"
這些能力的結合,讓越影視覺開花結果,為機器視覺所看到的美好世界做足了準備。
讓機器
看懂這世界的美好
早在 2018 年,海思就發布了全球首顆高清 8K AI 智能 IPC 芯片,從而在交通、安平等領網域帶來了一場智能化變革。今天,我們的生活已經深刻從中受惠,而全新更新的越影視覺,帶着更強大的端側 AI 大模型,以及出眾的綜合視覺能力,将會在這個智能時代的前夜,給多大領網域帶來更深刻的變革。
在智慧管理領網域,越影視覺的 AI ISP 能力可以實現黑夜影像像白天一樣清晰,實現晝夜如一的守護。
在對影像視覺化有較強需求的領網域,比如無人機、機器人等。越影視覺可以實現更具泛化性、通用性的識别需求,讓小眾的檢測目标,識别任務,也能以輕松、準确、低成本的方式在端側實現。
在直播領網域,越影可以讓運動相機等直播設備全面更新,實現如同單反的直播效果,從而給用户帶來更好的視覺體驗。同時,越影視覺能夠實現更加快速準确的對焦,為刹那芳華的直播做好智能化準備。
以視覺 SOC 為核心打造的越影視覺解決方案,可以讓更多設備、更多產品看清看懂這個世界。
而機器眼中看到的繁花,也将反過來裝點我們的生活。智能世界的美好,源自每一次機器的看見,每一次 AI 的看懂。