今天小编分享的科学经验:越影视觉,让AI看见这世界的繁花,欢迎阅读。
2024 年,AI 大模型的热度持续增高,全世界都在期待大模型会给我们带来哪些变化。要让前沿的 AI 技术落地,要让遥远的智能化浪潮走进日常生活,还需要一些切实可行的产业通道,否则 AI 终究是一粒遥远的种子,难以在千行百业中开出繁花。
在 AWE 2024,我们可以看到各个领網域的厂商都在展示 AI 技术,推出 AI 产品,但其中有一件作品,或许值得我们更多关注。那就是来自海思的——越影视觉解决方案。
3 月 14 日,2024 年中国家电及消费电子博览会(AWE2024)在上海拉开帷幕。海思以 " 以创新 领新境 " 为主题,向业界展示了 "5+2" 智能终端解决方案。其中就包括 " 越影视觉 "。
AI 行业有一个判断,叫做爆火的总是自然语言处理,真正发挥作用的却是机器视觉。同时还有大量数据表明,绝大多数 AI 推理任务应该在端侧完成,才能发挥 AI 技术的最大效率。
而全新更新的越影,就是在视觉芯片中集成了最新的 AI 大模型技术,将端侧、CV、大模型等关键词融合为一。
这样的越影视觉,将给视觉芯片产业带来哪些改变?AI 大模型,如何在无人机、摄像头、运动相机的沃土中开出繁花?
我们可以一起走进 AWE 2024,看看第一次来到这个舞台的海思,为我们带来的视觉盛宴。
千行百业智能化
离不开机器看清,看懂
随着 AI 技术的广泛发展,具有主动识别能力的机器视觉摄像头,已经成为无人机、摄像头等领網域的标配。
但随着产业发展与技术进步,我们却会发现相关领網域的视觉能力依旧具有不小的挑战。总体来说,无人机、摄像头等领網域的视觉 +AI 挑战,可以归纳为三点:
1. 通过云端算力来实现机器视觉任务,带来了高成本,高延迟,稳定性差的问题。
2. 传统视觉芯片搭载的 CNN 算法架构泛化性和通用性较差,带来了个性化 AI 需求难以满足,AI 开发成本过高等问题。具有更强泛化性的 Transformer 大模型架构还难以在视觉场景落地。
3. 视觉芯片的联接能力、安全能力等综合能力不理想,导致多设备组成的场景化方案难以实现。
这些难题,给安防、机器视觉、影像产品等领網域带来了诸多痛点。总体来看,实现将 AI 大模型固化在硬體端,形成围绕智能需求的场景化视觉解决方案,已经迫在眉睫。
而就在此时,越影视觉完成了具有行业引领意义的更新。
当越影
开出 AI 的繁花
新一代越影视觉解决方案具有诸多智能能力上的进化点。其中最引人注目的,就是其在硬體侧固化了 Transformer 大模型算子,为 Transformer 在端侧芯片运行提供了硬體加速,从而实现了大模型与端侧视觉能力的跨时代结合。
根据相关数据统计,如果基于传统的机器视觉算法,一个相对垂直的应用场景,用户往往需要采集 100 万以上数量的数据,才能实现 98% 的准确率与 98% 的召回率。而基于开放網域大模型,则可以通过每个需求十张图片左右的数据量进行微调,即实现了 90% 的准确率和 95% 的召回率,算法开发的工作量降低了 90% 以上。由此可以看出,越影视觉将大模型与端侧机器视觉结合,能够极大降低视觉类 AI 算法的综合成本开销,带来了更敏锐的即时反馈,从而全面提升视觉芯片的智能化水平。
端侧大模型,是越影视觉全新更新四大创新点中的一项。总体来看,四大创新点包括:
1. 专业影像。越影视觉实现更强的 AI 算力赋能,打造了全面更新的 AI ISP 能力,从而让设备获得更好的黑光全彩效果。
2. 极致智能。端侧 AI 大模型的加入,极大降低了 AI 开发成本,提升了机器视觉算法的应用边界。
3. 星闪互联。面向未来更广阔的短距物联需求,越影视觉解决方案集成了具有更快更稳联接,以及 AI 抗干扰能力的星闪技术。伴随着星闪的全面崛起,越影视觉也将通过星闪与其他海思提供的芯片解决方案同频协作,带来更多智能化价值。
4. 全栈安全。在安全能力上,越影视觉解决方案还将 AI 技术带到了安全能力当中,实现了安全隐私能力的更新。
综合来看,AI 技术全面促成了越影视觉的产业差异化,同时通过综合性、多层次的技术创新,越影视觉在 AI 算法应用、影像质量提升,以及安全隐私方面都实现了行业领先。各个方向、领網域的技术如同繁花,开在越影身上,也开在了视觉能力智能化更新的路途中。
让视觉
结出场景的硕果
AI 技术,构成了越影的核心差异化优势。这种优势与多个领網域的结合,最终形成了适配场景化应用的整体视觉解决方案。
目前阶段,以安防为代表的多个产业,对视觉芯片的整体更新需求来自三个方面,即智能能力、物联能力与安全能力。
而越影的综合能力差异化也来自三个方面:
在智能领網域,越影实现了芯片级的端侧 AI 技术,完成了端侧大模型的固化,让万物识别,万物检测成为可能。
在物联领網域,越影带来了鸿蒙原生。从而基于鸿蒙特性,极大降低了产品的物联化开发成本,并且通过支持星闪联接,带来了更强大的全场景短程通信能力。
在安全方面,越影具有全新一代安全编码 SVAC3.0,打造了从芯片到编码、系统、联接的全栈安全方案。
三大能力的交相呼应下,越影可以让智能能力契合开发需求,契合场景化应用,从而真正推动各个领網域视觉与智能的双向进化。
海思 COO 支浩认为:" 视觉领網域是 AI 最先爆发的地方。海思将端侧 AI 能力集成进去,将在视觉领網域创新不止,持续引领。越影视觉基于 SOC,在原有的 CIS、星闪连接,多维感知的基础上,还把鸿蒙、AI、黑光、全彩真正结合起来,形成了一整套的解决方案。"
这些能力的结合,让越影视觉开花结果,为机器视觉所看到的美好世界做足了准备。
让机器
看懂这世界的美好
早在 2018 年,海思就发布了全球首颗高清 8K AI 智能 IPC 芯片,从而在交通、安平等领網域带来了一场智能化变革。今天,我们的生活已经深刻从中受惠,而全新更新的越影视觉,带着更强大的端侧 AI 大模型,以及出众的综合视觉能力,将会在这个智能时代的前夜,给多大领網域带来更深刻的变革。
在智慧管理领網域,越影视觉的 AI ISP 能力可以实现黑夜影像像白天一样清晰,实现昼夜如一的守护。
在对影像视觉化有较强需求的领網域,比如无人机、机器人等。越影视觉可以实现更具泛化性、通用性的识别需求,让小众的检测目标,识别任务,也能以轻松、准确、低成本的方式在端侧实现。
在直播领網域,越影可以让运动相机等直播设备全面更新,实现如同单反的直播效果,从而给用户带来更好的视觉体验。同时,越影视觉能够实现更加快速准确的对焦,为刹那芳华的直播做好智能化准备。
以视觉 SOC 为核心打造的越影视觉解决方案,可以让更多设备、更多产品看清看懂这个世界。
而机器眼中看到的繁花,也将反过来装点我们的生活。智能世界的美好,源自每一次机器的看见,每一次 AI 的看懂。