Arm 发布全新智能视觉参考设计

Arm 智能视觉参考设计”结合 Arm 与安谋科技市场领先的 IP，助力中国客户加速视觉应用设备开发

近日，Arm 宣布推出针对视觉应用设备的Arm智能视觉参考设计。据了解，该应用处于物联网市场增长最快速的领域之一，全新参考设计首次将Arm现有子系统IP与第三方IP整合，助力中国客户加速视觉应用设备开发，并广泛应用于从家庭与办公室安全、智能零售结账系统，到工业自动化等各类场景。

“随着算力的高速提升和模型的演进，原本专属于人类的感知、思考和行动能力逐渐实现了向机器的转移，而每一个能力转移的拐点都将产生新范式。”Arm物联网事业部业务拓展副总裁马健表示，20 世纪末期，一些诸如 google、百度等伟大的公司使信息的生产和获取成本从边际成本转向固定成本，开启了互联网时代的新范式。而现在，OpenAI和大模型使模型产生的成本从边际成本转化为固定成本，将使模型和知识无处不在，迎来以机器人和自动驾驶等技术为代表的“行动无处不在”时代。在马健看来，这些新范式将重新定义人机交互的模式。

马健举例道：“未来的聊天机器人或者伴侣机器人不仅需要高智商，更需要高情商，而机器视觉可以通过捕捉人类的表情、手势和动作，从中理解人类的意图和情感，改善AI与人类的沟通和合作。另外，模型优化也可以借力智能视觉等感知技术，从现实生活中采集真实数据形成更准确的模型，而不仅仅是依赖于文本描述和静态图像。”

据介绍，从应用领域看，智能视觉技术在智慧家居、智慧城市、零售和智能制造等领域的应用日益广泛。从技术发展趋势看，智能视觉系统正在朝以下几方面发展。首先是云、边、端的协同；其次是AI加持，未来的智能视觉系统将继续依赖深度学习模型和神经网络，提高图像的分析和识别能力，并利用强化学习和自主自适应学习，使系统能够从环境中不断学习和改进，并适应新的场景和任务；最后是算力支持。由于复杂的模型和算法，大规模的图像数据处理实时性、高精度、高并发等要求，智能视觉系统需要提供越来越强大的计算资源和算力支持。

“智能视觉系统的广泛应用也引发了对隐私和安全性的关注，未来的趋势是采用加密、匿名化等技术手段保护用户的隐私，同时加强系统的安全性，防止被恶意攻击和滥用。”马健说。

作为智能视觉系统发展的重要底座，智能视觉芯片架构在过去几年中经历了一系列演进。马健表示，从功能固定难以编程的DSP 和 ASK，到通用性强易编程的 CPU 架构，到现在最先进的综合 CPU、ISP 图像处理器、NPU AI 加速器，VPU 视频编解码器、GPU 图形处理器的异构 SoC 片上系统，如今智能视觉芯片已经逐步实现低功耗、高性能和高度集成的特点。

在此大背景下，Arm发布集Arm与安谋科技IP于一体的智能视觉参考设计。据了解，该方案的硬件参考设计包括CPU、ISP、NPU、VPU处理器选项，以及将这些元件粘合在一起的子系统IP。其中，VPU、NPU由安谋科技提供。这也是Arm首次将IP和安谋科技的IP相结合，并由安谋科技预先集成、预先验证。

安谋科技智能物联及汽车业务线负责人赵永超表示：“AI 及 5G 技术的进步，在加速视觉应用技术与各领域深度融合的同时，也进一步促进了国内智能视觉产业生态的繁荣。Arm 智能视觉参考设计通过集成安谋科技‘玲珑’VPU 和‘周易’ NPU，并由安谋科技将 Arm IP 与安谋科技自研 IP 进行集成和验证，可进一步满足国内客户在不同场景下的差异化视频处理需求，提高机器学习与视频处理工作时的负载表现，从而加速视觉应用产品的创新落地。”

发布智能视觉参考设计同时，Arm发起智能视觉合作伙伴计划，联合AI视觉、芯片设计、软件算法和系统集成的行业伙伴，基于Arm架构打造智能视觉应用生态。