为了中国智能视觉芯片客户，Arm推出新参考设计

正如Arm 物联网事业部业务拓展副总裁马健所说，作为全球领先的半导体IP供应商，Arm在计算的不同细分领域的表现都不同凡响，就连少被提及的智能摄像头市场，Arm IP也拿下九成以上的市占率。
 
“在视觉成为边缘设备普世能力的未来，中国更是引领视觉技术发展的中坚市场，创新活跃度高涨，竞争激烈。中国客户促使我们以新的方式更好的支持他们的差异化创新。”马健接着说。
 
为此，Arm在中国市场发布 Arm 智能视觉参考设计，为视觉芯片及系统设计奠定坚实可靠的基础，并支持灵活配置，为客户降本增效，使视觉软硬件联合创新成为可能，加速系统开发进程。
 
智能视觉系统新趋势，芯片新需求
 
据马健所说，智能视觉技术在智慧家居、智慧城市、零售和智能制造等领域的应用日益广泛。为此她大胆预测，智能视觉系统将无处不在，而这个技术在实际落地的过程中会拥有几个方面的发展趋势：
 
首先是云、边、端的协同，由于视频数据巨大的数据量以及诸如自动驾驶等应用的实时性要求决定了智能视觉系统需要能够将计算和决策任务分布在云、边和终端设备上，并实现协同工作；
 
其次就是 AI 加持，未来的智能视觉系统将继续依赖深度学习模型和神经网络，提高图像的分析和识别能力，并利用强化学习和自主自适应学习，使系统能够从环境中不断学习和改进，并适应新的场景和任务；
 

• 就是算力支持，由于复杂的模型和算法，大规模的图像数据处理实时性、高精度、高并发等要求，智能视觉系统需要提供越来越强大的计算资源和算力支持；

 
最后，智能视觉系统的广泛应用也引发了对隐私和安全性的关注，未来的趋势是采用加密、匿名化等技术手段保护用户的隐私，同时加强系统的安全性，防止被恶意攻击和滥用；
 
在这些新趋势的推动下，也给芯片带来了新的需求。马健也透露，智能视觉芯片架构在过去几年中经历了一系列的演进。
 
“从功能固定难以编程的 DSP 和 ASK，到通用性强易编程的 CPU 架构，到现在最先进的综合 CPU、ISP 图像处理器、NPU AI 加速器，VPU 视频编解码器、GPU 图形处理器的异构 SoC 片上系统。智能视觉芯片已经逐步实现低功耗、高性能和高度集成的特点。适用于资源受限的边缘设备，比如智能手机、摄像头、XR，机器人和物联网设备等，为智能视觉成为一种普世的能力奠定基础。”马健指出。
 
站在巨人肩膀上，助力企业降本增效
 
她同时表示，中国从制造到零售等行业的自动化程度不断提高的趋势，加上机器学习和物联网的重大技术突破，使中国对视觉设备的需求以及在视觉技术方面的创新都稳步增长。因此Arm一直在思考如何帮助智能物联和视觉界的创新企业降本增效，使他们能够站在巨人的肩膀上，将他们看到的新商机和酝酿的新想法更快、更有信心的转化成为量产的产品。
 
基于这种思考，如文章开头所说，Arm宣布，将携手安谋科技在中国市场发布最新集 Arm 与安谋科技 IP 于一体的智能视觉参考设计。
 
据介绍，Arm希望通过选用 Arm 广泛应用于智能视觉领域的处理器和系统 IP，构建出相对标准化的 IP 组合，并经过预先验证，辅以该子系统的 Arm 虚拟硬件，参考软件栈，形成了设计智能视觉系统的坚实的系统技术平台，使创新者们不需要从零开始，可以专注于产品的差异化，并快速将自己的想法转化为产品并推向市场，显著降低芯片开发的成本和风险，并大幅度缩短研发周期。同时，由于这种参考设计是半成品，Arm也会根据应用的需求集成第三方 IP，给予客户足够的灵活性和选择，以支持差异化创新。
 

 
“该方案的硬件参考设计包括 CPU、ISP、NPU 和 VPU 处理器选项以及将这些元件粘合在一起的子系统 IP，我们首次将 Arm 的 IP 与安谋科技的 IP 合在一起，并由安谋科技预先集成和预先验证。由于中国视觉市场在世界上的领先地位以及创新活跃度，Arm 智能视觉参考设计将服务于中国市场。”马健解释说。
 
Arm表示，Arm 智能视觉参考设计包括：Arm Corstone™-1000：整合 Cortex-A、Cortex-M 处理器与内建安全性，为不同应用在受限的功耗范围内提供效率及高性能；Arm Corstone-300：为机器学习工作负载提供“永远在线”的低功耗子系统；Arm Mali™-C55 图像信号处理器 (ISP)：在极小的芯片面积条件下，提供可配置、高能效、高性能的图像质量。
 
此外，来自安谋科技的第三方 IP 在视频和机器学习能力方面提供更多选项：“玲珑”V5 视频处理器：支持紧凑的、多格式 (例如H.264, H.265) 且高效能的视频编解码处理；“周易” NPU：为广泛的机器学习用例提供高达 4TOPS 的性能表现，并且支持业界主流的 AI 规模框架，例如 Tensorflow、Caffe、ONNX、Pytorch 等。
 
除了上述功能卓越的硬件外，Arm生态伙伴可借由 Arm 虚拟硬件 (Arm Virtual Hardware, AVH) 的形式获取 Arm 智能视觉参考设计的虚拟模型，助力软件开发者在芯片完备前先着手开发并优化代码。该参考设计具备可信任的底层 IP 技术，在增强安全、可移植性与兼容性方面，已取得 Arm SystemReady™ IR 与 PSA Certified Level 2 等重要的业界标准认证。
 
马健表示：“随着 AI 和大模型一日千里的发展，Arm坚信智能视觉技术将继续在所有垂直行业得到更广泛的应用，视觉将无处不在。在视觉成为一种普世能力的趋势下，预先集成、预先验证的标准化子系统会为加速视觉产品设计和创新提供坚实的基础，这也是 Arm 和安谋科技携手为中国市场打造智能视觉参考设计的初衷”，“希望有兴趣的客户评估使用该设计，并在它的基础上更快的设计出更多创新的视觉系统。实现这个愿景需要整个生态系统的协同合作，Arm 欢迎更多的伙伴加入我们，共同创建智能视觉的未来。”马健说。