Arm 今日宣布推出针对视觉应用设备的 Arm? 智能视觉参考设计,该应用处于物联网市场增长最快速的领域之一。全新参考设计首次将 Arm 现有子系统 IP 与第三方 IP整合,助力中国客户加速视觉应用设备开发,并广泛应用于从家庭与办公室安全、智能零售结账系统,到工业自动化等各类场景。
Arm 物联网事业部业务拓展副总裁马健表示:“作为物联网基石的 Arm,其技术正驱动着当今市场上众多智能视觉设备的发展。这个行业正处在关键节点,视觉应用越来越普及,围绕这些应用,中国市场拥有一个多样化且充满活力的生态系统。全新 Arm 智能视觉参考设计将赋能中国合作伙伴把握市场机遇,加速基于 Arm 架构的视觉应用设备的开发进程。”
多年来,Arm 全球合作伙伴已将 Arm 技术成功部署在其视觉应用解决方案中,包括晶晨半导体、安凯微电子、星宸科技等中国合作伙伴。
随着视觉应用设备需求的持续增长,客户希望能够将自己的 IP 集成到这些解决方案中,从而获得更多灵活性,以实现产品差异化并集成更广泛的功能。Arm 智能视觉参考设计结合 Arm 与安谋科技市场领先的 IP,提高设备本身处理能力,增强机器学习能力,同时加速开发进程。
安谋科技智能物联及汽车业务线负责人赵永超表示:“AI 及 5G 技术的进步,在加速视觉应用技术与各领域深度融合的同时,也进一步促进了国内智能视觉产业生态的繁荣。Arm 智能视觉参考设计通过集成安谋科技‘玲珑’VPU 和‘周易’ NPU,并由安谋科技将 Arm IP 与安谋科技自研 IP 进行集成和验证,可进一步满足国内客户在不同场景下的差异化视频处理需求,提高机器学习与视频处理工作时的负载表现,从而加速视觉应用产品的创新落地。”
“Arm 智能视觉参考设计”结合 Arm 与安谋科技市场领先的 IP,助力中国客户加速视觉应用设备开发
Arm 智能视觉参考设计包括:
Arm Corstone?-1000:整合 Cortex-A、Cortex-M 处理器与内建安全性,为不同应用在受限的功耗范围内提供效率及高性能。
Arm Corstone-300:为机器学习工作负载提供“永远在线”的低功耗子系统。
Arm Mali?-C55 图像信号处理器 (ISP):在极小的芯片面积条件下,提供可配置、高能效、高性能的图像质量。
来自安谋科技的第三方 IP 在视频和机器学习能力方面提供更多选项:
o “玲珑”V5 视频处理器:支持紧凑的、多格式 (例如H.264, H.265) 且高效能的视频编解码处理。
o “周易” NPU:为广泛的机器学习用例提供高达 4TOPS 的性能表现,并且支持业界主流的 AI 规模框架,例如 Tensorflow、Caffe、ONNX、Pytorch 等。
此外,生态伙伴可借由 Arm 虚拟硬件 (Arm Virtual Hardware, AVH) 的形式获取 Arm 智能视觉参考设计的虚拟模型,助力软件开发者在芯片完备前先着手开发并优化代码。该参考设计具备可信任的底层 IP 技术,在增强安全、可移植性与兼容性方面,已取得 Arm SystemReady? IR 与 PSA Certified Level 2 等重要的业界标准认证。
Arm 同时宣布了“Arm 智能视觉合作伙伴计划”,该计划汇集软件、硬件、系统集成商伙伴,帮助设计者与开发者加速将其生产就绪的视觉应用设备推向中国市场。加入该计划的合作伙伴将与视觉应用生态厂商紧密合作,共同优化产品与开发者体验,加速推向市场。目前已有十多家来自智能物联网的芯片设计、系统集成、AI 算法、开发平台等国内领先企业均已加入该项计划。
“Arm 智能视觉合作伙伴计划”已获十多家生态伙伴加入支持,协力加速中国智能视觉的创新应用
生态伙伴证言:
安凯微电子
“安凯微在物联网智能硬件核心 SoC 芯片领域深耕多年,也是 Arm 长期的合作伙伴。我们通过 Arm CPU 与自研技术的结合,设计出包括物联网摄像机芯片和物联网应用处理器芯片在内的主线产品,并已广泛应用于智能家居、智慧安防、智慧办公和工业物联网等领域,成功地为市场上的低功耗的视觉应用奠定基石。”
安凯微电子市场总监 葛保建
诚迈科技
“诚迈科技在成为 Arm 首家在华图像信号处理器的认证调式夥伴后,很高兴也成为首批加入 Arm 智能视觉伙伴项目的成员,在 Arm 坚实的视觉生态系统上扩展我们的合作关系。通过 Arm 先进的处理器与 Arm 智能视觉参考设计,结合我们在软件方面的专业积累与机器视觉的全套解决方案,我们将能加速智能视觉在各领域的落地应用,为客户带来更高效率、性能与创新优势。”
诚迈科技计算机视觉事业部副总裁 韩薇
爱芯元智
“爱芯元智致力于打造世界领先的 AI 视觉芯片。作为人工智能视觉感知芯片研发及基础算力平台公司,爱芯已成功研发并量产了三代多颗端侧、边缘侧 AI 视觉感知芯片,均采用了 Arm Cortex-A 内核。凭借自研核心技术——爱芯智眸? AI-ISP 和混合精度 NPU,爱芯元智相关产品和解决方案已广泛应用于智慧城市、智能交通、AIoT 等领域。而随着 AI 推动产业的不断发展,我们将继续携手 Arm 探索更智能的解决方案,并通过 Arm 生态系统丰富的资源,扩展更多应用范例,让我们毫无后顾之忧,持续积极创新,用普惠 AI 造就美好生活!”
爱芯元智创始人、董事长兼首席执行官 仇肖莘
百度飞桨
“我们很高兴能与 Arm 通过‘Arm 智能视觉合作伙伴计划’进一步深化双方的合作关系。飞桨 (PaddlePaddle) 以百度多年的深度学习技术研究和业务应用为基础,集深度学习核心训练和推理框架、基础模型库、端到端开发套件、丰富的工具组件、人工智能学习与实训社区于一体,是中国首个自主研发、功能丰富、开源开放的产业级深度学习平台。截至 2022 年末,飞桨已凝聚 535 万开发者,基于飞桨创建 67 万个模型,服务 20 万家企事业单位。在硬件支持方面,我们的模型库横跨了诸多 Arm Cortex-A、Cortex-M、服务器 CPU 等计算平台,能为 Arm 的生态伙伴实现视觉算法的加速运行,助力智能视觉的落地。”
百度飞桨产品团队负责人 赵乔
昱感微电子
“昱感微电子是一家专注于智能感知 (包含机器视觉) 的芯片解决方案新创公司,为了展现我们的竞争力,我们需要聚焦资源在产品的差异化上,并快速推动产品上市进程。Arm 智能视觉参考设计可以很好地奠定我们底层技术的根基,为我们大幅减低花费在基层技术架构的心力,从而将更多时间与资源专攻在我们的技术优势,创造创新与差异,从而掌握市场机遇。”
昱感微电子CEO 蒋宏