随着视频摄像头的部署位置越来越多样化(机场、生产车间、街道交叉口等等),对所捕获视频数据进行现场分析并操作的需求也日益增加。边缘人工智能 (AI)(在用于视频监控领域时即计算机视觉)可帮助处理各种用例。例如使用热图分析防止新冠病毒在人流较高的区域传播,或分析商业设施中的客流量。这些只是大量计算机视觉应用中的两个真实案例。
计算机视觉使系统能够分析数字图像的重要信息,为更出色的系统智能铺平道路。计算机视觉支持对象分类、手势解读,面部识别、障碍物识别等功能。上述用例之所以能够实现,是因为在数据生成时就进行了现场捕获和分析。在边缘捕获的数据需要即时处理,可能无法容许在摄像机外部传输和处理数据时遇到延迟。在摄像机所在位置执行 AI 处理可以带来更快速、更有效的洞察,但驱动此功能需要使用更强大、更高效的计算和内存系统,例如美光和 Ambarella 联手打造的系统。
Ambarella 专注于边缘 AI 感知
Ambarella 长期专注于计算机视觉处理解决方案,其片上系统 (SoC) 产品组合集成了高级图像处理和高分辨率高效视频压缩功能。最近,其产品范围已扩展到各种域控制器 SoC,其单芯片边缘 AI 处理可用于多传感器感知和深度融合,以及自动驾驶汽车路径规划和一系列其他中央处理功能。
Ambarella 的 CVflow® 基于该公司长期的环境感知研究,可实现具有高度机载智能的摄像机设计,并为其他传感器模态提供广泛的附加功能。例如,在高清雷达领域,Ambarella 最近收购了 Oculii,后者提供自适应 AI 雷达算法,可将传统雷达的分辨率提高多达 100 倍。与通用 CPU 和 GPU 不同,Ambarella 的 CVflow SoC 架构中包含通过高级算法描述编程的专用 AI 处理引擎。据 Ambarella 估计,此方式使该架构能够将性能提升到每秒数万亿次运算,且功耗非常低。
CVflow 架构可驱动安全设备中的摄像机 AI 图像识别等应用,这些应用对高速 LPDDR5 内存有着迫切需求。去年推出的 CV5 边缘 AI 感知 SoC 系列是 Ambarella 产品组合中的首款 5nm 新品。它也是 Ambarella 首款包含 LPDDR5/LPDDR5X DRAM 接口的 SoC 系列,这种接口传输和接收数据的速度可达 44.8 GB/s。Ambarella 将这种内存接口集成到 CV5 SoC 开发平台中,使安全领域、汽车和消费产品的设计人员能够可靠、快速、高效地为传感器处理和融合、视频流和 AI 数据分析任务提供数据。
Ambarella 首席运营官 Chan Lee 表示:“CV5 SoC 是首款采用 LPDDR5/LPDDR5X 接口的 Ambarella 芯片。我们在开发过程早期就与美光合作,在我们的 CV5 测试芯片上验证了他们的 LPDDR5 和 LPDDR5X 内存。这种合作帮助我们实现了边缘视频和 AI 处理技术的突破,同时保持了低功耗。”
美光 LPDDR5 内存可满足计算机视觉的高性能需求
Ambarella 在其 CV5 开发平台上使用了美光 LPDDR5/LPDDR5X 和其他美光内存解决方案,以帮助提高安全领域、汽车和消费应用中摄像机、雷达和其他传感器的处理性能。美光 LPDDR5/LPDDR5X DRAM 可满足这些应用对下一代内存的要求。与 LPDDR4X 相比,其数据访问速度至少提高 50%,功耗降低 20% 以上。
美光的 LPDDR5/LPDDR5X 采用美光前沿的 1α 技术节点,可满足 Ambarella CV5 SoC 系列边缘 AI 功能所需的速度和容量。这款 DRAM 在 64 位系统中可实现高达 68 GB/s 的内存带宽。
除了 LPDDR5/LPDDR5X,美光还通过其他内存解决方案为 Ambarella CV5 SoC 系列提供支持,包括 e.MMC 5.1、i300 microSD 卡、串行 NAND 和 XccelaTM 闪存产品。
在计算机视觉和其他边缘 AI 感知之类的创新应用中,内存发挥着举足轻重的作用。某些应用需要借助高效的低功耗内存来提高数据处理能力,而 Ambarella 和 美光正在致力于为此提供关键的解决方案。我们期待看到美光产品在全球各地帮助释放更多潜能。