Ambarella 使用新型相机 SoC 实现智能边缘感应

计算机视觉芯片公司 Ambarella 宣布在其相机片上系统 (SoC) 系列中推出一款新处理器，目标是更广泛的智能设备应用，需要在边缘进行灵活的人工智能传感和处理。

其新型 CV28M 相机 SoC 是其 CVflow 系列中的最新产品，在单个低功耗设计中结合了高级图像处理、高分辨率视频编码和计算机视觉处理。新型摄像头 SoC 的两个与智能边缘感应和低带宽特别相关的特性是其基于 AI 的速率控制，可优化图像质量，同时降低视频存储和网络带宽要求——尤其适用于 IP 安全摄像头；以及它的 AI Timelapse，它使用场景分析只记录它认为有用的时刻，避免扫描视频时间线以检索感兴趣的时刻所需的时间。

Ambarella 营销总监 Jerome Gigot 表示：“基于 AI 的比特率控制是使用 Ambarella CVFlow AI 引擎在编码前分析每一帧以找到每一帧中最重要的区域（例如人脸或汽车）的能力例如）并且能够以比不包含任何重要信息（例如背景或其他不重要的对象）的其他区域更高的质量对视频的特定区域进行编码。”

此外，Ambarella 营销和业务开发副总裁 Chris Day 向 Embedded.com 解释说，新设备使用与其 CV25 相同的 AI 引擎和功能，但正在解决新的成本敏感市场，并支持新类别的智能边缘设备，适用于智能家居安全、零售监控、消费机器人和占用监控等应用。

“在我们周围，设备变得越来越智能，借助我们最新的 CV28M SoC，我们的客户可以为各种新应用开发新一代智能传感相机。在对隐私敏感的应用中——例如监控零售店、工作场所、出租物业或家里的老人——基于边缘的 AI 处理可以支持智能监控和快速决策，而无需将视频录制或流式传输到云端。”

他说，新相机 SoC 的主要区别在于它使用双核 Arm Cortex-A53，而不是四核设备。这导致边缘感应 AI 的效率更高，成本降低高达 30%。他补充说，对于许多更面向消费者的嵌入式视觉应用，他们不需要 CV25 的完整 AI 功能，因此新的 CV28M 提供了更有针对性的方法。

对于零售监控或占用监控等 AI 传感应用，CV28M 提供 AI 性能以在摄像头中做出所有决策，保护隐私并避免在后端服务器上运行繁重的视频处理。在消费机器人应用中，CV28M 可以连接到各种传感器，例如可见光、结构光和飞行时间 (ToF)，以捕获并处理导航所需的数据。

CV28M 以 AVC 和 HEVC 格式提供高效的视频编码。高性能图像信号处理器 (ISP) 在低光照条件下提供出色的成像，高动态范围 (HDR) 处理可在高对比度场景中提取最大的图像细节。相机 SoC 包括一整套先进的网络安全功能，以防止黑客入侵，包括安全启动、TrustZone 和 I/O 虚拟化。 CV28M 芯片采用 10 纳米超低功耗工艺技术制造，针对需要长电池寿命和小尺寸的无线相机应用进行了优化。

CV28M 芯片与 Ambarella 的 CV25、CV22 和 CV2 CVflow SoC 系列共享通用 SDK 和计算机视觉 (CV) 工具，从而简化了具有多种价格和性能选择的相机的开发。一套完整的 CV 工具可帮助客户将他们自己的神经网络移植到 CV28M 上，其中包括编译器、调试器和对 Caffe 和 TensorFlow 等行业标准机器学习框架的支持，以及卷积神经网络 (CNN) 性能优化的广泛指南。