双摄像头系统通过单个 AI SoC 监控驾驶员和道路
KeepTruckin 的新行车记录仪，基于 Ambarella 的 CV22 系统在芯片上，使用人工智能来监控卡车和其他商用车辆的司机。
驾驶员监控系统已成为汽车安全对话的重要组成部分。虽然对驾驶员监控的大部分讨论都围绕其在乘用车中的个人用途，但商用车领域有一个巨大的市场，用于监控卡车中的驾驶员以确保安全并尝试预防事故，以及使车队经理能够评估风险并降低保险成本。
为这个市场服务，车队管理技术公司 KeepTruckin 本周表示，它与边缘人工智能 (AI) 芯片视觉系统 (SoC) 公司 Ambarella 合作，为大型商用车开发新的售后行车记录仪。新的行车记录仪使用单个 Ambarella CV22 SoC 同时为其双摄像头系统提供 AI 和图像处理，该系统集成了一个用于前置高级驾驶辅助系统 (ADAS) 的摄像头和事件记录功能，以及第二个 RGB-IR 摄像头用于驾驶员监控系统 (DMS)，带驾驶员记录。
CV22 的每瓦性能规格还使小型 AI 行车记录仪能够运行 KeepTruckin 专有的 AI 算法，以在设备上以最小的散热直接进行实时高风险行为检测和主动警告。
EE Times 与 KeepTruckin 和 Ambarella 的高管进行了交谈，以了解有关产品开发的更多信息。 KeepTruckin 产品高级副总裁 Jai Ranganathan 表示：“驾驶员安全变得比以往任何时候都更加重要，尤其是在针对商业运营商的诉讼越来越多的情况下。因此，行车记录仪的概念变得非常流行。我们与 Ambarella 合作开发了我们的下一代行车记录仪。在查看他们的芯片时，我们的一个关键指标是每瓦推论；相对于成本的性能也很重要。我们需要使用单个镜头进行深度检测，这可能很困难。”
他说，从开始到今天推出行车记录仪，整个过程大约花了 18 个月。 “对我们来说[加快上市时间] 的最大因素是拥有一个可以帮助完成整个开发过程的合作伙伴。否则不可能如此迅速地进入市场。”
KeepTruckin 的产品总监 Abhishek Gupta 补充说：“开发人员的支持非常有益，特别是因为我们在许多人远程工作的大流行期间构建了它。”
Ranganathan 表示，KeepTruckin 的 AI 行车记录仪利用 Ambarella 的边缘 AI 和视觉处理性能来提供基于 AI 的高级功能，可以高精度和高效地检测高风险行为。 “我们持续的车队管理创新得益于 Ambarella 可扩展的 CVflow AI 视觉 SoC 范围，这些系统均由通用、强大的 SDK 提供支持，为我们的产品开发提供平台方法。”
从分析师的角度来看，汽车业务副总裁兼 Strategy Analytics 总监 Ian Riches 评论道：“KeepTruckin 为其新的 AI Dashcam 选择了 Ambarella SoC，为其构建提供了一个强大、经济高效且高效的平台。 Ambarella 的生态系统为其提供了开发量身定制的人工智能解决方案所需的工具，这将有利于其车队客户。”
CV22 启用的前部 ADAS 功能包括警告近距离跟随、车道偏离、前方碰撞、超速和交通违规。使用相同的 SoC，同时运行多个神经网络模型，车内摄像头的 DMS 功能包括监控驾驶员疲劳、分心和违规行为，例如上下文手机使用或安全带监控，以及来自前置摄像头的数据。
AI Dashcam 连接到 KeepTruckin Vehicle Gateway，后者将预先分析的数据、视频和静止图像实时上传到 KeepTruckin 基于云的车队管理软件。 CV22 SoC 集成了 Ambarella 的图像信号处理器，可在所有光照条件下提供高质量、1440p 分辨率的 HDR 视频，同时利用其片上 H.264/H.265 编码来降低传输带宽和存储成本。
随着时间的推移，KeepTruckin 可以通过无线软件更新将附加功能上传到 CV22，从而为投资于该平台的客户提供增量价值。此外，KeepTruckin 的模型训练变得越来越精确，因为其内部安全团队会实时评估质量、添加额外的风险背景并提供输入，从而缩短模型训练和开发周期。
Ambarella 营销总监 Udit Budhia 表示：“对于售后市场，这可能是最先进的汽车人工智能视觉产品。我们已经看到 ADAS 警告系统的快速增长，例如车道偏离警告。”谈到 CV22 SoC 在此应用中的优势时，他补充说：“一个关键组件是图像信号处理器 (ISP)。我们支持各种传感器类型，包括 RGGB、RGB-IR、单色、RCCB 和 RCCC，并支持 HDR 处理。我们可以检测场景中的物体，也可以进行低光过滤，从而减少噪音，从而更有效地处理视频。我们使用更少的带宽和显着减少的 DRAM。”
关于工具，Budhia 说：“我们的工具允许同时开发前置摄像头和驾驶员监控摄像头。” Ambarella 的 CVflow AI 架构的可编程性和效率以极低的功耗实现了显着的计算机视觉性能，从而提高了并行运行更多模型的可靠性和效率，从而实现了更好的检测和可见性。其完整的 CV 工具集可帮助 KeepTruckin 等客户移植自己的神经网络，并支持行业标准的机器学习框架，例如 PyTorch、ONNX、Caffe 和 TensorFlow。
>> 本文最初发表在我们的姊妹网站 EE次。
相关内容：
- 基于视觉的驾驶员监控系统越来越受欢迎
- 打破对驾驶员监控系统的误解
- 车辆自动化编号系统有用吗？
- 图像传感器提供更清晰的舱内图像
- 让我们更接近无人驾驶的关键技术
有关 Embedded 的更多信息，请订阅 Embedded 的每周电子邮件通讯。
传感器