人工智能相机推动智慧城市试验

在罗马进行的人工智能智慧城市试验，使用索尼图像作为“Smart Tip”系统一部分的具有人工智能功能的传感器，旨在帮助减少交通堵塞和污染，减少行人道路事故，并最大限度地减少城市公交车上的拥挤。

在罗马进行的人工智能智能城市试验，使用具有人工智能功能的索尼图像传感器作为“Smart Tip”系统的一部分，旨在帮助减少交通堵塞和污染，减少行人道路事故，并最大限度地减少城市公交车上的拥挤。

该试验旨在解决大多数城市常见的三个“痛点”：交通量和拥堵，特别是与寻找停车位相关的问题；行人过马路时的安全；并优化大流行时代及以后的公共交通可用性。

迄今为止，三个概念验证智能提示系统已在永恒之城的交通信号灯上部署。

Smart Tip 系统配备两个支持索尼 IMX500 AI 的摄像头模块，位于交通灯顶部（来源：Sony Semiconductor Europe）

Smart Tips 每个都有两个 Sony IMX500 图像传感器。这些传感器于一年前推出，特别具有 AI 处理能力，允许在网络边缘处理图像，而不会让图像离开 Smart Tip。

IMX500 模块有一个 12.3 兆像素的传感器和一个逻辑芯片，该逻辑芯片采用专用于 AI 处理的 Sony DSP 设计，以及用于存储 AI 模型的内存。在设备内处理图像的能力（无需将数据发送到云端）对于智慧城市 AI 系统的运行至关重要，因为它允许极快的延迟。它还确保消费者隐私；图像不会离开设备，而是通过 AI 提取信息并转换为元数据。该元数据可能包括在公交车站上车或下车的人数，或者是否有过马路的行人。 （如果需要，IMX500 能够输出整个图像或感兴趣区域/部分图像，但本次试验只选择了通信元数据）。

索尼企业联盟和投资董事总经理安东尼奥·阿维塔比尔 (Antonio Avitabile) 表示：“这种传感器没有图像，它不是相机，而是用作传感器的相机——没有图像输出。” “出去的只是一个“是的，有车”或“没有车”或一些人。这里的想法是服务于目的，完成工作，但不看人。”

在边缘处理图像还避免了必须将大量 12 兆像素的图像上传到云端；单独的元数据更适合通过 Smart Tip 的蜂窝调制解调器传输。

点击查看全尺寸图片

该项目正在试用的三个应用程序（来源：Sony Semiconductor Europe）

三个应用

“交通拥堵是大城市的一个非常大的问题，”Avitabile 说。 “很大一部分与寻找可用停车位的司机密切相关。”

罗马智慧城市人工智能系统旨在实时跟踪可用停车位的位置。可用空间的 GPS 位置通过系统的蜂窝调制解调器发送到云端。然后可以通过手机应用程序将位置传达给司机。这个想法是为了避免司机不得不长时间开车寻找空间，同时减少拥堵和污染。

行人安全是任何城市的另一个关键痛点；每年有成千上万的行人在欧洲道路上丧生。行人与车辆之间的平均距离是衡量行人安全的关键指标。该试验旨在对此进行定量分析。智能提示将检测过马路的行人，然后在行人过马路时为车辆启动视觉或听觉信号。

罗马斗兽场外的交通（图片来源：Boris Stroujko）

Avitabile 说：“任何时候发现有行人过马路时，我们都会在十字路口发出某种灯光信号，提醒司机有人正在过马路。” “我们相信，这将对减少人行横道处的伤亡人数起到威慑作用。”

公共交通是该试验将解决的第三个应用。 Avitabile 的示例，智能公交车站，将能够检查每个公交车站有多少人在等待，并使用此信息来控制每辆公交车上的人数（在持续大流行期间尤其重要）。公交车还可以避免在没有乘客等待的站点停靠。该系统还可以监控每个站点有多少人上下车。这些信息可用于更好地优化公交路线和时间。

后台系统

索尼的 Smart Tip 系统包括一个在云端运行的服务平台。该平台将处理 Smart Tip 设备的配置和注册。该平台还处理将用于检测汽车和人员的 AI 模型的训练，以及可安装在 IMX500 设备上的模型的生产。

系统的可扩展性是通过最小化其带宽要求（通过仅发送如上所述的元数据）来确保的。三个用例中的智能提示本身是相同的；只是每个上的AI模型软件不同。 AI 模型可以通过无线方式上传或更新，以提高效率或适应未来的不同应用。

>> 本文最初发表在我们的姊妹网站 EE时代欧洲。