支持人工智能的摄像头驱动智能城市试验
在罗马进行的一项人工智能智能城市试验,使用具有人工智能功能的索尼图像传感器作为“智能提示”系统的一部分,旨在帮助减少交通堵塞和污染,减少行人道路事故,并最大限度地减少城市公交车上的拥挤。 人工智能驱动智慧城市在罗马进行的试验,使用具有人工智...
人工智能驱动智慧城市在罗马进行的试验,使用具有人工智能功能的索尼图像传感器作为“智能提示”系统的一部分,旨在帮助减少交通堵塞和污染,减少行人道路事故,并最大限度地减少城市公交车上的拥挤。
该试验旨在解决大多数城市常见的三个“痛点”:交通量和拥堵,尤其是与寻找停车位有关的问题;行人过马路时的安全;以及为新冠疫情时代及以后优化公共交通的可用性。
到目前为止,三个概念验证智能提示系统已经部署在永恒之城的红绿灯顶上。
智能提示系统采用两个索尼IMX500 AI摄像头模块,位于红绿灯顶部(来源:索尼半导体欧洲)
智能提示每个都配有两个索尼IMX500图像传感器。这些传感器于一年前推出,特别具有人工智能处理能力,可以在网络边缘处理图像,而图像不会离开智能提示。
IMX500模块有一个1230万像素的传感器和一个逻辑芯片,该芯片采用索尼DSP设计,专门用于人工智能处理,外加存储人工智能模型的内存。在设备内处理图像(无需将数据发送到云端)的能力对智能城市人工智能系统的运行至关重要,因为它允许极快的延迟。它还确保了消费者的隐私;图像不会离开设备,而是通过人工智能提取信息并转换为元数据。这些元数据可能包括在公交车站上下车的人数,或者是否有行人过马路。(如果需要,IMX500可以输出整个图像或感兴趣区域/部分图像,但本次试验仅选择了通信元数据)。
索尼公司联盟和投资董事总经理Antonio Avitabile表示:“这个传感器没有图像,它不是相机,而是用作传感器的相机——没有图像输出。”。“出去的只是一辆“是的,有车”或“没有车”或一些人。这里的想法是服务于目的,完成工作,但不需要观察人们。”
在边缘处理图像也避免了将1200万像素的图像上传到云端;仅元数据就更适合通过智能提示的蜂窝调制解调器进行传输。
单击以获取全尺寸图像
该项目正在试验的三种应用程序(来源:Sony Semiconductor Europe)
三个应用程序
Avitabile说:“在大城市,交通拥堵是一个非常大的问题。”。“很大一部分与司机寻找可用停车位有很大关系。”
罗马智能城市人工智能系统旨在实时跟踪哪里有可用的停车位。可用空间的GPS位置通过系统的蜂窝调制解调器发送到云端。然后可以通过手机应用程序将位置告知驾驶员。这个想法是为了避免司机长时间开车四处寻找空间,同时减少拥堵和污染。
行人安全是任何城市的另一个关键痛点;每年都有成千上万的行人在欧洲道路上丧生。行人和车辆之间的平均距离是衡量行人安全的一个关键指标。该试验旨在对此进行定量分析。智能提示将检测过马路的行人,然后在行人过马路时为车辆激活视觉或听觉信号。
罗马斗兽场外的交通(资料来源:Boris Stroujko)
Avitabile说:“任何时候,只要发现有行人正在过马路,我们就会在十字路口设置某种照明信号,提醒司机有人正在过马路。”。“我们相信,这将起到威慑作用,减少人行横道上的伤亡。”
公共交通是该试验将处理的第三个应用程序。Avitabile的例子,智能公交车站,将能够检查每个公交车站有多少人在等待,并使用这些信息来控制每辆公交车上的人数(在持续的疫情期间尤为重要)。公交车也可以避免在没有乘客等候的站点停车。该系统还可以监控每个站点上下车的人数。这些信息可用于更好地优化公交路线和时间安排。
后端系统
索尼的智能提示系统包括一个在云中运行的服务平台。该平台将处理智能提示设备的供应和注册。该平台还处理用于检测汽车和人的人工智能模型的培训,以及可以安装在IMX500设备上的模型的生产。
通过最小化系统的带宽需求(通过仅发送如上所述的元数据)来确保系统的可扩展性。智能提示本身在三个用例中是相同的;只有每一个上面的人工智能模型软件是不同的。人工智能模型可以通过空中传送上传或更新,以提高效率或适应未来的不同应用。
>>这篇文章最初发表在我们的姐妹网站上,EE时代欧洲.
