索尼正在将机器智能引入其图像传感器。 这家电子和巨头本周宣布了一种传感器,它在处理图像时应用人工智能,而不需要额外的硬件或帮助。
摄影行业的玩家们一直在关注越来越多的像素,以提高不断扩大和复制的能力,以及越来越压缩的设备,以减轻重量和更大的便携性。
但索尼的新IMX500传感器是第一个通过AI实现提高效率的。
索尼表示,新的12.3百万像素传感器绕过了向云发送视频图像或附加硬件进行处理和分析的常用做法。 相反,这些传感器将充当微型计算机,能够几乎瞬间识别图像。
芯片将加快分析,消除对云资源的依赖.. 跟踪人类行为的视频监控系统每天传输万亿比特的数据。 通过处理芯片内的数据而不是将其发送到云处理单元,耗时的传输时间被缩短。 用户的安全性也更高,因为通常敏感的视频数据仍然在船上,而不是在云中。
考虑到使用机器学习来提高传感器智能的概念,索尼负责商业和创新的副总裁马克·汉森(Mark Hanson)最近观察到:“如果我们能将这种能力小型化,并将其放在芯片的背面,我们就可以做各种各样有趣的事情。”
根据索尼的说法,IMX500(以及为智能板安装而设计的配套IMX501)“是世界上第一个配备AI处理功能的图像传感器。”
为了进行比较,IMX500可以在3.1毫秒内将标准图像识别算法应用于单个视频帧。 另一方面,谷歌的Movidius传感器需要几秒钟才能处理相同的数据。
该报告说:“在图像传感器上包含人工智能处理功能,使高速边缘人工智能处理和提取只需要必要的数据,在使用云服务时,可以减少数据传输延迟,解决隐私问题,降低功耗和通信成本。”
索尼提供的例子,店内相机正在全球推出,以跟踪购物者的行为和进行无现金购买。 更快、更便宜的人工智能传感器将提高相机跟踪商店中众多客户的效率,并创建热图来监控行为,提供人群控制,甚至确定-在这个社会距离的时代-谁违反了距离规范或没有戴面具。 它们也可以用于产品库存跟踪。