多年来,图像传感器的发展一直围绕着封装更多的像素并缩小其尺寸以适合较小的设备。现在,他们将变得聪明起来。今天,索尼发布了IMX500和IMX501,这两个带有板载AI处理芯片的12.3百万像素传感器。他们将能够自行处理轻型机器学习任务,例如识别流浪狗或猫是否进入了后院,而无需将任何视频发送到云或其他系统。相反,他们可以传递匿名元数据ping来提醒您所见内容。
首先,这听起来可能并不十分令人兴奋,但是正如索尼技术与业务创新副总裁Mark Hanson告诉我的那样,它可以使相机更加有用。一方面,这是确保更好的隐私的一种方法,因为传感器可以完全在设备上处理AI任务。这在欧洲尤其有用,因为新的GDPR指南严重限制了组织使用监控视频的方式。数据可以保留到其源设备越近越好。
板载AI还意味着您可以实时处理信息。商店前面的摄像头可以计算进入的人数,甚至在有人没有戴口罩的情况下甚至可以警告安全(这是严重的健康风险,因为我们仍在应对COVID-19大流行)。另一个摄像头可以跟踪商店货架上的物品库存,而其他摄像头可以监视人流的流量来确定购物的热点。
需要明确的是,这些图像传感器将无法取代复杂的基于云的机器学习工具的工作,后者不仅可以识别物体。但是,它们是朝着未来迈出的一步,在这种情况下,相机的功能将更像独立的计算机。
他们还可以协助更复杂的计算机视觉系统。例如,在像亚马逊这样的无收银员商店中,大量摄像机捕获并处理了大量视频数据,索尼的传感器可以准确地检测出客户所在的位置。如果没有人在牛奶过道旁,则没有理由将那些3D相机打开,对吗?
汉森告诉我们,IMX500的样品已经发送给了索尼的合作伙伴,而包装成适合智能板等设备的IMX501将于6月开始发货。预计到今年年底和2021年,设备将使用新硬件。