最后更新:2020-05-16 10:30:47 手机定位技术交流文章
13来自奥菲寺量子比特报告|公开号码QbitAI
世界上第一个内置人工智能的图像传感器问世。
这是索尼最近的大新闻:
宣布即将发布两款智能视觉传感器——IMX 500和IMX501。
它们集成了逻辑处理器和存储器,所以每个模块都可以像微型计算机一样工作。
目前,这种传感器可以捕捉1200万像素的静态图像,支持4K@60fps视频拍摄。

IMX500和IMX501的发货时间分别为今年4月和6月,税后价格分别为1万日元(约661元)和2万日元(约1323元)。
新传感器具有以下特点:
由像素芯片和逻辑芯片组成的堆叠结构配备有具有人工智能图像分析和处理功能的图像传感器。像素芯片采集到的信号由传感器上的人工智能处理,不需要高性能处理器或外部存储,方便了边缘人工智能系统的开发。传感器输出元数据(属于图像数据的语义信息)而不是图像信息,从而减少数据量并确保隐私安全。此外,人工智能可以为广泛的应用提供多样化的功能,例如在高速人工智能处理下的实时目标跟踪。您也可以根据用户的需求或系统重写内存,并使用该位置选择不同的人工智能模型。
据索尼称,新发布的图像传感器已将人工智能相机的研发扩展至0+,预计将广泛应用于零售和工业设备行业,并有助于构建一个连接到云的优化系统。
首款内置人工智能图像传感器的主要功能
接下来是IMX500和IMX501的四个主要功能。
具有人工智能处理功能的图像传感器
像素芯片是背光的,有大约1230万个有效像素,能够以宽视角捕捉图像信息。
除了传统的图像传感器运算电路外,其逻辑芯片还配备了索尼原装的数字信号处理器,专门用于人工智能信号处理,并为人工智能模型存储。

这种配置不需要高性能处理器或外部存储,是边缘人工智能系统的理想选择。
元数据输出
像素芯片采集的信号由网络处理器进行处理,人工智能操作在逻辑芯片的处理层进行。提取的信息作为元数据输出,这可以减少要处理的数据量。
同时,不输出图像信息有助于降低安全风险和确保隐私安全。

除了传统图像传感器捕获的图像,用户还可以根据自己的需要和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI特定区域提取图像。
高速人工智能处理
使用传统的图像传感器记录视频时,需要发送每帧的视频数据进行人工智能处理,数据传输量大,难以实时显示结果。

索尼的新传感器产品在一个逻辑芯片上执行互联网服务提供商处理和高速人工智能操作(处理移动V1只需3.1毫秒),在一个视频帧中完成整个过程。这种设计可以保证高精度和实时的目标跟踪,同时记录视频。
人工智能模型可以自由选择
用户可以将自己选择的人工智能模型写入嵌入式内存,并根据自己的需求或系统使用位置进行重写和更新。

例如,当在零售点安装多个装有新传感器的摄像机时,一种摄像机可用于不同的地点、环境、时间或目的:
当安装在网站的入口处时,它可以用来计算访问者的数量。当安装在商店的货架上时,它可以用来检测库存短缺;当安装在天花板上时,它可以用来绘制商店客流的热图。此外,指定相机中的人工智能模型可以从用于检测热图的模型改写为用于识别消费者行为的模型。
IMX500/IMX501主要参数
最后给出了IMX500和IMX501的主要参数。

猜猜谁会首先使用这个传感器?
参考链接:
http://www . Sony . net/SonyInfo/News/Press/202005/20-037E/https://www . an zho . cn/News/p _ 40263
-完毕-
量子比特签了合同。
请密切关注我们,首先了解最新的技术发展。
本文由 在线网速测试 整理编辑,转载请注明出处。