
IMX500和IMX501图像传感器。 图片:索尼
索尼公司宣布,他们已经开发出了世界上第一个配有人工智能(AI)处理的图像传感器。
新的图像传感器有一个像素芯片和逻辑芯片组成的配置。这种逻辑芯片被称为索尼的数字信号处理器(DSP),专门用于人工智能信号处理,以及用于人工智能模型的内存。
索尼表示,DSP不需要额外的硬件,如高性能处理器或外部存储器,使其成为“边缘人工智能系统的理想选择”。
索尼表示,通过使用人工智能,传感器还能够输出元数据——属于图像数据的语义信息——而不是图像信息,这减少了数据量,并解决了隐私问题。对于实际应用,索尼表示,图像传感器内的逻辑芯片允许它在单个视频帧内发送用于人工智能处理的每个单独输出图像帧的数据。
索尼表示:“这种设计使得在录制视频的同时,能够对目标进行高精度、实时的跟踪。”
用户还可以根据自己的需求或使用系统的位置条件,将自己的AI模型写入嵌入式内存中。
“例如,当多个使用该产品的相机安装在零售场所时,单一类型的相机可以在不同地点、不同环境、不同时间或不同目的下使用,”索尼说。
“当安装在设施入口时,可用于计算进入设施的访客人数;当安装在商店的货架上,它可以用来检测库存短缺;在天花板上,它可以用来绘制商店访客的热量地图(探测许多人聚集的位置),等等。”
“当安装在设施入口时,可用于计算进入设施的访客人数;当安装在商店的货架上,它可以用来检测库存短缺;在天花板上,它可以用来绘制商店访客的热量地图(探测许多人聚集的位置),等等。”
像素芯片本身是黑色背景,包12.3有效像素,1.55μmx1.55μm。它可以以每秒60帧(fps)的速度拍摄全帧,也可以拍摄60fps的4k和240fps的1080p视频。
配备人工智能的图像传感器有两种形式,一种是裸机芯片——IMX500,另一种是陶瓷封装的IMX501。
裸机芯片的样品版已于4月上市,预计样品包装版将于6月上市。
尽管新型冠状病毒疫情影响了全球供应链,但索尼今年3月表示,其成像和传感解决方案部门没有受到任何“实质性影响”。
不过,该公司也指出,由于COVID-19的爆发,智能手机市场最终放缓,这可能会影响传感器的销售,其电子产品业务也受到了供应链问题的影响。
*来源Zdnet,文章为作者独立观点,不代表紫金山科技立场,如有侵权请联系删除
- END -
更多精彩内容,敬请搜索关注“紫金山科技”微信 【zijinshan2013】
★紫金山科技:聚焦5G,关注人工智能与移动互联网的发展。报道新产业、新公司、新业务、新商业模式,探索5G+AI的无限可能
本文网址:




