今天，索尼宣布开发两款新的成像传感器，分别是IMX500和IMX501。这些传感器的新功能是将AI芯片直接封装到传感器中。索尼表示，开发嵌入AI芯片的传感器的整个想法是为了避免基于云的AI处理可能带来的各种问题。
索尼IMX500传感器结构
索尼IMX500并不是常规的成像传感器，实际上它采用了索尼的堆栈式传感器设计。索尼开发了将DRAM层夹在传感器的光学层和其电路之间的功能，以增加拍摄缓冲。这项功能最初推出后，这就是为什么智能手机可以以960fps的超慢动作拍摄。现在，索尼已经设法将AI处理引擎打包到这一层，而不是只有DRAM。索尼称之为逻辑芯片，它包括处理图像信号的ISP、专用于AI信号处理的DSP和用于AI模型的存储器。这种方法有两个明显的优点。传感器的分辨率为1230万像素，对角线尺寸为1/2.3英寸。
目前，大多数与图像相关的AI处理都发生在云上。据索尼称，可能存在隐私问题。另外，还有一个连接问题。如果您的手机失去了与云的连接，AI处理将会停止。索尼的方法当然可以缓解其中的一些问题。OEM可以使用任何一种推理引擎来编写AI芯片，具体取决于传感器的部署位置。此外，传感器芯片组件可以被编程以输出整个图像或者丢弃图像数据并基于推理使用信息。机载AI芯片可以OEM编程的事实使得IMX500的使用极其灵活。有趣的是，苹果的设备(如iPhone 11 Pro)和华为的设备(如华为P40 Pro)都是在设备上使用AI处理，并不依赖云端。
潜在用例
索尼IMX500听起来像是一个可以用在很多方面的传感器。对于智能手机来说，主要SoC的负担可以通过在传感器上运行推理来减轻，而更高级的人工智能任务仍然可以使用云来执行。该传感器也可用于安全摄像机，通过编程可以识别例如进入建筑物的人是否戴着面具。考虑到COVID的时间，这实际上是一件非常有用的事情。然而，可能性是无限的。
索尼IMX500和IMX501的上市
索尼已经提到IMX500已经交付给合作伙伴OEM，而IMX501将在6月交付。考虑到整个行业再次聚焦百万像素大战，我们不希望在智能手机领域看到这种传感器。
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 puzdycom@126.com 举报，一经查实，本站将立刻删除。
