工业和信息化部主管 中国电子报社主办
收藏本站 投稿

半导体

???索尼联手微软推出AI图像传感器的三个问号

索尼近日宣布即将推出两款AI图像传感器,代号IMX500和 IMX501,号称具备智能视觉的“全球首款AI图像传感器”。索尼方面表示,这两款CMOS首批目标是零售商和工业客户,比如亚马逊Go无人商店,其他应用场景包括访客统计、交通状况和人流量热图绘制等,未来将把 IMX500打造成一个简单的单应用设备,即专门应对复杂和多样化任务的专用AI硬件,具备处理和分析更复杂任务的能力,而不仅局限于运行基础算法。

紧接着,索尼和微软宣布他们将为共同的客户开发解决方案。据了解,索尼将在IMX500嵌入微软的Azure AI,从而在智能相机和其他设备的图像中提取有效信息。

索尼+2B=?

这是索尼在AI领域交上的第一份作业。去年11月,索尼宣布成立索尼AI,以推动AI(人工智能)的基础研究和开发,当时索尼方面就曾表示将在影像和传感解决方案上推动所有现有业务领域的转型,并开发全新的业务领域。

索尼业务与创新副总裁Mark Hanson表示,这款AI图像传感器将不会应用到手机设备中,目标人群为零售商与工业用户。目前,IMX500已经出货给索尼的合作伙伴,而MX501将会在6月份出货。

业内人士分析认为,索尼是想通过这项技术摆脱对手机等消费电子市场的依赖,向具有更广阔前景的产业互联网进军。据悉,尽管市场的不确定性犹存,但索尼仍然计划将其传感解决方案业务占芯片业务的比重从4%提高到2026年的30%。

索尼在图像传感器领域长期保持领先优势,日本调研公司Techno Systems Research(TSR)2019年CMOS图像传感器市场报告显示,索尼以49.1%的份额排名第一。索尼选择与AI技术相结合,一是为继续领跑图像传感器领域,二是为拓展自身业务版块,同时提高其产品技术能力。

“索尼将AI技术集成于CMOS图像传感器的难度之一是需要利用3D堆叠技术(例如3D-IC TSV方案)实现逻辑电路芯片(包括计算和存储功能)与像素阵列芯片(感光功能)的三维集成。”麦姆斯咨询CEO王懿在接受《中国电子报》记者采访时说道。

3D堆叠技术核心包括晶圆级键合、层间互联技术——硅通孔(TSV)等。索尼在2017年发布了CMOS图像传感器IMX400,它采用了业界先进的三层堆叠结构——像素芯片+DRAM(存储芯片)+ISP(图像处理芯片),意味着索尼在计算及存储芯片集成于CMOS图像传感器上已经具备一定实力。

AI+图像传感器=?

图像传感器作为摄像头模组的核心部件,伴随电子产品对“视觉”功能的逐年递增,而成为业界关注的焦点。那么图像传感器集成AI技术相比传统传感器有何提升?又有哪些技术难点?

王懿认为,将AI技术集成于CMOS图像传感器,可以让“传统传感器”升级为“智能传感器”,同时“边缘计算”也演变为“传感器端计算”,通过将数据处理过程“前置”至传感器端,应用开发者能够实现更快的处理速度、更高的系统效率、更好的隐私保护,并降低数据传输延迟、节省系统功耗、减少网络带宽需求,以及降低系统硬件的实现成本,从而从“传感器端”实现智能硬件及物联网的创“芯”和创新。

赛迪顾问人工智能产业研究中心副总经理邹德宝认为,该图像传感器由像素芯片和逻辑芯片组成的配置,能够输出元数据(图像数据的语义信息),减少数据量并解决隐私问题,并能提高精度,将成为边缘AI领域的理想选择。

赛迪智库集成电路研究所研究员麻尧斌博士向记者指出,从电路设计来说,AI图像传感器配备了具有AI图像分析和处理功能的逻辑芯片,电路实现功能的增加将使得逻辑层的设计复杂度提高。从生产工艺来说,索尼通过晶圆减薄、Cu-Cu连接和堆叠晶圆等技术(Wafer-on-Wafer,WoW)来构建芯片,其中堆叠晶圆包含带有光敏像素芯片的晶圆和DSP、ISP和内存等电路的晶圆,工艺复杂度将显著提升,同时具备DSP功能的逻辑层可能会采用更高的工艺制程。

微软Azure+IMX500=?

索尼新推出的CMOS图像传感器与微软Azure AI又会碰撞出怎样的火花?

索尼方面表示,将在IMX500中嵌入微软的Azure AI,从而在智能相机和其它设备的图像中提取有效信息。同时,开发管理智能相机的APP,并采用Azure的IOT和感知服务完善IMX500传感器,为企业级客户扩展视频分析的范围和能力。

“AI图像传感器使在高速AI处理下进行实时对象跟踪等应用成为可能,同时根据用户的要求可以选择不同的AI模型对数据进行提取。”麻尧斌向记者指出,这些特点将让AI图像传感器未来在工业、零售业和汽车等行业得到应用,具体可用于仓库库存检测、人流监控、驾驶行为监控等应用场景。

邹德宝认为,AI图像传感器未来在智能网联汽车、智能零售、资产追踪、公共安全等方面均有应用空间。

据介绍,配备AI图像传感器的相机在获取信息后,可使用“边缘计算”与“云计算”两种方法在终端上进行数据处理。需要加快速度时,可通过使用边缘计算或云处理的方式来减少分析数据的时间。

微软入局云计算多年,一方面在通过Azure扩张其云服务版图。而另一方面则是加码其“云+端”的战略布局。据了解,微软在“端”上的定位是覆盖各种类型的设备,端则是云的出口,云要持续发展,与端紧密结合是大势所趋,与索尼在图像传感器上达成合作也是微软在拓展端边能力上的一步棋。

智能手机和相机是索尼传感器的主要应用终端,新推出的AI图像传感器目标是企业级用户,索尼此举意在拓展自身业务领土,微软在AI云服务上的实力将成为其有力帮手。

图像传感器处于3D半导体技术的最前沿,是AI发展的重要抓手。随着索尼与微软的合作走向产品化,AI图像传感器又一次引起业内关注。产品是否已进入量产阶段?未来能否成为传感器领域的“香饽饽”?让我们拭目以待。

责任编辑:赵强


声明

1、本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2、本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3、作者投稿可能会经我们编辑修改或补充;4、如本站的文章或图片存在版权,请拨打电话010-88558835进行联系,我们将第一时间处理。

相关链接

视频

专题

聚焦2021年全国两会

3月5日,第十三届全国人民代表大会第四次会议在北京人民大会堂开幕。党和国家领导人习近平、李克强、汪洋、王沪宁、赵乐际、韩正、王岐山等出席,栗战书主持大会。初春的北京,处处生机盎然。第十三届全国人民代表大会第四次会议5日上午在人民大会堂开幕。近3000名全国人大代表肩负人民重托出席大会,认真履行宪法和法律赋予的神圣职责。

2021年全国工业和信息化工作会议

12月28-29日,全国工业和信息化工作会议在京召开。会议以习近平新时代中国特色社会主义思想为指导,全面贯彻党的十九大和十九届二中、三中、四中、五中全会精神,认真落实习近平总书记重要指示批示精神和中央经济工作会议部署,总结2020年工业和信息化工作,分析形势,部署2021年重点工作。工业和信息化部党组书记、部长肖亚庆作工作报告。

2020年中国家电市场报告

3月22日,中国电子信息产业发展研究院发布了《2020年中国家电市场报告》(以下简称《报告》)。《报告》显示,2020年,我国家电市场零售额规模达到8333亿元,在疫情冲击之下显示出较强的韧性;电商渠道对家电零售的贡献率首次超过50%,网络零售对家电消费的促进作用进一步提升;高端产品、生活家电大幅增长,有效促进了消费升级和产业转型。

世界超高清视频(4K/8K)产业发展大会

会议

2020世界显示产业大会

11月20日,由工业和信息化部、安徽省人民政府共同主办的2020世界显示产业大会在合肥市举行。在开幕式上,工业和信息化部部长肖亚庆、韩国驻华大使张夏成发表视频致辞。安徽省委副书记、省长李国英,工业和信息化部副部长王志军出席开幕式并致辞。

2020世界超高清视频(4K/8K)产业发展大会

11月2日,由工业和信息化部、国家广播电视总局、中央广播电视总台、广东省人民政府共同主办的2020世界超高清视频(4K/8K)产业发展大会在广州市召开。广东省委书记李希出席开幕式,省长马兴瑞出席并致辞。国家广播电视总局局长聂辰席、工业和信息化部副部长王志军、中央广播电视总台副台长蒋希伟出席开幕式并致辞。

2020世界VR产业大会云峰会

10月19日—20日,由工业和信息化部、江西省人民政府主办的2020世界VR产业大会云峰会在南昌举行。在10月19日的开幕式上,中共中央政治局委员、国务院副总理刘鹤发来书面致辞。江西省委常委、南昌市委书记吴晓军,工业和信息化部副部长王志军,江西省委书记、省人大常委会主任刘奇先后致辞。开幕式由江西省委副书记、省长易炼红主持。

世界显示产业大会

本周排行