杏彩体育集微网报道,今年9月,索尼半导体两款堆叠式事件监测视觉传感器一经发布,便在业界引起广泛关注,巨头的加入不仅令仿生视觉事件相机行业为之一震,更有力推动了行业生态的发展,从而大大加强国内终端手机、智能设备、安防厂商的信心,相关产品及应用预计也将加速落地。
作为国内仿生视觉芯片行业中的一员,北京锐思智芯科技有限公司(下称“锐思智芯”)日前发布了融合式仿生事件视觉传感器ALPIX-Pilatus芯片(简称ALPIX-P) ,目前该芯片正在送样,预计明年在VIoT领域率先落地。
从功能来说,此次锐思智芯推出的融合式仿生事件视觉传感器ALPIX-P芯片,拥有两路信号输出模式,一路是传统图像传感器的图片信号,另外一路是非常特殊的事件流信号;芯片可在两种模式间快速切换。
ALPIX-P的背后是由锐思智芯独创的Hybrid Vision技术,即将仿生事件相机技术与传统图像传感器技术在像素级别进行融合,使得芯片可以同时输出仿生的事件流信号和图像信号。
在事件相机模式下,相较传统图像传感器,锐思智芯ALPIX-P芯片基于人眼视网膜神经工作概念杏彩体育,像素可独立工作,不会被统一控制;第二,每个像素仅探测变化信号,可过滤大量重复背景信息,使得芯片功耗较低且数据量较少,约为传统产品的1/20;第三,像素响应快,加之独立工作概念,可摆脱帧率限制,提升运行速度。例如,传统CIS传感器的帧率很少超过200帧/秒,而ALPIX-P则可达到等效5000帧/秒。第四,动态范围广杏彩体育。相比传统CIS传感器的60 dB杏彩体育,ALPIX-P的动态范围可达100 dB以上。
谈到研发Hybrid Vision技术的初衷,锐思智芯CEO邓坚表示:“仅输出事件流信号的芯片(也称为事件相机),在实际应用场景中存在着一系列局限,因此我们做芯片主要为了解决这些难点。”很多应用场景光靠事件相机还远不足够,仍需传统图像传感器的支持。此外,当前事件相机芯片尺寸较大,意味着成本较高,在消费电子领域的应用场景中缺乏经济效益。因此,我们研发了融合事件相机与传统图像传感器功能的芯片来解决前述的问题。
基于Hybrid Vision技术,ALPIX可同时输出事件流信号及高质量图像信号,来满足大部分场景需要;并且基于先进工艺及独有设计结构将芯片尺寸缩减至接近传统图像传感器的程度;还对噪声进行优化与提升。
目前,锐思智芯研发了两个系列的芯片产品:ALPIX-Titlis(简称ALPIX-T)融合式低功耗仿生视觉传感器,ALPIX-Eiger(简称ALPIX-E)融合式高端仿生视觉传感器。
其中,ALPIX-T主要用于低功耗的VIoT领域。像素端可过滤80%无效信息,帮助提高有效信息占比,节省系统成本,为各类端侧的人工智能场景量身打造;在适配现有图像系统的基础上,增加独立事件流数据,帮助提高算法的效率及精度。适用于各类视觉IoT场景,在保持对场景连续感知的同时降低系统功耗。
ALPIX-E适用于高端成像领域,如手机、安防等场景。在保证业内最高分辨率的同时,为行业带来最小的像素大小,预计今年年底发布。
近日,索尼半导体发布了两款堆叠式事件监测视觉传感器(EVS, Event-based Vision Sensor):IMX636、IMX637,分别为100万和30万分辨率。该两款芯片采用了Cu-Cu连接的3D堆叠工艺,从而使事件驱动相机像素尺寸从15um减少到4.86um。
此次索尼事件相机芯片的发布,无疑为行业注入一针“强心剂”。邓坚认为,早在2015年起,业界大厂便开始关注事件相机,但事件相机发展多年,除了在少数细分领域(例如工业检测)得到应用,在更大的消费电子市场却迟迟没有大规模落地。背后的原因除了技术本身限制以外,更重要的是尚无大厂推动整个生态的发展。
因此,索尼进入事件相机领域,可谓真正带动了整个生态的发展,同时也推动了模组、算法、方案的建立。而这不仅大大增强了国内终端厂商的信心,也令其更乐于投入更多人力、物力,用以共同建设行业生态。
“事件相机生态的快速发展给我们带来了很大的机会,我们相信锐思智芯拥有的独特Hybrid Vision技术及算法方案将在VIoT、手机等领域大放异彩。”邓坚如是说。
在贸易战背景下,芯片国产替代的趋势,不仅为创业公司提供了机遇,也令邓坚切实感受到国内业界对新技术的容忍度和对中小企业的支持力度正日益加强。
对锐思智芯而言,国产替代不只是简单重复国外已有产品,而是要加入符合市场需求的研发创新。“这也是为什么我们从产品研发之初就从客户需求出发,根据客户需求重新定义事件相机的功能,研发我们独特的自有技术。” 邓坚说道。
在5G、IoT、AI等新技术的助推下,我国芯片产业规模得到快速发展。从信息的流动过程来看,可以总结为信息获取(传感端)-传输-处理三个环节,其中,5G、IoT、AI等技术的发展,主要是基于传输和处理层面,上述信息的获取全部来自于感知端。目前传输、处理的技术已经发展到较高水平,但是感知端,尤其是视觉方向却并无较大变化杏彩体育,而这也限制了后端环节的发展。
锐思智芯便是以ALPIX芯片为基础,不断拓宽新型视觉传感器边界,并通过感知端的变革帮助向后端传输处理技术的发展。(校对/日新)