近日,犀灵视觉与上海大学微电子学院的科研团队合作,成功开发出国内首个基于感存算一体化智能视觉传感器芯片的高速视觉自动对焦系统。此系统采用犀灵公司最新的感存算智能视觉传感器芯片和先进的液态镜头,搭配自研视觉算法,能够模拟哺乳动物眼球的自动对焦及深度估计机制,实现毫秒级快速且高效的对焦和3D成像。这次方案使用的先进液态镜头,由苏州协尔智能光电有限公司提供。
感存算一体智能视觉传感器芯片是一项集成度极高的技术。在传统的视觉传感器中,感光、存储与计算过程分散在不同的硬件中进行。而感存算一体化芯片将这三个过程整合在单一芯片上,不仅减少了数据传输的延迟,也优化了能耗与处理速度。该技术通过并行处理算法,大幅提升了图像的处理速度和响应时间,是实时图像处理的理想选择。

高速自动对焦:

在自动对焦系统中,犀灵的智能视觉传感器以微秒级的速度实时检测图像的清晰度,并通过控制电路连续调整施加在液态透镜上的电压,电压变化导致液体透镜的形状调整,从而改变焦距,直到图像达到最佳清晰度。整个高速计算过程全部依赖传感器片上的计算能力,无需额外处理器芯片。感存算一体智能视觉传感器芯片与液态镜头的结合,充分发挥了两者的优势: 智能视觉传感器芯片高速低功耗检测清晰度,液态镜头可以高速连续调整镜头焦距。例如,在线上高速读码且二维码与相机距离不固定的情况下,使用我们的方案,可以实现高速变焦和大景深性能,且无需额外的测距模块和运算芯片,体积更小,变焦更快。
 

实时单目3D深度估计:

不仅仅在高速对焦应用场景,我们也将这一系统拓展到单目3D深度估计领域。该系统的核心原理是评估在不同焦距下不同图像区域的清晰度。在连续改变液态镜头的焦距的过程中,不同深度的物体会经历失焦-对焦-失焦的过程。通过识别图像区域最大程度上处于焦点或最为清晰的光学图像,并且结合实时焦距信息,我们可以计算出该区域的深度信息,根据深度分辨率设定的不同,整个系统可以实现30FPS到150FPS的运算速度。

总结:

我们实现了一个高速的对焦系统,该系统使用感存算智能视觉传感器芯片和可调焦液态镜头,可以高速自主对焦和实时重建深度信息。感存算技术,解决了光电传感器和处理器阵列之间的带宽问题,仅依赖片上处理器阵列的高并行计算能力,使液态镜头执行的快速焦距扫描将图像中复杂的深度评估问题简化为一组相对简单的焦点测量。整个深度帧重建算法全部在传感器片上实时实现,而无需依赖任何外部处理器。
我们相信,这项技术,将在无人驾驶、智能监控、工业检测、机器人和无人机以及智能眼镜等领域具有广阔的应用前景。
 

上海大学微电子学院

 

上海大学微电子学院于2019年11月成立,学院立足上海集成电路“一体两翼”布局的嘉定翼,致力于通过产教融合、科教融汇和学科交叉融合,建成准工业化、国际化的国际一流微电子学院,面向国民经济主战场,培养具有家国情怀、全面发展、卓越创新的集成电路行业紧缺人才,服务国家重大战略需求。
 

 

 

 

 

 

 

 

 

 

 

 

 

 
 
 
 
 
 

 

 

关于我们

犀灵视觉,成立于2021年,是业界领先的致力于研发全新一代智能视觉传感器和智能光电传感器的高科技芯片公司,核心团队来自于世界知名的大学实验室和芯片公司,目前已在北京、上海、成都、深圳和南京等城市设立办公及研发中心。

犀灵视觉的“像素级运算技术(In-Pixel Computation)”经过多年的沉淀与迭代,超越了传统冯诺依曼架构处理方式,从根源创造技术革新,高效的将像素(Pixel)和运算技术(Core)相结合,带来传统架构无法比拟的高速度、低功耗和智能化的优势。我们的产品专注于边缘处理应用场景,从2D到3D都提供了完整的智能视觉传感器解决方案。

犀灵视觉的愿景是给AI装上慧眼,为人类带来无限视界。

 

公司成立至今已获得以下荣誉:

上海最具投资潜力50佳创业企业

ARM安创加速器2021年“安创之星”

2021年毕马威中国“芯科技”新锐企业50强

2022年科技型中小企业

2022年北京市创新型中小企业

2022年毕马威中国“芯科技”新锐企业50强

2023年科技型中小企业

2023年毕马威中国“芯科技”新锐企业50强

2023年第十八届“中国芯”芯火新锐产品

 

 

 

犀灵感存算技术在高速对焦和单目3D深度估计上的应用