中国电子信息产业发展研究院
  • 院长信箱
  • 登录邮箱
  • 设为首页
  • 加入我们

  首页 > 赛迪观察 > 正文

计算机视觉加速全局快门传感器应用

来源:赛迪传媒  作者:陈炳欣  投稿时间:2022-04-07

计算机视觉作为一种人工智能的基础技术应用,使用场景多样,市场潜力巨大。而计算机视觉又与传感器密切相关,只有经过传感器对环境信息的采集,才能进而实现数据的存储、处理以及后续的推理判断与执行。近日,意法半导体(ST)举办线上媒体沟通会,与会嘉宾在对人工智能时代传感器的技术发展与市场应用进行介绍时指出,计算机视觉将加速全局快门传感器的应用。

计算机视觉应用于四大场景

计算机视觉是人工智能领域的一个重要分支,其可以让计算机等智能设备从图像、视频以及其他视觉输入的数据库中提取有意义的信息,并对这些数据进行处理,进而采取行动。目前,计算机视觉在生产生活当中已有了很多实际应用,比如智能手机中的面部识别技术就已经被广泛应用于屏幕解锁和电子支付等方面。

根据意法半导体亚太区影像事业部技术市场经理林国志的介绍,计算机视觉的应用场景大致可以归纳为四大类:首先是深度感应,主要用于面容识别、3D扫描等场景。这类应用场景大致通过两个全局快门传感器搭建一组双目摄像头系统,或者使用一个全局快门传感器搭建结构光摄像头系统。

其次是生物识别,主要是采集人体各个部位的信息并用于身份识别,除人脸识别之外,还包括手势检测、指纹识别、虹膜识别等。

再次是增强现实、虚拟现实和混合现实等应用场景,包括6DoF(六个自由度追踪)和SLAM(同步定位与地图构建)。6DoF主要针对头部行为,当用户戴上VR头显设备后就会得到6D感知能力,头部可以做出左右、上下、前后六个角度的动作。当用户需要掌握自己所处房间状况时,则可以通过SLAM发挥作用。此外,使用VR/AR设备还可以进行生物识别,比如手势检测或者手势追踪。在这种场景下,设备可以通过用户的一个手势,识别出该行为的目的,比如用户在做一场演讲时,通过一个手势就可以自动翻到下一页或者翻回到首页,或者通过手势实现鼠标的单击和双击。

最后一类应用场景是机器人与工业控制,如无人机和扫地机器人等。这些设备在使用过程中要避免相互碰撞,就需要具有物体检测和场景分析能力。而在这些应用场景中,传感器都可以发挥关键作用。

全局快门与卷帘快门各具优势

由于计算机视觉的应用场景与一般用途的摄像头不同,并不注重静态图像的捕捉与色彩渲染,因此智能手机与监控摄像头等设备中日常搭配使用的卷帘快门传感器并不适用。林国志介绍,从拍摄角度划分,图像传感器可以分为全局快门与卷帘快门两大类型。

人们日常接触的多数摄像头,大都采用卷帘快门传感器,比如智能手机的主摄像头和自拍摄像头,楼宇中安装的监控摄像头以及数码相机中大都采用卷帘快门技术。因为这些应用场景都需要捕捉彩色图像,需要相当高的分辨率。卷帘快门的设计目的正是为了捕捉静态图像和视频拍摄,需要非常高的分辨率和颜色处理能力。

问题在于,计算机视觉当中采用卷帘快门传感器都是逐行拍摄图像的,整个图像只有一帧。如果拍摄对象是车辆这样的快速移动物体,图像就有可能发生扭曲,无法显示拍摄对象原始形态,使得机器无法判断不同图像中的车辆是不是同一辆车,也就无法用于计算机视觉的处理。

全局快门的原理则不同,其拍摄时间非常短,只要拍摄对象不是快速移动的物体,成像效果就非常准确,因此更加适用于计算机视觉。随着计算机视觉在人工智能领域的应用快速铺开,也将促进全局快门传感器的发展。

意法半导体亚太区影像事业部技术市场高级经理张程怡表示,目前全局快门传感器在消费性电子和汽车领域的应用势头非常猛。消费性电子上应用最典型的就是人脸识别,无论智能门锁、门禁管制,还是电子支付都已开始采用。汽车领域的主要应用场景是驾驶者的监控和对乘客监控。此外,全局快门传感器在机器人、绘制地图、AR/VR等领域的发展势头也不错。

在谈到全局快门是不是会全面取代卷帘快门传感器时,张程怡认为,两者各有优势。在拍摄静态照片或视频时卷帘快门的像素更小、解析度更高,在用于手机主摄像头等设备中更具优势,但全局快门在计算机视觉这类识别动态影象方面更有优势。卷帘快门的画点大概在1.1微米以下,而全局快门通常在2.2微米以上,单仅画点尺寸上,两者就代表了不同的应用领域。基于此,也可看出全局快门传感器的技术发展趋势像素尺寸持续缩小,画点持续变多,功耗优化。

目前,意法半导体消费和工业用全局快门图像传感器已推出VD55G0 40万像素和VD56G3 150万像素两款产品。这些产品在940nm处具有最高的量子效率,拍摄性能稳健;正方形传感器的分辨率与镜头最佳匹配,适合旋转拍摄使用场景;拍摄时间很短,降低系统功耗,能够在确保准确成像的同时降低系统功耗。(通讯员:任凌雨)

【上一篇】: 为老年人设计人工智能技术   【下一篇】: 中国液晶面板产业何以崛起?

 中国电子信息产业发展研究院(CCID)是工业和信息化部直属单位,又称赛迪研究院,下设18个研究所、中国软件评测中心和赛迪集团等20余家控股企业,在重庆、广东、江苏、山东等地设有分支机构,现有职工2000余人,博士硕士占51%以上。 自2000年成立以来,赛迪支撑制造强国和网络强国建设,聚焦两化融合、智能制造、数字经济、军民融合等重点领域,逐步形成了研究咨询、评测认证、科技服务、媒体会展、军工业务、产业金融6大业务布局,累计为20余个国家部委、400余个地方政府、5000余个行业企业提供服务。 研究咨询是赛迪推动思想和知识创新的核心业务,致力于提供决策支撑与产业咨询服务,承担有多个国家重大产业规划编制任务,拥有赛迪专报、赛迪前瞻等20余本研究内刊,[更多]

赛迪专家更多

陆峰:制造业数字化转型推进路径及方式

制造业是国民经济的主体,是立国之本、兴国之器、强国之基,加快数字化...

张立:持续释放政策红利 为促进工业...

工业是国民经济的主体和增长引擎,工业稳则经济稳。为贯彻落实党中央、...

杨春立:2022年工业互联网平台发展...

12月29日,在线上举行的2021通信产业大会暨首届工业互联网金紫竹峰会上...

张立:数据要素市场成为新蓝海,推...

人工智能(Artificial Intelligence)、区块链(Block Chain)、云计算...

赛迪机构

咨询业 媒体业 评测业 信息技术服务业 会展培训业 其他(分支机构)