【业界】新的图像传感器给汽车装上眼睛

点击上方“专知”关注获取专业AI知识!


【导读】自动驾驶在技术上的进步很大程度上依赖各种传感设备,而各种图像传感器更是汽车能够看清周围世界的眼睛,这一领域也逐渐成为各大芯片公司竞争的焦点,我们来一览这篇文章。


安森美收购仙童半导体公司为该公司在汽车领域打开了市场。但是直到2014年收购镁光图像公司才让该公司成为汽车视觉系统的领头羊:安森美目前占据了将近70%的高级驾驶辅助系统(ADAS)前摄像头市场,以及超过50%的汽车图像传感器市场[1]。


镁光CMOS图像传感器技术是安森美公司最近推出的Hayabusa图像传感器平台的关键,它同时使用120dB超高动态范围(UHDR)和LED闪烁缓解(LFM)来突出1MP到5MP变型。而之所以可以同时使用UHDR和LFM得益于3.0微米超曝光100000电子电荷后照式(BSI)像素技术。这一技术使得图像饱和之前可以捕捉更多的光,消除了所有 low-light tradeoff。


并发UHDR和LFM


在图像中,动态范围表示图像中最亮和最暗处的差异,也可反过来表示相机的成像能力,一般用dB表示。

 

动态范围在真实场景中很重要,有时甚至超过了140dB。可想而知这给关乎生命安全汽车视觉系统的目标检测与识别带来了多大的挑战。图一展示了汽车后视摄像头有是否使用HDR技术生成的图像之间的差距。


图1:该图展现了添加了HDR后,汽车后视摄像头图像质量的差别。(来源:镁光图像公司,现从属于安森美公司)。

 

前面的例子是五年前的,使用镁光1.2 MP ARO132AT CMOS 图像传感器传递HDR,不过并没有用LFM。

 

虽然人类肉眼不可见,应用于汽车尾灯和交通信号灯的LED存在“脉搏”,或者说闪烁现象。在微光条件下,这种闪烁会使图像信号处理算法模糊和迷惑。黑暗环境需要更长的曝光时间来捕捉足够的光子生成高质量图像,会使这种迷惑放大。最终,视觉系统经常很难处理像读取交通信号等或者识别车辆类型的任务(例如分辨是摩托车还是小轿车)。

 

和传统的产品不同,Hayabusa(例如2.6 MP ARO233)的LFM能力减弱了这一现象而不需要牺牲微光下的表现(参见BSI像素技术)。根据Bahman Hadji这个前镁光员工现在的安森美高级产品经理的说法,ARO233可以在抖动和2 MP CMOS 图像传感器分割的情况下传递高分辨率图像,归功于LFM和120dB UHDR反映了现实世界的环境(图2a2b2c)。

 

图2a, 2b, 2c :安森美公司2.6 MP ARO233 Hayabusa图像传感器,同时应用了LFM和120dB UHDR

 

一个主要因素导致了ARO233和其他Hayabusa图像传感器能传递高分辨率的图像,就是片上拓展,应用无损压缩将24bit的原始HDR数据压缩成12bit的输出。这些输出会通过一个LVDS串并转换器送入一个图像信号处理器(图3)。这个小的比特流需要更小的带宽,也就是更少的能量,可以减少照相模块的热量来提高图像质量。另外,小的带宽代表更便宜的硅和布线解决方案。


图3:Hayabusa压缩24bit的原始数据变成12bit的输出,减少带宽能量消耗和系统开支

 

系统级的安全


Hayabusa系列的所有产品均有像素设计和架构,因此设计组可以很轻松地把他们的工作在多种系统和交通工具上迁移。

 

这种设备也被称为具有B等级ASIL的脱离上下文的安全元素(SEooC),因为它们可以实时评估每一个框架的错误。检测到的错误输入到每一帧的元数据,给视觉系统更多的时间来处理可能的安全问题(图4),这也有助于创建可用于验证算法并分析整个系统行为的故障图像库(图5)。

图4:Hayabusa 提供了实时的错误检测,帮助提高遇到可能的危险情况时的反应时间。

 

图5:Hayabusa传感器从图中检测到的错误,可以用来编译验证算法并分析整个系统行为的故障图像库

 

“安森美公司需要IBM Haifa研究团队今年早些时候的毫米波技术来帮助完成它的传感器组合”,Hadji说,“这将会带给公司在未来ADAS和自主汽车设计中的强势地位,特别是考虑到它的电源解决方案与高性能汽车传感器融合处理器配合得很好,比如NVIDIA, Intel, Renesas等等公司的。”

 

引用

1.Techno Systems Research (TSR). http://www.t-s-r.co.ip. “Automotive Camera Market Analysis2016.” February 2017.


原文链接:http://www.embedded-computing.com/articles/advanced-image-sensors-take-automotive-vision-beyond-20-20


欢迎转发到你的微信群和朋友圈,分享专业AI知识!


获取更多互联网大数据机器学习人工智能知识,请PC登录 www.zhuanzhi.ai或者点击阅读原文注册登录专知,查看相关知识等资料!如下图所示~


专知荟萃知识资料全集获取(关注本公众号-专知,获取下载链接),请查看:

【专知荟萃01】深度学习知识资料大全集(入门/进阶/论文/代码/数据/综述/领域专家等)(附pdf下载)

【专知荟萃02】自然语言处理NLP知识资料大全集(入门/进阶/论文/Toolkit/数据/综述/专家等)(附pdf下载)

【专知荟萃03】知识图谱KG知识资料全集(入门/进阶/论文/代码/数据/综述/专家等)(附pdf下载)

【专知荟萃04】自动问答QA知识资料全集(入门/进阶/论文/代码/数据/综述/专家等)(附pdf下载)

【专知荟萃05】聊天机器人Chatbot知识资料全集(入门/进阶/论文/软件/数据/专家等)(附pdf下载)

【专知荟萃06】计算机视觉CV知识资料大全集(入门/进阶/论文/课程/会议/专家等)(附pdf下载)

【专知荟萃07】自动文摘AS知识资料全集(入门/进阶/代码/数据/专家等)(附pdf下载)

【专知荟萃08】图像描述生成Image Caption知识资料全集(入门/进阶/论文/综述/视频/专家等)

【专知荟萃09】目标检测知识资料全集(入门/进阶/论文/综述/视频/代码等)

【专知荟萃10】推荐系统RS知识资料全集(入门/进阶/论文/综述/视频/代码等)

【专知荟萃11】GAN生成式对抗网络知识资料全集(理论/报告/教程/综述/代码等)

【专知荟萃12】信息检索 Information Retrieval 知识资料全集(入门/进阶/综述/代码/专家,附PDF下载)

【专知荟萃13】工业学术界用户画像 User Profile 实用知识资料全集(入门/进阶/竞赛/论文/PPT,附PDF下载)

【专知荟萃14】机器翻译 Machine Translation知识资料全集(入门/进阶/综述/视频/代码/专家,附PDF下载)


请扫描小助手,加入专知人工智能群,交流分享~

-END-

欢迎使用专知

专知,一个新的认知方式!专注在人工智能领域为AI从业者提供专业可信的知识分发服务, 包括主题定制、主题链路、搜索发现等服务,帮你又好又快找到所需知识。


使用方法>>访问www.zhuanzhi.ai, 或点击文章下方“阅读原文”即可访问专知

中国科学院自动化研究所专知团队

@2017 专知

专 · 知

关注我们的公众号,获取最新关于专知以及人工智能的资讯、技术、算法、深度干货等内容。扫一扫下方关注我们的微信公众号。

点击“阅读原文”,使用专知


展开全文
Top
微信扫码咨询专知VIP会员