列王的纷争-深度传感器已被巨头瓜分?

时间:2021-10-28 07:39:46
origin: http://mt.sohu.com/20170325/n484729546.shtml
我们常常说苹果富可敌国。但是你这么说其实是在侮辱苹果。苹果可比美国*有钱多了。根据最新消息,美国*账上的现金,只有340亿美元。还不到库克掌管下的苹果的零头。库克手上可是有着2460亿美元的巨款。也就是说,库克大叔抬抬眼角,都可能造成一个行业的兴衰。最近库克大叔在清华大学谈到AR技术的发展时,表示对这项技术非常感兴趣,并且他已经翻了深度传感器这项技术的牌子。今年秋季应该就会随着iPhone8 上市了。一向擅长将技术概念进行推广的苹果公司,是不是又将引爆手机AR领域或许还是个未知数,但至少已经引爆了深度传感器领域。

  Depth sensor is the new sexy

  不过苹果并不是第一个吃螃蟹的人,在3D深度传感器的硬软件方面,各路大神早已经有所动作。微软拥有深度传感器Kinect;苹果收购了深度传感器PrimeSense,并且收购了FaceShift和 Metaio这两项软件技术;索尼收购了利时传感器技术公司Softkinetic Systems SA;谷歌收购了Lumedyne Technologies,掌握了光学加速度计、振动能量采集器、基于时域相应的惯性传感器等传感技术;Facebook收购了Oculus平台,并在软件上收购Surreal Vision,在室内三维重建领域处于领先的位置。

  扫盲班

  此外,国内厂商也正在积极跟进这一领域。

  首先简单说一下3D成像是什么

  目前的手机摄像头光学升级一直停留在像素、感光等二维层面,不具备像人眼这样的3D空间识别能力,摄像头看到的世界是一个平面。这样一来手机AR就得严重依赖于GPS地图定位和特定的物品图案。然而当配备了深度传感器之后,就给了设备感知空间的能力,就能利用摄像头捕捉动作、实现深度传感。这在AR的人机交互上扮演着至关重要的角色。


  今年各大手机厂商将致力于推出具有3D感知能力的旗舰手机,除了已经发货的联想 Phab pro 2,三星,华为,等都有传闻在进行着带3D深度传感器的手机的开发。实现3D成像手机领域的商用。

  技术方面已经有相当多的介绍了,比如红外线TOF,结构光(Structured Light),TOF。今天我们主要介绍,在这个大手机AR时代开启前,各方*的暗流涌动。

  列王的纷争

  微软Kinect

  微软恐怕是在3D成像领域深耕最久的企业了,早在2009年微软就公布了该技术,代号为"Project Natal"。因为旗下游戏主机XBOX有支持体感游戏功能的必要,为了对人体动作进行捕捉和成像,微软开始了相关研究。到目前为止Kinect技术已经相对比较成熟。

列王的纷争-深度传感器已被巨头瓜分?

  第一代Kinect系统的摄像头,采用PrimeSense(之后2013被苹果收购)的结构光技术。通过CMOS红外传感器感知周围环境,利用离散光斑。将这样的一维或二维的图像投影至被测物上,根据图像的大小畸变,就能判断被测物的表面形状即深度信息。在微软Kinect的体 感识别与动作捕捉过程中,Kinect的三个摄像头极为关键,一个彩色摄像头提供了彩色图像;两个红外摄像头通过发射/接收红外线,来提供深度数据。图案大致是这样:

列王的纷争-深度传感器已被巨头瓜分?

  第二代Kinect运用的是TOF方案:发射一个强度随时间周期变化的正弦信号,通过获得发射、接受信号的相位差来计算深度,从而获得较高的精度。但是随之而来的问题是体积很大难以缩小,计算量大,功耗大。这两种共有的问题是会受带有红外线的光源干扰。

  摄像头是体感识别的重要载体,微软的交互方案是3D深度识别的典型代表。据消息称微软或将发布手机“Surface Phone”,微软的手机会不会趁着这波AR潮流,装配自家技术成熟的3D成像技术呢?这个猜测实现的可能性很大。

列王的纷争-深度传感器已被巨头瓜分?

  苹果PrimeSense

  2013 年苹果公司以3.45亿美元的价格收购了以色列传感器公司 PrimeSense。这项收购是苹果公司史上最大手笔的收购之一。上文中提到了,Kinect一代中应用过的结构光技术就出自Primesense,早在2010年PrimeSense就和微软有过合作研究,对这一领域也是轻车熟路。

  2012 年,PrimeSense 推出了当时世界上体积最小的 3D 传感器 Capri,其分辨率是前代产品的 3 倍,而体型仅为前代的十分之一,环境光的检测性能则是前代的 50 倍。自从收购 PrimeSense 后,苹果一直在推动 PrimeSense 的 3D 体感控制器向小型化发展,不出所料的是,其小型化的终极目标之一是将之用到 iPhone 上,提供更好的人机交互。结构光虽然在体感游戏的精度方面不如TOF方案,但是好在结构光功耗相对较低,短距离精度较高,比TOF器件能做的更小。


  除了硬件,在软件方面苹果还收购了Metaio,该公司是一家2003年由大众的一个项目衍生出来的一家虚拟现实初创公司,专门从事增强现实和机器视觉解决方案。Metaio的Metaio Creator让用户使用iPad等现有的设备能够获得沉浸式互动体验。

  谷歌Project Tango

  Tango在谷歌已存在4年时间,2013年初谷歌的ATAP(先进科技与计划)团队就已开始着手相关的研发。Project Tango的技术主要是利用传感器和摄像头对室内进行3D建模,除此之外还能有更多方面的的应用比如绘制3D地图,为盲人导航等。


  在手机3D成像应用领域谷歌也是走在最前列的,早在2014年2月,Project Tango的原型机就已经亮相。其3D感知基于Primesense的结构光方案,但是由于种种技术限制导致系统的尺寸、重量和散热都无法做到一个真正的手机中去。


  第二代手机就是跟联想一起发布的Phab2 Pro智能手机,Tango部分的整体构架弃用结构光,采用了英飞凌的REAL3?传感器。第一次采用了TOF深度检测技术,在整体的功耗、整机尺寸和Tango Core上都做了深度的优化。这款6.4英寸的平板手机拥有三颗摄像头,包括一颗鱼眼镜头和一颗红外传感器,从而实现大量的增强现实应用。


  索尼Softkinetic Systems SA

  2015年10月9日,索尼宣布收购Softkinetic Systems SA,这家公司成立于2007年,是一家专注通过图像传感器呈现3D视觉效果的技术公司。该公司拥有成熟的TOF技术,可通过图形传感器测量与一个指定物体之间的距离。

  Softkinetic Systems SA拥有全世界最小带精细化手势识别功能的 3D深度摄像头,除了手机外索尼也会将3D深度感知技术应用于体感游戏中。


  英特尔RealSense

  RealSense 3D是一套感知计算解决方案,包括世界上最小的3D摄像头,模块比两个硬币摞起来还薄,除了硬件外,英特尔还将提供驱动及软件等全套开发工具,开发者可以*开发应用。Real Sense 3D配有深度传感器和全1080p彩色镜头,能够精确识别手势动作、面部特征、前景和背景,进而让设备理解人的动作和情感。

  虽然英特尔没有做手机的计划,但是通过收购Movidus,他们已经有了和谷歌Project Tango在手机深度传感器方面的合作经验。并且他们还投资了Occipital。原理上和微软的 Kinect类似,但是不同于Kinect 的全身骨骼跟踪,realsense 更注重近距离的脸部、手部跟踪。

  目前来看其特性是体积小,功能简单,但是精度也相对较差。


  至此,比较有名的3D传感器公司已经被巨头们抢购得差不多了。

  国内厂商

  奥比中光,图漾还有乐行天下是国内少数在进行深度传感器研发的公司。2015年7月,奥比中光自主研发的3D芯片流片成功量产。这也使得奥比中光成为国内不多的已经开始同类设备量产的高新技术企业。但目前国内厂商的产品仍然体积较大,能够用于手机的现成产品似乎还没有看到


  传感器技术的研究需要比较长时间的投入,一款传感器的研发,要6年-8年才能成熟,一般中国企业都承受不了这么长的周期。中国企业更难以承受失败,而传感器的研究失败的风险很高。所以没有雄厚财力支撑,没有科研人员长期投入在3D传感器方面是很难有所作为的。目前国内厂商大都抱着直接引进国外先进技术的想法,故而在技术研发上面没有更多进展。

  总结

  科技界的大佬们已经在手机3D成像领域做好了行军的准备。联想Phab2 Pro已经发布了手机。今年即将发布的iPhone 8似乎也吹响了其他手机巨头进军混战的号角。而目前任然保持独立的深度传感器公司似乎却已称为了稀缺资源。可以预见的是,手机AR时代即将到来。