详解Oculus-Rift的主动式光学定位技术.docxVIP

详解Oculus-Rift的主动式光学定位技术.docx

  1. 1、本文档共7页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  5. 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  6. 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  7. 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  8. 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多

??

?

??

详解OculusRift的主动式光学定位技术

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

?

?

2016,VR元年,oculus、HTC、索尼等这样的重量级厂商纷纷推出或宣布了自己的消费级硬件产品来抢占消费者市场,相信广大VR爱好者们中的很多人都已经入手了一款虚拟现实设备。在这些硬件当中,OculusRiftCV1(以下简称“CV1”)无疑是最受人瞩目的硬件产品之一,毕竟它有2014年拿了Facebook20亿美金这样的大事件撑腰。

众所周知,OculusRift采用的是主动式光学定位技术,那它到底是如何实现的呢?

(via:)

基本实现流程:

OculusRift设备上会隐藏着一些红外灯(即为标记点),这些红外灯可以向外发射红外光,并用红外摄像机实时拍摄。获得红外图像后,将摄像机采集到的图像传输到计算单元中,通过视觉算法过滤掉无用的信息,从而获得红外灯的所在方向,再利用PnP算法,即利用四个不共面的红外灯在设备上的位置信息、四个点获得的图像信息即可最终将设备纳入摄像头坐标系,拟合出设备的三维模型,并以此来实时监控玩家的头部、手部运动。

注:具体可看如下图,注意上面这些红色的小点点。

接下来我将向大家介绍一下我的推理过程,以及算法的一些细节。

|头显上的LED灯

前文中我提到我们需要利用四个不共面的红外灯在设备上的位置信息来进行定位,而如果想要知道不同的红外灯在设备上的位置信息,就必须能够区分不同的红外灯。

为什么这么说呢,如果不区分红外灯,那么当DK2(注:特指头显)在空间中运动时,摄像机捕捉到光点后,要进行关联(姿态最优匹配的过程)的次数会非常大,举个列子:

1)如果有N预测图像点和M《=N观察图像点,则有N!/(N-M)!可能的关联

2)对于N=40和M=20(对DK2LED的数量),有3.3TImes;1029的关联,所以就算是计算机,也无法快速地得到结果。

很显然,DK2一定是采用了某种先验的方式区分光点。那么问题来了,DK2到底是如何区分的呢?

我曾看到有文章中猜测说DK2是通过LED灯的亮灭来区分的,实际上却并非如此。因为虽然通过LED灯的亮灭来区分比较简单,因为亮灭最容易区分出来,但是这种方法有个缺陷,就是无法区分是姿态改变导致的LED灯被遮挡,还是LED灯本身就熄灭了,所以,DK2没有使用这个方法,而是采用LED灯光信息的强弱来实现的。我们来观察用灰度摄像机拍摄的图:

对比上面两图,可以发现亮斑的大小有变化。可以看出红色部分,在图2时光斑更大,蓝色则相反。接下里我们看详细的做法。这里必须说一下,在推测具体的做法过程中,我曾误以为DK2直接判断光斑大小,然后根据多帧图像的规律来判断LED灯的ID,但实际上DK2是使用差分法来判断光斑大小。我在这里简单给大家介绍一下我的推理过程。

首先我用自己的摄像机拍摄了大量照片进行观察后发现如果把摄像机用60HZ左右频率拍摄,图像每10张就会开始重复。

我先给光点编个号,如下图:

比如,2号点的可以用肉眼识别的强弱顺序:弱,弱,强,强,弱,强,弱,弱,弱,强。

那么是不是这样呢?如何在DK2中表示这些强弱关系呢?

首先,已知SDK的windows的driver会发送一个开始信息,让头显开始运作;

紧接着,这个driver就会不断接收到下面信息:

X1X2X3X4是1个32位数,是图像分析后得到的空间坐标(原理后面给大家解释),DX则不知道干什么用,但是观察上面的num,换算出来是40,index从1开始,不断递增到40,说明DK2在一个一个的识别LED灯,另外,这些信息每17ms左右发上来一次,和60HZ的拍摄频率差不多,基本上可以认定是利用每10帧确定一个LED的方式。

为了完全确定这一点,还必须确定另一个问题:同步。

如果真的是LED通过10帧不同的变化来让摄像机确定LED灯的ID,那么必须要同步。

这要求一个同步信号能同时传给摄像机和头显,如果能了解同步的时机,就知道到底是不是60HZ的频率了。

可是当我看了MT9V034的资料后发现居然拍摄的频率是30HZ左右,不过细想一下,如果使用差分检测发,使用30HZ这个频率也能拍摄出光强的变化。也就是说,DK2根本不是直接判断光斑是大还是小,而是将当前帧的光斑与上一帧同一个光斑做对比,如果比之前大,则为大,反之则为小。那么当一个新的帧到达时,该算法首先提取帧的亮像素斑点,如下图。忽略少于10个像素或不是圆盘状的,最后确保所有的斑点来自前一帧中提取的大圆盘状斑点,然后进行对比。

所以,DK2将

文档评论(0)

李颖 + 关注
实名认证
文档贡献者

是个美女

1亿VIP精品文档

相关文档