vr眼球追踪踪技术在VR里到底是一个什么角色

眼球追踪技术窥探观众在VR故事中的情绪变化-微众圈
微众圈,我的微信生活圈!
微信扫一扫阅读
眼球追踪技术窥探观众在VR故事中的情绪变化
摘自公众号:发布时间: 0:26:37
眼球追踪技术窥探观众在VR故事中的情绪变化 新的操作界面将会使用眼-脑连接来推进沉浸式VR故事叙述 在虚拟现实中最大的一个特点就是观众可以自由地看任何方向。但这也是叙述方面最大的问题。故事讲述者如何让观众在自由观看的同时仍然可以有所控制?这篇文章我们来看看Eyeflence公司的眼球追踪软件是如何解决这个问题的。 Eyefluence是一个致力于光学、人工智能、机器改进和机械工程的公司,创建了一个让用户仅通过眼睛就可以与虚拟环境交流的界面。这个创意直接将观看转变成动作。即该软件能够让你使用眼睛就能够做你用手指在智能手机上做的任何事。不需要打字、点击、敲击或者说话。当屏幕出现在你面前,你可以对菜单进行导航,启动应用程序、移动、变焦和滚动,甚至仅通过观看滑动到信息部分。 Eyefluence公司CEO Jim Margraff 除了推动生产力,该眼睛-机器互动应用最吸引人之一是沉浸式故事叙述。眼睛的分神和凝视能够泄露浏览者当时的感觉。Eyefluence软件设计利用这些线索来了解观众什么时候对一个场景感兴趣、为角色着迷或感觉无聊。 Eyefluence的CEO和创始人Jim Marggraff在名叫《眼神的语言》(The Language of Looking)的短片中说:“人的眼睛是身体移动最快的器官。”下面这个视频是年度Future of Storytelling(故事叙述的未来)峰会中的一部分,该峰会将跨学科的创新者聚集到了一起,讨论在数字领域中叙述故事所遇到的挑战。这里,Marggraff解释了沉浸式故事叙述的难点,还有眼神是怎么使用构成界面在虚拟现实中推动故事叙述。 Future of Storytelling 观看完影片后,我采访了Marggraff,找出为什么眼睛对沉浸式故事叙述尤其具有影响力。 "眼神的语言"在VR中是怎样与故事叙述相匹配的? 故事叙述中有许多问题需要应对。我与电影制作人探讨过他们所遇到的挑战。(始于)改变心态,意味着我们要令用户在故事中成为重要的参与者,意味着他们做什么都会在故事弧度中产生结果。这是一个新鲜事物。过去,作为故事讲述者,你想要处于完全控制的状态;你指导(浏览者的)眼睛、他们的心情,以至于他们敏感地感受到故事开展的节奏。本质说来,每个场景都会始终引导他们并管理他们的感情。但是现在,通过重新将用户分类为参与者,当你(令他们)在故事中产生结果,你就给了他们一种自主权。 眼球追踪技术窥探观众在VR故事中的情绪变化 Eyefluence会计算出你接下来会看哪里
关于VR领域一些已知的挑战包括传送、移动和晕眩。而更有意义的是这些挑战在故事发展中保持节奏感觉。如果我让你逃跑,并开始检查角落里的事物,你并不需要了解怎样保持参与,你可以将自己置于一个无聊的位置。我们怎样保持故事流和故事节奏的紧急性?这是可以达到的。软件盯住参与者的言行来决定什么时候需要他们移动,什么时候在故事水平方面传达关键点。那么我们就知道你在哪,你在看什么,你感兴趣的是什么,以及你在哪里丧失兴趣的。我们可以在任何时间里引导你回到故事的情节中来。 眼神为VR挑战提供了什么合适的方法呢? 我们可以通过很多方法来利用你看见了什么,你感觉到什么,你没感觉到的食物,实际改变你周围的事情,在你甚至都不知道的情况下。在深度理解力之下,你的眼睛和大脑怎样接收信息,这些都可以做到。 在大信息空间里,眼镜比任何其它事物的导航速度都更快。例如,在VR环境中,你在头显里有大量的信息,你可以四处观看。我们为你提供许多方法,不仅可以看到一个功能(如信息或浏览器),还可以激活并移动进入一个新的空间。例如,你可以搜索照片并用比以前更快的速度寻找到所需。这是目的和非目的的混合动作,能够通过一个1000个名字的列表实现搜索,用你的眼睛寻找你想要的唯一,而不需要通过滚动、拂动或敲击。眼睛是你身体中移动最快的部位。 但这也与我想称之为“通感”有关--让你的感觉参与进来,结果也非常令人满意。我们从那些说:“系统感觉好像在阅读你的大脑”的人们处得到反馈。并不是的。阅读你的意图,并来源于信号。这是一种新的需要学习的语言。 影片中,你提到了与为虚拟现实故事情节生成角色的VR内容工作室Rival Theory的合作。Eyefluence科技与这些角色合作的方法是什么? 在电影或渲染中的角色中都可以运行;二者都有各自的美丽和挑战。比如Rival Theory渲染的一个角色,也是人工智能的,拥有记忆。他所具有的性格随着你作为参与者的时间发展而进行进化,尤其是与你一起。他认识你并清楚你与他人的关系。当你在沮丧的情境下哭泣时会安慰你。举例来说,如果角色是一个孩子,在攀岩时他最好的朋友掉进了悬崖,因此他失去了最好的朋友,而你看见了这个孩子并安慰他。这个孩子的角色基于与你的眼部交流而形成联系。人工智能形成了他的记忆,并可以随时恢复记忆。建立了你和角色之间的联系。我们知道能够看着某人的力量,看到他们躲避你的盯视,看到当你说话时他们做出眼睛向上的回应。这种联系在之前的媒体中还没有存在过。 本文版权归所有,转载需联系后台,侵权必究。
微信号:oxygentec_cgangs热门推荐:
  【编者按】本文作者黄通兵七鑫易维CEO。
  虚拟现实作为近两年刚刚兴起的行业越来越受到创业者的亲赖,仅仅去年一年,国内宣布进入VR领域的公司就有数百家,其中不乏腾讯、乐视、爱奇艺等互联网巨头。并且大部分从业者都认为2016年将成为VR元年,开始进入高速发展阶段。
  VR之所以备受瞩目,主要因为它可以模拟真实的场景,让人在虚拟的世界里得到感官的满足。随着人们对VR体验诉求的提升,这种感官体验会越来越接近现实的感受,在此过程中眼球追踪技术将成为必不可少的应用模块。目前已有先驱者开始尝试通过眼球追踪技术解决VR领域目前所面临清晰度,沉浸感,自然交互等问题。
  德国的一家眼球追踪技术公司在今年的CES大会上展示注视点渲染技术,国内的眼球追踪技术公司七鑫易维也在近期发布的视频短片中展示了眼球追踪在VR设备上的应用,其中局部渲染的功能将为VR带来一次质飞跃。目前VR硬件厂商所共同面对的问题便是用户的计算机硬件满足不了显示设备高清渲染的需求,以Oculus Rift为例,用户需要配备1000美金以上的计算机才能正常运行, Nvidia GeForce 970或AMD Radeon 290显卡的成本就达300美金,而这还仅仅是渲染1k的分辨率,要让渲染的分辨率匹配现实世界的分辨率,单眼必须渲染8K的分辨率,仅硬件配置这一项,就够厂商头疼的了。
  为了解决这一问题,目前最被认可的方式便是结合眼球追踪的局部渲染技术。
  人眼成像的过程中,中央凹视野(Foveal vision area)成像清晰,只覆盖视野1○~2○,视觉敏锐度高;周边视野(Peripheral vision field)成像是模糊的。
  如图所示,当人眼在看屏幕H时,虽然整个屏幕都可以看到,但是只有B区域额中央凹视野是清晰的, AC区域成像模糊,因此在画面渲染过程中只需要渲染中央凹视野很小的范围,对周边视野区域进行模糊渲染。眼球转动,高清渲染区域随着注视点的变化而变化,这样既可以得到高清的视觉体验,又可降低GPU负荷,从而可以大幅的降低VR设备对硬件的要求。
  除此之外,局部渲染的方案恰好与人眼成像特征相切合,无需人眼去主动适应屏幕,还会避免用眼过度造成的眼疲劳。
  当然除了画面渲染方面,眼球追踪技术还可以大幅度提升VR设备的沉浸感。
  人在观察周围景物时,并不总是要转头。人们习惯用眼球转动(而不是头部转动)去观察或追踪的角度范围叫做EOR(Eye-only range)[1],EOR平均为&18&,垂直与水平方向的EOR有差异,平均水平EOR为&30&,垂直EOR为&12&。
  也就是说,人们习惯通过眼球转动观察水平&30&,垂直&12&角度范围内的画面,而不是转头。但目前基于陀螺仪的交互方式,视角转换全部由头动完成,与现实中人们的习惯相违背,导致真实感缺乏,并且容易眩晕。眼球追踪技术恰好可以解决这一问题:用户可眼动与头动协同控制视角变化,真实重现现实中的视觉效果。同时,通过眼球转动与VR用户界面的交互可以直接用眼控控制菜单,触发操作,让人摆脱不自然的头部操作和晃动的画面。
  眼球追踪技术在VR领域的重要性已经显而易见, Oculus的创始人Palmer Luckey也曾表示,眼部跟踪技术会成为VR技术未来的一个“重要组成部分”。不仅能实现注视点渲染技术,它还能用来创造一种深度传感,以创作出更好的用户界面。
  众所周知光线在穿透透镜过程中会产生折射,所以目前的VR显示设备视角边缘都产生畸变和色差。Oculus正使用适用的光学优势试图修复该问题,但仅凭光学设计并无法完美解决,还需要在软件方面进行反畸变和色散的优化。现在已经有部分产品采用了以镜片中心为准的矫正方案,虽然有所成效,但是当人眼位置与镜片位置发生偏移时,反畸变的效果就会随之减弱。若让反畸变处理结合眼球追踪技术,将矫正方案调整为以人眼注视中心为准而不是镜片中心为准,矫正效果也会大幅提升。
  眼球追踪技术对于VR来说就像鼠标于windows系统一样,它会让体验更完善,使用更方便,更容易被用户接受,虽然在VR设备上成功搭载眼球追踪技术的案例并不多,但是参照目前VR显示方案的快速迭代,可知眼球追踪技术将会成为VR设备最不可或缺的技术模块。
请先登录再操作
请先登录再操作
微信扫一扫分享至朋友圈
专注移动互联网领域的科技博客。雷者,万钧之势;锋者,锐利之...
12145文章数
知名IT评论人,曾就职于多家知名IT企业,现是科幻星系创建人
未来在这里发声。
新媒体的实践者、研究者和批判者。
立足终端领域,静观科技变化。深入思考,简单陈述。
智能硬件领域第一自媒体。涉案的三个来自德阳中江的95后女孩,家境都不算差。
他们刚执行完任务准备返回,还穿着厚重的消防服。
声明:本文由入驻搜狐公众平台的作者撰写,除搜狐官方账号外,观点仅代表作者本人,不代表搜狐立场。
  提起VR领域最重要的技术,眼球追踪技术绝对值得被从业者们密切关注。Oculus创始人帕尔默?拉奇就曾称其为“VR的心脏”。在本期VR+中,我们就一起来聊一聊这项让你和设备“眉来眼去”的技术。
  1 什么是眼球追踪技术?
  眼球追踪是一项科学应用技术,用户无需触摸屏幕即可翻动页面、实现操作。当人的眼睛看向不同方向时,眼部会有细微的变化,这些变化会产生可以提取的特征,计算机可以通过图像捕捉或扫描提取这些特征,从而实时追踪眼睛的变化,预测用户的状态和需求,并进行响应,达到用眼睛控制设备的目的。
  事实上,很多人对这项技术并不陌生。从几年前三星Galaxy S4通过眼球控制视频的暂停和播放,到传言中iPhone7将实现根据眼睛的注视而自动修正文本中的错误词汇,各大厂商从未停止过探索。但说起当下最热衷于研究此项技术的行业,恐怕非VR莫属了。那么,眼球追踪技术究竟给VR带来哪些变革?
  2 眼球追踪技术能带来什么?
  眼球追踪技术能解决晕眩感?至少目前的VR从业者大多这样认为。人看到的东西的成像会根据眼睛距离事物的距离来进行自动适应调整,而我们带上VR眼镜后,眼睛和屏幕的距离是固定的,因此会对眼睛造成一定程度的欺骗,而若屏幕中播放的远距离的场景和近距离场景的切换,眼睛会无法识别,从而导致晕眩。眼球追踪技术可以获知人眼的真实注视点,从而得到虚拟物体上视点位置的景深。所以,眼球追踪技术或将成为解决虚拟现实头盔眩晕病问题的一个重要技术突破。
  先进的眼球追踪技术还能使VR头显呈现出的图像更自然,延迟更小,这都能大大增加可玩性,但前提是必须解决一系列技术难题。
  3 眼球追踪技术需要哪些突破?
  当下,尽管众多公司都在研究眼球追踪技术,但仍然没有一家的解决方案令人满意。
  以瞳孔游移为例,图像在VR中会随着你眼睛的移动而产生畸变,但如果能够根据眼球追踪实时校正,才能够被完全修正。据Palmer Luckey所言,Oculus正使用适用的光学优势试图修复该问题,但依然没有被完美解决,并且离开了眼球追踪技术的话永远无法解决。
  超多维SuperD公司图形图像算法中心主管培云认为,VR的眼球追踪可利用类似tobii眼动仪的设备实现,但前提是解决设备的体积和功耗。举例来说,目前tobii最小尺寸的设备大约有钢笔大小,但用在VR上仍然太大。功耗方面,因为眼动仪需要发射一定功率的红外线。以接在笔记本上的设备为例,使用一段时间后会明显感觉到烫,如要应用在VR头显上面,还应在降低功耗上加深研究。
  事实上,在业内人看来,从眼球追踪技术本身来说,虽然在VR上有一些限制,但可行性还是比较高的,比如外接电源、将VR的结构设计做的更大等。但更大的挑战在与通过调整图像来适应眼球的移动,这些图像调整的算法目前来说都是空白的。有两个指标,一是图像自然真实,二是快速延迟小。这对VR+眼球追踪提出了更高的要求,如果达到这两点,VR的可玩性会再提高一个档次。
欢迎举报抄袭、转载、暴力色情及含有欺诈和虚假信息的不良文章。
请先登录再操作
请先登录再操作
微信扫一扫分享至朋友圈
搜狐公众平台官方账号
生活时尚&搭配博主 /生活时尚自媒体 /时尚类书籍作者
搜狐网教育频道官方账号
全球最大华文占星网站-专业研究星座命理及测算服务机构
超多维创立于2004年,致力于发展裸眼3D显示技术,已获得...
主演:黄晓明/陈乔恩/乔任梁/谢君豪/吕佳容/戚迹
主演:陈晓/陈妍希/张馨予/杨明娜/毛晓彤/孙耀琦
主演:陈键锋/李依晓/张迪/郑亦桐/张明明/何彦霓
主演:尚格?云顿/乔?弗拉尼甘/Bianca Bree
主演:艾斯?库珀/ 查宁?塔图姆/ 乔纳?希尔
baby14岁写真曝光
李冰冰向成龙撒娇争宠
李湘遭闺蜜曝光旧爱
美女模特教老板走秀
曝搬砖男神奇葩择偶观
柳岩被迫成赚钱工具
大屁小P虐心恋
匆匆那年大结局
乔杉遭粉丝骚扰
男闺蜜的尴尬初夜
客服热线:86-10-
客服邮箱:涉案的三个来自德阳中江的95后女孩,家境都不算差。
他们刚执行完任务准备返回,还穿着厚重的消防服。
声明:本文由入驻搜狐公众平台的作者撰写,除搜狐官方账号外,观点仅代表作者本人,不代表搜狐立场。
  眼睛可以为我们做很多事情,比如让我们看到旖旎的风景,漂亮的美女,传达我们的内心情绪,当然这些都是不需要依靠技术就能够做到的事情。
  随着技术的进步,我们现在已经能够利用人类眼睛进行虹膜识别,虹膜识别相较面部识别、指纹识别都更加有效和安全,三星已经在Note 7上面采用这项识别技术,不过这款手机已经停售。不出意外的话,明年的Galaxy S8也将拥有虹膜识别功能。
  除了虹膜识别之外,还有眼球追踪技术。所谓眼球追踪,是指一项技术能够追踪眼球的运动,并利用这种眼球运动来增强某个产品或服务的体验。
  眼球追踪曾被错用在手机上,怪我咯
  眼球追踪技术曾经在智能手机领域火了一阵,这可能要追溯到2013年Galaxy S4手机率先搭载了眼球追踪功能,这项功能主要应用在视频播放上面。举个例子,如果你正在观看一个视频,然后你身后的同学拍了一下你肩膀,在你转过头的时候,由于你的眼睛已经不再看着屏幕,视频会自动暂停,而当你回过头来,视频会自动继续播放。不需要你用手去点击暂停和播放;或者你在手机上看网页,当你眼睛看到屏幕底部的时候,网页会自动翻页。同年,LG也推出了一款拥有眼球追踪功能的LG Optimus G Pro手机。
  可惜,眼球追踪未能在手机领域掀起大风大浪,原因大概有两点。首先用户没有需求,一款智能手机的平均尺寸大约只有5英寸,在这么一丁点儿大的地方,人们更喜欢直接用手指进行交互,何况手机绝大部分功能都是使用手指进行交互,所以也不多播放/暂停这个环节;第二个原因就是,当时技术不太成熟,分辨率低,识别不够精准,导致有用户觉得眼睛累。
  VR/AR:眼球追踪快到我碗里来
  手机:1080p屏幕已经非常足够,2K就剩了
  VR/AR:1080p就是个渣渣,2K是基本的
  手机:处理器四核就好啦,上八核的神经病啊
  VR/AR:尽管上吧,处理器性能只有不够用,不会剩余
  手机:这么大点儿屏幕,10根手指日夜不停的摸,眼球追踪你走错地儿了吧?
  VR/AR:眼球追踪快到我碗里来
  和眼球追踪在手机上略显得有点鸡肋不同,这项技术对VR/AR来说是一个关键性技术。VR需要给用户营造沉浸感,AR要营造虚拟和现实混合的真实感。眼球追踪技术的应用,正好能够满足它们的需求。
  第一,眼球追踪能够实现注视点渲染。当前VR和AR普遍使用全局渲染,也就是说,VR或AR的内容全部都被使用同一个标准渲染,无论是焦点视线内的还是余光之中的。这不符合我们人类的观看方式。
  而有了眼球追踪技术,VR和AR便能够实现局部渲染,实时注视点渲染,将你的目光所到之处渲染,目光之外的保留虚化、模糊,和真实的人眼体验一样。
  第二,在普通VR体验中,VR画面有时候会由于你眼球的移动而产生畸变。如果这个时候有眼球追踪功能干预,进行实时追踪,那么这种畸变便能够得到修复。
  第三,解放双手,实现更好的交互。当前我们与VR交互的时候需要使用手柄,或者其他VR手套等工具。有了眼球追踪功能,我们可以使用眼球的运动来进行交互,比如当你的眼睛看着一扇门的时候,门可以自动打开,那么我们就不需要使用手柄或者手套。或者在使用VR用户界面的时候,我们也可以直接使用眼睛操作。
  第四,减少眩晕感。为了解决VR的晕动症,我们没少花心思,除了提升屏幕分辨率、刷新率之外,还要考虑定位追踪、身体和首部的虚拟以及环境的连续性等等一堆。尽管如此,我们依旧无法彻底解决晕动症问题,依然是路漫漫其修远兮,眼球追踪技术的加入,或许能够帮助进一步减少晕动症。
  我们戴上了VR,眼睛和屏幕之间的距离已经被固定,视频中的远近场景切换眼睛难以识别,这会加重眩晕感。因为,在现实中,人的眼睛能够瞬间在千里之外和眼前做切换,能够根据距离自动调整。如果在VR中加入眼球追踪,它能够捕捉我们目光焦点,创造更加自然的景深环境,有助于减少晕动症。
  谁家有牛逼的眼球追踪技术?
  1、Eyefluence眼球追踪技术
  第一个我们先点名刚刚被谷歌收购的眼球追踪公司Eyefluence。
  Eyefluence是一家美国科技初创公司,今年8月份宣布将会在未来VR中应用眼球追踪技术。10月份,这家公司成功被谷歌收购。
  这家公司的眼球追踪也可以实现注视点渲染,从而减少计算方面的读取约60%的速度。另外,Eyefluence的技术其独特之处在于,它不仅能检测眼球的运动,还能检测瞳孔的扩张――如此一来还能实现某种程度上对人情绪的检测。
  Eyefluence家的眼球追踪技术可自然地动动眼睛将意识转化为动作。操作起来像走路或说话那样自然,用户不必盯着物体激活它们,操作交互发生的速度只会受到思考和观看的速度影响。
  日前,有消息称,Magic Leap将使用Eyefluence眼球追踪技术。谷歌砸了巨资投资这家MR公司,看来,它十有八九会使用Eyefluence。
  2、SMI眼球追踪技术
  第二个响当当的人物是SMI,SMI是一家德国科技公司,其眼球追踪技术已经被应用在三星Gear VR上。这家公司还曾经为Oculus DK2和HTC Vive开发眼球追踪套件。
  SMI眼球追踪主要能够实现的功能是注视点渲染,关于这一点我们上面已经说过,就不再重复了。SIM眼球追踪技术的使用,不仅可以实现注视点渲染,还能够减少VR对GPU的消耗,因为它极大地减少了GPU的VR画面渲染量,使性能较弱的移动GPU也能提供高分辨率的VR图像,或是减少PC VR设备的数据传输量,实现无线VR连接。
  3、FOVE眼球追踪技术
  和Oculus一样,Fove也是众筹起家,其开发拥有眼球追踪技术的VR设备Fove通过众筹获得关注,并于今天(11月2日)开启了预售。
  据了解,FOVE 在头显镜片下方,嵌入了两个红外摄像头,可以通过反射的光线,计算眼睛倾斜的角度,从而追用户瞳孔活动,并且还能够进行视线校准。用户的视点被追踪后,GPU图像处理器能够对其专门进行渲染,在虚拟现实中实现景深效果,其实和上面两种眼球追踪技术差不多。
  随着产品开启预售,Fove的具体参数和PC配置要求都已经公布:
  OVE0 的参数:
  显示屏帧率:70HZ
  视场角:90度至100度
  追踪传感器:头部追踪和位置追踪
  眼球追踪传感器:两个120fps的红外追踪系统,追踪精度小于1度
  重量:520g
  连接接口:HDMI 1.4 / USB 3.0 / USB 2.0
  在PC配置房间,尽管FOVE采用自家先进的眼球追踪设备,但它并没有降低对显卡的要求,最低和HTC Vive等设备一样为GTX 970或AMDRadeon R9 290,CPU则最低要求英特尔Core i5-4590,RAM在8GB以上,Windows 8.1或Windows 10系统都需要64位。
  好了,今天关于VR/AR眼球追踪技术的探讨就先聊到这儿了,我们在此只是抛砖引玉,欢迎大家积极在评论中发表自己的看法。
  国内人气最旺VR网站:;
  这里有VR虚拟现实讨论、VR游戏、VR影视内容;
  欢迎关注高清范官方微信:hdpfans_com。
欢迎举报抄袭、转载、暴力色情及含有欺诈和虚假信息的不良文章。
请先登录再操作
请先登录再操作
微信扫一扫分享至朋友圈
搜狐公众平台官方账号
生活时尚&搭配博主 /生活时尚自媒体 /时尚类书籍作者
搜狐网教育频道官方账号
全球最大华文占星网站-专业研究星座命理及测算服务机构
高清范是家庭数字娱乐第一媒体,运营知名论坛高清范HDPfa...
主演:黄晓明/陈乔恩/乔任梁/谢君豪/吕佳容/戚迹
主演:陈晓/陈妍希/张馨予/杨明娜/毛晓彤/孙耀琦
主演:陈键锋/李依晓/张迪/郑亦桐/张明明/何彦霓
主演:尚格?云顿/乔?弗拉尼甘/Bianca Bree
主演:艾斯?库珀/ 查宁?塔图姆/ 乔纳?希尔
baby14岁写真曝光
李冰冰向成龙撒娇争宠
李湘遭闺蜜曝光旧爱
美女模特教老板走秀
曝搬砖男神奇葩择偶观
柳岩被迫成赚钱工具
大屁小P虐心恋
匆匆那年大结局
乔杉遭粉丝骚扰
男闺蜜的尴尬初夜
客服热线:86-10-
客服邮箱:自动永久100%返利
扫码关注微信公众号
您当前的位置 :
> 对VR来说 眼球追踪技术在里面到底是一个什么角色
虚拟现实作为近两年刚刚兴起的行业越来越受到创业者的亲赖,仅仅去年一年,国内宣布进入VR领域的公司就有数百家,其中不乏腾讯、乐视、爱奇艺等互联网巨头。并且大部分从业者都认为2016年将成为VR元年,开始进入高速发展阶段。VR之所以备受瞩目,主要因为它可以模拟真实的场景,让人在虚拟的世界里得到感官的满足。随着人们对VR体验诉求的提升,这种感官体验会越来越接近现实的感受,在此过程中眼球追踪技术将成为必不可少的应用模块。目前已有先驱者开始尝试通过眼球追踪技术解决VR领域目前所面临清晰度,沉浸感,自然交互等问题。德国的一家眼球追踪技术公司在今年的CES大会上展示注视点渲染技术,国内的眼球追踪技术公司七鑫易维也在近期发布的视频短片中展示了眼球追踪在VR设备上的应用,其中局部渲染的功能将为VR带来一次质飞跃。目前VR硬件厂商所共同面对的问题便是用户的计算机硬件满足不了显示设备高清渲染的需求,以Oculus Rift为例,用户需要配备1000美金以上的计算机才能正常运行, Nvidia GeForce 970或AMD Radeon 290显卡的成本就达300美金,而这还仅仅是渲染1k的分辨率,要让渲染的分辨率匹配现实世界的分辨率,单眼必须渲染8K的分辨率,仅硬件配置这一项,就够厂商头疼的了。为了解决这一问题,目前最被认可的方式便是结合眼球追踪的局部渲染技术。人眼成像的过程中,中央凹视野(Foveal vision area)成像清晰,只覆盖视野1○~2○,视觉敏锐度高;周边视野(Peripheral vision field)成像是模糊的。如图所示,当人眼在看屏幕H时,虽然整个屏幕都可以看到,但是只有B区域额中央凹视野是清晰的, AC区域成像模糊,因此在画面渲染过程中只需要渲染中央凹视野很小的范围,对周边视野区域进行模糊渲染。眼球转动,高清渲染区域随着注视点的变化而变化,这样既可以得到高清的视觉体验,又可降低GPU负荷,从而可以大幅的降低VR设备对硬件的要求。除此之外,局部渲染的方案恰好与人眼成像特征相切合,无需人眼去主动适应屏幕,还会避免用眼过度造成的眼疲劳。当然除了画面渲染方面,眼球追踪技术还可以大幅度提升VR设备的交互体验。用户通过眼球转动与VR用户界面的交互可以直接用眼控控制菜单,触发操作,让人摆脱不自然的头部操作。眼球追踪技术在VR领域的重要性已经显而易见, Oculus的创始人Palmer Luckey也曾表示,眼部跟踪技术会成为VR技术未来的一个“重要组成部分”。不仅能实现注视点渲染技术,它还能用来创造一种深度传感,以创作出更好的用户界面。众所周知光线在穿透透镜过程中会产生折射,所以目前的VR显示设备视角边缘都产生畸变和色差。Oculus正使用适用的光学优势试图修复该问题,但仅凭光学设计并无法完美解决,还需要在软件方面进行反畸变和色散的优化。现在已经有部分产品采用了以镜片中心为准的矫正方案,虽然有所成效,但是当人眼位置与镜片位置发生偏移时,反畸变的效果就会随之减弱。若让反畸变处理结合眼球追踪技术,将矫正方案调整为以人眼注视中心为准而不是镜片中心为准,矫正效果也会大幅提升。眼球追踪技术对于VR来说就像鼠标于windows系统一样,它会让体验更完善,使用更方便,更容易被用户接受,虽然在VR设备上成功搭载眼球追踪技术的案例并不多,但是参照目前VR显示方案的快速迭代,可知眼球追踪技术将会成为VR设备最不可或缺的技术模块。
近期热点回顾
本周手游推荐

我要回帖

更多关于 vr眼球追踪模组 的文章

 

随机推荐