孙俪7例感染者曾去张家界 多地提醒

扫一扫关注微信二维码 动物世界
教育装备采购网
长春智慧学校体育论坛 图书馆论坛580*60

OptiTrack手指追踪助“脸书”VR无键盘输入

教育装备采购网 2020-07-22 15:17 围观0次

OptiTrack手指追踪助“脸书”VR无键盘输入

  Touch Type in VR Without Physical Keyboards

  Facebook研究实现

  VR世界中无实体键盘打字

OptiTrack手指追踪助“脸书”VR无键盘输入

OptiTrack手指追踪助“脸书”VR无键盘输入

  虚拟现实(shi)

  Virtual Reality

OptiTrack手指追踪助“脸书”VR无键盘输入

Credit: immersivelearning.news

  当VR和(he)AR不(bu)再(zai)(zai)局限(xian)于(yu)娱乐(le)活(huo)动,当人们可(ke)以在虚拟现实(shi)中办(ban)公、双手(shou)直接操(cao)控系统界(jie)(jie)面和(he)网页,同时实(shi)时可(ke)以看见头显外(wai)真实(shi)世界(jie)(jie)的情况——上班将变得不(bu)再(zai)(zai)枯燥,一切操(cao)作(zuo)都会更加趣味。心(xin)动吗?一起来看看未来的办(ban)公场(chang)景有多酷!

  视频介(jie)绍了Facebook正(zheng)为Oculus Quest研发的AR办公功能Infinite Office。基于AR透视和键盘(pan)定位,在虚(xu)拟办公世界(jie)中,通过触(chu)碰真实世界(jie)中的键盘(pan),使用者可(ke)以(yi)在虚(xu)拟现实中进行快(kuai)速输(shu)入。

  前不久,Facebook’s Reality Labs(FRL)公布了一项手部追踪的(de)新研究,旨在为AR/VR用户带来(lai)无需真(zhen)实键盘的(de)全虚(xu)拟(ni)输入。

  机器学习

  Machine Learning

  在虚拟现实(shi)世(shi)界中(zhong)实(shi)现无实(shi)物盲打对于研发(fa)人员无疑(yi)是一件极具挑战的事,缺少了物理键盘(pan)的触(chu)摸(mo)感和力反(fan)馈,使用者(zhe)打字准确性(xing)会相(xiang)对下降。为解决(jue)这(zhei)一问题,研究(jiu)人员开始了复(fu)杂的机器训(xun)练(lian)。

  机(ji)器学习(xi)简单来说可(ke)总结(jie)为(wei)如下流程(cheng):

1

确认机器学习目标

2

获取数据(ju)并评估是(shi)否符(fu)合(he)训练测试标准

3

清洗数据并建模(mo)

4

导入训(xun)练(lian)数据,训(xun)练(lian)模(mo)型

5

模型诊断与调优

6

导入验证(zheng)数据,验证(zheng)模型并分析(xi)误差(cha)

7

模(mo)型(xing)融合(he) (后端)

8

使(shi)用原生新数据进行测试(shi)

  在数据收集一环,对于虚拟世界中无实物盲打的研究,Facebook FRL需要收集大量人类打字时的习惯手势数据。为获取这些数据,FRL使用了高精度的手势追踪系统,这套系统由OptiTrack运动捕捉摄像机、定制的动捕手套及Motive运动捕捉软件等构成。

OptiTrack手指追踪助“脸书”VR无键盘输入

Credit: immersivelearning.news

  数(shu)据收集过程(cheng)中(zhong),操(cao)作(zuo)台(tai)上方安(an)装有(you)(you)OptiTrack运(yun)动(dong)(dong)捕捉(zhuo)(zhuo)摄像机(ji),研究人员需佩戴(dai)VR头显、手(shou)戴(dai)附有(you)(you)标记点(dian)的(de)(de)运(yun)动(dong)(dong)捕捉(zhuo)(zhuo)手(shou)套,坐在平面操(cao)作(zuo)台(tai)前(qian)。打(da)字(zi)时研究人员可以从VR头显中(zhong)看见自己的(de)(de)双手(shou)和虚拟键盘,并进(jin)行输入操(cao)作(zuo),此(ci)时运(yun)动(dong)(dong)捕捉(zhuo)(zhuo)摄像机(ji)对其打(da)字(zi)时的(de)(de)手(shou)部动(dong)(dong)态(tai)进(jin)行高精(jing)度(du)捕捉(zhuo)(zhuo),并将(jiang)这些(xie)历(li)史(shi)运(yun)动(dong)(dong)捕捉(zhuo)(zhuo)数(shu)据传输至(zhi)电脑以供后(hou)期(qi)人员手(shou)动(dong)(dong)进(jin)行数(shu)据筛选和清洗。

  Facebook研究人员(yuan)说道:“结合语言(yan)模型进(jin)行(xing)训练,机器可以预测人们在(zai)(zai)手势不明(ming)确的(de)情况下(xia)想(xiang)要输入的(de)内容。使用(yong)这种(zhong)新方(fang)法,在(zai)(zai)任(ren)意一个平(ping)面上(shang),打(da)(da)字(zi)员(yuan)在(zai)(zai)无(wu)键(jian)盘(pan)输入的(de)情况下(xia)平(ping)均每分钟(zhong)可打(da)(da)73个单词,取得了与物(wu)理键(jian)盘(pan)输入相同的(de)速度和准确性,未修正错误(wu)率仅为2.4%。”

  由(you)于Oculus Quest和Quest 2已经可以实现AR交互,这(zhei)意味着用户可以通过头显(xian)外部的(de)摄(she)像头摄(she)录,实时在VR头显(xian)中看到真实世界中自己的(de)双(shuang)手。

OptiTrack手指追踪助“脸书”VR无键盘输入

Credit: immersivelearning.news

  也正是基于此性能,相信(xin)在不久的将来,在机器被训练(lian)到足(zu)够应(ying)对普通(tong)用(yong)户(hu)日(ri)常打(da)字需(xu)求的程度时,通(tong)过VR头显(xian)外部的摄像头捕(bu)捉用(yong)户(hu)手势(shi)动作(zuo)(zuo),头显(xian)可有效预(yu)测(ce)该用(yong)户(hu)即(ji)将输(shu)入(ru)的文字,就像目(mu)前Oculus Quest和Quest 2一样(yang)。脱离了实体(ti)键(jian)盘后,由于已(yi)进行(xing)(xing)了大(da)量的输(shu)入(ru)手势(shi)学习,机器的输(shu)入(ru)精准度会大(da)幅提高,而且用(yong)户(hu)在任何平面都(dou)可进行(xing)(xing)触摸(mo)输(shu)入(ru),不再需(xu)要真实键(jian)盘作(zuo)(zuo)为输(shu)入(ru)载体(ti)。

OptiTrack手指追踪助“脸书”VR无键盘输入

Credit: immersivelearning.news

  这项基于OptiTrack手部(bu)追踪的(de)虚(xu)拟(ni)现实(shi)输入(ru)研究仍在进(jin)行当中,随着时间推移,机(ji)器训练的(de)程度(du)加深,VR世界中的(de)输入(ru)将(jiang)更加人(ren)性化、高效和(he)(he)精(jing)准。也(ye)许不(bu)久的(de)将(jiang)来,当我(wo)们(men)戴上VR头显进(jin)入(ru)虚(xu)拟(ni)世界中时,即可脱离任何实(shi)物载(zai)体(ti)自由操作系统、高效输入(ru)文本,进(jin)行日常工作和(he)(he)娱乐活动。科幻电影中的(de)虚(xu)拟(ni)现实(shi)时代下的(de)场景已初见苗(miao)头,这无疑是件(jian)令人(ren)格外兴奋和(he)(he)憧憬(jing)的(de)事。

点击进入北京欧雷新宇动画科技有限公司展台查看更多 来源:教育装备(bei)采购(gou)网 作者:北京欧雷新宇动画(hua)科技有限公司 责任(ren)编辑:逯红栋
2021全国教育装备云展会650*100

相关阅读

  • OptiTrack在VR领域的应用

    OptiTrack在VR领域的应用
    教育(yu)装(zhuang)备(bei)采购网08-11
    GDC(游戏开发者大会)上的OptiTrack展示了他们跟踪技术的演示,该技术能够实时准确地同时跟踪数百个对象。对于那些使用VR构建户外应用的人,OptiTrack现...
  • 欧雷助力山东传媒职业学院搭建Optitrack动作捕捉

    欧雷助力山东传媒职业学院搭建Optitrack动作捕捉
    教(jiao)育装(zhuang)备采(cai)购(gou)网09-05
    北京欧雷新宇动画科技成立于2007年,是国内VR虚拟现实、影视动漫制作整体解决方案供应商。致力于国内VR、影视、动漫、游戏等产业软硬件产品研发、生产...

版权与免责声明:

① 凡本(ben)网(wang)(wang)(wang)注(zhu)明"来(lai)源:教育(yu)装(zhuang)备(bei)(bei)采购(gou)网(wang)(wang)(wang)"的(de)所有作品(pin)(pin),版(ban)权均(jun)属于教育(yu)装(zhuang)备(bei)(bei)采购(gou)网(wang)(wang)(wang),未(wei)经本(ben)网(wang)(wang)(wang)授权不得转载、摘编或利用其它方式使用。已(yi)获本(ben)网(wang)(wang)(wang)授权的(de)作品(pin)(pin),应在授权范围内使用,并注(zhu)明"来(lai)源:教育(yu)装(zhuang)备(bei)(bei)采购(gou)网(wang)(wang)(wang)"。违者本(ben)网(wang)(wang)(wang)将(jiang)追究相关法(fa)律责任。

② 本(ben)网(wang)(wang)凡注明(ming)"来源(yuan):XXX(非本(ben)网(wang)(wang))"的(de)(de)作品,均转(zhuan)(zhuan)载自其(qi)(qi)它媒(mei)(mei)体,转(zhuan)(zhuan)载目(mu)的(de)(de)在于传(chuan)递更多信(xin)息,并(bing)不代表(biao)本(ben)网(wang)(wang)赞同其(qi)(qi)观点和对其(qi)(qi)真实(shi)性负责(ze),且不承(cheng)担此类作品侵(qin)权行为的(de)(de)直接责(ze)任(ren)及连带责(ze)任(ren)。如其(qi)(qi)他媒(mei)(mei)体、网(wang)(wang)站或(huo)个(ge)人从本(ben)网(wang)(wang)下载使用,必须保留本(ben)网(wang)(wang)注明(ming)的(de)(de)"稿件来源(yuan)",并(bing)自负版权等法律责(ze)任(ren)。

③ 如(ru)涉及作品(pin)内容、版权等问题,请在(zai)作品(pin)发表之(zhi)日起两周内与(yu)本网联系,否则(ze)视(shi)为(wei)放弃相关权利。

2021全国教育装备云展会300*245
xml地图 | sitemap地图
王一博
分享到:QQ空间新浪微博腾讯微博人人网微信
郑州地铁12人遇难 事故原因公布 mg 大坂直美爆冷出局 宝马 汉兰达 中国大妈 猪猪侠 如懿传 狼行者 乌女兵穿高跟鞋 37年积蓄家中发霉 孙俪7例感染者曾去张家界 多地提醒 9名巴基斯坦遇难中国同胞遗体回国 杨倩是生活照甜美的00后清华学霸 革命者 泰拉瑞亚 天天向上 剑灵 熊出没 初入职场的我们 雷克萨斯 觉醒年代 凯迪拉克 吞噬星空 易烊千玺 炉石传说长安汽车 哥斯拉大战金刚 斗破苍穹 猫和老鼠 赵云 庆余年 圣墟 happier 特斯拉 happier 逆天邪神 猫和老鼠 叛逆者 生死狙击 吴亦凡范丞丞合影 熊出没 恰好是少年 美好的日子 王者荣耀 300英雄 女足 全职法师 杜莎夫人蜡像馆 老年版APP兴起武汉实验室没泄漏 悬崖之上 哥斯拉大战金刚 赛尔号 千与千寻 今年盛夏气候预测 完美世界 300英雄 | 下一页
Baidu
sogou
百度 搜狗 360