1. 3D
    3D
    +关注
    关注 0
    文章 298
    浏览量 57161
  2. 手势识别
    +关注
    关注 1
    文章 62
    浏览量 22236
  3. 三星
    +关注
    关注 2
    文章 4439
    浏览量 80081
  4. 语音交互
    +关注
    关注 0
    文章 30
    浏览量 13261
  5. 传感器
    +关注
    关注 245
    文章 6186
    浏览量 298092
  6. vr
    vr
    +关注
    关注 0
    文章 99
    浏览量 170

除了3D手势识别,VR交互技术还有哪些?

电子设计 2017-12-21 07:51 次阅读
自人类发明了工具以来,与工具之间就需要通过一种方式建立起联系,用手握住工具的把手就是联系的一种。进入电子科技时代,交互的重要性愈加凸显,就好像遥控器之于空调、键盘鼠标之于电脑、游戏手柄之于电视游戏等等,缺少了一个简单有效的交互,工具对于人类也就失去了意义。   随着虚拟现实的崛起,如何寻找到合适的交互技术也成为了从业者们研究的重中之重。   一、我们为什么需要为VR需要找一个新的交互形式? 与其他科技产品不同,VR体验强调的是沉浸感,而沉浸感的来源又是与外界的隔绝而造就的,尤其是视觉和听觉的隔绝,使得大脑被欺骗,产生脱离于现实世界的虚拟沉浸感。这就产生了新的问题:看不见自己的身体,尤其是人类交互感知最重要的手和运动最重要的脚,无法与虚拟环境产生交互,在虚拟的世界里变成了一个看客。 在虚拟现实兴起之初,用户在新鲜感爆棚的情况下,追求的重点在VR是否能够营造出沉浸感十足的情境,对于交互的需求相对并没有那么强烈。人类的主观能动性作祟,于是希望去操纵、控制虚拟世界,以寻找到更多的存在感。随着行业的不断发展,VR对于用户新鲜感的下降,用户开始将寻找虚拟世界存在感的需求放在了首位,开始追求更深层次的沉浸,希望与虚拟现实世界产生互动。 非常不凑巧的是,大厂优先追求的是输出设备的高技术含量,在头显这一块投入的技术与精力更多。在交互这一块的研发相对滞后,就导致了交互手段缺失情况的出现,比如Oculus Rift只能选择XBox手柄凑数。 通过传统电子设备的交互方式,比如手柄一类的产品,暂时解决交互了的问题,却又使得用户从虚拟世界中被带出,沉浸感大打折扣。举个例子,成熟度相对较高的三星Gear VR头显在视觉方面的体验不错,但操控方式是配置于头显右侧的触摸板,这意味着用户需要时刻举起右手来操作,这无形中就破坏了沉浸感受。 在二维屏幕交互中,几乎所有控制命令都可以抽象为按键动作。但在虚拟现实中,用户希望自然交互,也就是人类在现实世界里怎么跟外界交互,在虚拟世界里我们也希望按照同样的方式交互,沉浸感更高,效率高,学习成本低。 于是,寻找一种全新的、合适的虚拟现实交互形式就成为了一件非常有必要的事情。   二、为什么手部动作识别在已知的交互形式中最受欢迎? 到目前为止,VR领域目前还没有一个成熟的具有普适性的操控交互手段。VR日报大概列举了目前业界理论上比较主张的几种交互形式:用“眼球追踪”实现交互、用“动作捕捉”实现交互、用“肌电模拟”实现交互、用“触觉反馈”实现交互、用“语音”实现交互、用“手势跟踪”实现交互、用“传感器”实现交互等等。 这些交互形式到目前为止,虽然各自有各自的优点,但也都存在一定的缺陷。比如眼球追踪,尽管众多公司都在研究眼球追踪技术,但几乎没有一家的解决方案令人满意,都无法提供精准和实时的反馈。或如动作捕捉,市面上的动作捕捉设备只会在特定超重度的场景中使用,而且需要用户花费比较长的时间穿戴和校准才能够使用,而且这种方式的一大痛点是没有反馈,用户很难感觉到自己的操作是有效的。 又如触觉反馈,它无法适应更加广泛的应用场景,虽然目前三大VR头显厂商Oculus、索尼、HTC Vive都不约而同的采用了虚拟现实手柄作为标准的交互模式,但这只是针对一些高度特化的游戏类应用或轻度的消费应用,不过是商家退而求其次的一种妥协策略,因为VR头显的早期消费者基本是游戏玩家。再比如语音交互,首先机器对于人类语言的理解就是一大问题,简单的语音还好,复杂的就不行了,而理解之后机器对指令能否准确执行又是一大问题。 对于人类来说,最自然最有效的的交互方式有两个当属动作莫属了,因为即便语言不通,你仍然可以通过动作的比划与他人进行沟通。放在VR里面来说,肢体和手势动作可以用于大部分交互场景,尤其是轻度交互的固定场景还是对于重度交互的移动场景,手势的优势都非常突出。 于是,手部动作识别在已知的交互形式中成为最受欢迎形式。 三、手部动作识别是不是只有3D手势识别吗? 说起手部动作识别,大家耳熟能详的应该就是Leap Motion这家公司了。但实际上,手部动作识别的解决方案并不是只有Leap Motion一家公司有,技术原理上也并不是只有这一个方向。只不过因为Oculus的对Leap Motion的大力支持,伴随着Oculus Rift的高曝光率,使得Leap Motion的3D手势识别被公众所熟知。 3D手势识别并不是VR交互领域手部动作识别方案的唯一,其实可以分为二维手型识别、二维手势识别、三维手势识别三种。   二维手型识别 二维手型识别,也可称为静态二维手势识别,识别的是手势中最简单的一类。这种技术在获取二维信息输入之后,可以识别几个静态的手势,比如握拳或者五指张开。其代表公司是一年前被Google收购的Flutter。在使用了他家的软件之后,用户可以用几个手型来控制播放器。 “静态”是这种二维手势识别技术的重要特征,这种技术只能识别手势的“状态”,而不能感知手势的“持续变化”。举个例子来说,如果将这种技术用在猜拳上的话,它可以识别出石头、剪刀和布的手势状态。但是对除此之外的手势,它就一无所知了。所以这种技术说到底是一种模式匹配技术,通过计算机视觉算法分析图像,和预设的图像模式进行比对,从而理解这种手势的含义。 这种技术的不足之处显而易见:只可以识别预设好的状态,拓展性差,控制感很弱,用户只能实现最基础的人机交互功能。   二维手势识别 二维手势识别,比起二维手型识别来说稍难一些,但仍然基本不含深度信息,停留在二维的层面上。这种技术不仅可以识别手型,还可以识别一些简单的二维手势动作,比如对着摄像头挥挥手。其代表公司是来自以色列的PointGrab,EyeSight和ExtremeReality。 二维手势识别拥有了动态的特征,可以追踪手势的运动,进而识别将手势和手部运动结合在一起的复杂动作。这样一来,我们就把手势识别的范围真正拓展到二维平面了。我们不仅可以通过手势来控制计算机播放/暂停,我们还可以实现前进/后退/向上翻页/向下滚动这些需求二维坐标变更信息的复杂操作了。 这种技术虽然在硬件要求上和二维手型识别并无区别,但是得益于更加先进的计算机视觉算法,可以获得更加丰富的人机交互内容。在使用体验上也提高了一个档次,从纯粹的状态控制,变成了比较丰富的平面控制。   三维手势识别 三维手势识别需要的输入是包含有深度的信息,可以识别各种手型、手势和动作。相比于前两种二维手势识别技术,三维手势识别不能再只使用单个普通摄像头,因为单个普通摄像头无法提供深度信息。要得到深度信息需要特别的硬件,目前世界上主要有3种硬件实现方式,加上新的先进的计算机视觉软件算法就可以实现三维手势识别了。 四、杀鸡不用牛刀,VR中的交互到底应该如何抉择?   轻度交互 移动端VR设备一般无法运行重度体验的VR内容,对于交互的需求基本保留在轻量级别。3D的手势识别用在轻度VR交互上实际有点杀鸡用牛刀的感觉,绝大部分人日常接触最多的就是2D触摸屏,而大部分UI也是2D设计,3D手势识别加入的深度信息对于大部分人来说太超前,而且大部分人臂展不超过1米,深度信息在这里没法体现出相对2D平面的不同。 所以,一个普通单摄像头通过边缘识别的简单手势交互系统能满足目前大部分VR场景的交互需求,降低手势交互的门槛,从而快速普及手势交互概念,如果还能够配合语音交互功能,就能快速满足短期内VR应用的交互需求。   重度交互 PC端VR设备,成本高技术含量高,能够运行重度体验的VR内容,因而对于交互的需求也是重量级别。3D的手势识别用在重度VR交互上才是真正的好钢用到了刀刃上,能够满足用户的重度交互需求,还能够提供较好的反馈和沉浸感。用户置身的三维场景中,要跟三维场景里面的物品进行交互,没有深度信息是不可能做到的。 现在Oculus和HTC Vive其实都采用的是手柄的解决方案,但是3D的手势交互其实是一种更自然、更舒服的方式。对于复杂的3D场景,3D的手势交互是不可缺少的,而且更加真实和沉浸式的3D场景体验,才是VR内容的未来。而在重度VR体验内容中,空间的深度信息更为复杂,应用场景的变化也更加多样化,只有3D的手势识别能够较好的满足精度、延迟和沉浸的要求。 至于未来如何发展,历史总是由人民书写的,消费者的选择才是技术方向的选择。

电子设计 技术专区

  1. 经典的运用PIC单片机实现LED点阵手写屏设计方案
  2. 详细解析ESP中传感器及接口技术的电路
  3. 实现智能家电控制系统设计方案的几大关键点
  4. 一款实用的基于iOS的智能家居安防系统移动端方案
  5. 一文读懂无线传感器网络标准化与协议
关注88lifa利发国际娱乐微信
有趣有料的资讯及技术干货
下载发烧友APP
打造属于您的人脉电子圈
关注发烧友课堂
锁定最新课程活动及技术直播
收藏 人收藏
分享:

评论

相关推荐

基于自动驾驶涉及的软硬件的简单介绍

那么,自动驾驶所涉及的软硬件有哪些呢? 传感器1 传感器相当于自动驾驶汽车的眼睛。通过传....
的头像 Imagination Tech 发表于 01-19 15:45 次阅读 0条评论
基于自动驾驶涉及的软硬件的简单介绍

三星真电子,皮带也智能!

今年年初,三星从自家的创意实验室 C-Lab 中翻出了三款新品:Rink VR 专用控制器、Tipt....
发表于 01-19 14:41 次阅读 0条评论
三星真电子,皮带也智能!

三星计划量产16Gb GDDR6显存 可提供72GB/s数据传输率

业界首款16Gb GDDR6显存芯片即将投入量产,传可提供72GB/s的数据传输率,使用的是10nm....
发表于 01-19 14:34 次阅读 0条评论
三星计划量产16Gb GDDR6显存 可提供72GB/s数据传输率

三星新专利将终结iPhone X刘海设计 直接在屏幕上“硬开孔”

iPhone X虽然被称为最强旗舰手机,但是在机身设计也遭到了大多数人的无力吐槽。特别是iPhone....
发表于 01-19 13:24 次阅读 0条评论
三星新专利将终结iPhone X刘海设计 直接在屏幕上“硬开孔”

语音交互技术即将爆发 AI无线耳机导火线

当下智能交互设备市场具有很大的成长空间,近日,出门问问创始CEO李志飞向外揭露,语音交互的下一个爆发....
发表于 01-19 13:20 次阅读 0条评论
语音交互技术即将爆发 AI无线耳机导火线

详细解读我国传感器行业的发展现状以及四大趋势

相比其它较早布局这一领域的国家,我国传感器在研发上至少晚了十年。国产传感器企业几乎还是靠模仿国外产品....
的头像 MEMS 发表于 01-19 12:34 次阅读 0条评论
详细解读我国传感器行业的发展现状以及四大趋势

苹果“降速门”调查 三星也被牵扯其中

苹果“降速门”还在深度调查中,在意大利监管机构调查中三星也被殃及,甚至认为苹果和三星涉嫌联合策划了一....
发表于 01-19 11:53 次阅读 0条评论
苹果“降速门”调查 三星也被牵扯其中

三星欲战华为 计划明年量产5G芯片

在去年三星电信设备营收得到了很大的涨幅,更是刺激了三星持续投入电信设备业务,三星一直将华为最为强劲的....
发表于 01-19 11:47 次阅读 0条评论
三星欲战华为  计划明年量产5G芯片

三星手机实力不在中国 全球销量排名世界第一

据市场调查在智能手机领域,三星手机的市场份额在节节败退,有人猜测三星或许在不久的将来将完全退出中国手....
发表于 01-19 11:28 次阅读 0条评论
三星手机实力不在中国 全球销量排名世界第一

联发科该不该存在?论联发科的重要性

联发科实力不如高通这是共识,联发科其实也是一种纠结的存在,他被认为是山寨机的专属芯片,因向高端转型的....
发表于 01-19 11:13 次阅读 0条评论
联发科该不该存在?论联发科的重要性

动力电池行业巨头高额研发技术实力一较高下

2017年LG、三星SDI、松下、SKI等日韩主要电池企业研发投入分别为35亿元、28亿元、20亿元....
的头像 高工锂电 发表于 01-19 10:26 次阅读 0条评论
动力电池行业巨头高额研发技术实力一较高下

2018全球石墨烯九大趋势:在传感器,RFID,EMI/ESD等电子领域获得突破

石墨烯价格的下降和产品质量的提高将有效地刺激下游应用加快发展。展望2018年,石墨烯在电子、复合材料....
的头像 人间烟火123 发表于 01-19 10:13 次阅读 0条评论
2018全球石墨烯九大趋势:在传感器,RFID,EMI/ESD等电子领域获得突破

我国工业传感面临的挑战和工业常用传感器分析

传感器技术发展迅速,探测精度提高、制作成本降低、芯片体积减小,应用非常广泛。传感器技术甚至已成我国工....
发表于 01-19 09:47 次阅读 0条评论
我国工业传感面临的挑战和工业常用传感器分析

国内传感器的发展现状与未来规划

在传感器制造工艺以及技术方面,美国、日本以及德国等发达国家长期处于国际市场领先地位,三国几乎垄断了全....
的头像 工控网智造工程师 发表于 01-19 09:33 次阅读 0条评论
国内传感器的发展现状与未来规划

达索系统:SOLIDWORKS 2017让用户体验多重感知

2016年9月27日,上海全球3D设计、3D数字样机和产品全生命周期管理(PLM)解决方案、3D体验....
发表于 01-19 09:37 次阅读 0条评论
达索系统:SOLIDWORKS 2017让用户体验多重感知

三星5G调制解调器芯片Exynos 5G计划2019年量产

三星LSI事业部计划在2018年下半年对自家无线事业部供应Exynos 5G样品,之后与各国电信业者....
的头像 DIGITIMES 发表于 01-18 23:50 次阅读 0条评论
三星5G调制解调器芯片Exynos 5G计划2019年量产

石墨烯的简介以及各类石墨烯传感器的详解

“石墨烯”又名“单层石墨片”,是指一层密集的、包裹在蜂巢晶体点阵上的碳原子,碳原子排列成二维结构,与....
的头像 传感器技术 发表于 01-18 16:33 次阅读 0条评论
石墨烯的简介以及各类石墨烯传感器的详解

华为直追三星、苹果 成俄第三大手机品牌

据报道,华为成俄罗斯第三大最受欢迎智能手机品牌,在2007年销量达到了前所未有的水平。仅次于三星和苹....
发表于 01-18 16:30 次阅读 0条评论
华为直追三星、苹果 成俄第三大手机品牌

根据公开资料对通用无人车的一些分析估计

通用汽车在2018年1月13日发布通用无人车安全报告,并宣称将在2019年量产基于Bolt纯电动车改....
的头像 传感器技术 发表于 01-18 15:48 次阅读 0条评论
根据公开资料对通用无人车的一些分析估计

DRAM 2018上半年还会涨吗?具体看三星、 SK海力士增产实况!

据悉,在今年上半年DRAM价格恐怕很难减下来,还会继续保持上涨趋势。到2018下半年是否增长具体还的....
发表于 01-18 15:24 次阅读 0条评论
DRAM 2018上半年还会涨吗?具体看三星、 SK海力士增产实况!

88lifa利发国际娱乐

百度360搜索搜狗搜索