手势在我们与他人交流和互动中起着重要作用。而在现在,手势接口已经起到了控制虚拟现实体验的重要作用。通过在Oculus Quest和Leap Motion等设备上进行手势操作,用户可以任意在虚拟现实体验中遨游。今天,我们将探讨应用于人机交互的手势操作的不同类别。
手势是非语言交流的一种形式,是通过手部可见的身体动作来代替语音或文字来传达特定消息的形式。手势交流可以分为姿势(postures)和手势(gestures)两种形式。其中,手势指手的动态行为(movement),如挥手或绘画。姿势是手的静态形式,例如:用手指形成“ V”来代表“和平”,用拇指向上代表“太棒了”。
将这两种形态结合,手势交流可以提供四种类型的信息:
- 空间信息,即手势所指的空间关系。这样的手势可以操纵(推/拉),指示(指向),描述形态(显示大小),描述功能(扭转运动以描述拧紧螺钉)。
- 符号信息,是手势所指的标志。这样的手势命令可以是制作V形手势,挥手打招呼或再见等概念。
- 即时信息,例如下意识地进行手势表达。
- 情感信息,即手势所指代的情感。这样的手势可以传达诸如苦恼,放松或热情的情绪。
尽管手势的情感性交流可以增强虚拟体验,然而,手势的空间和符号性交流在人机交互中可能是最有效和即时的。

Cat Explorer
使用手势设计VR体验
如今我们看到:像Oculus Touch这样的控制器确实提供了许多手势命令。双手手势命令具有许多优点,其中包括更大的灵活性,不必将任何设备握在手中,不必直接到自己的手部运动等。
但是,由于这种灵活性,用户将不得不学习和记住大量的手势。

Paint中的入门教程,需要竖起大拇指才能进行下一步
使用手势命令设计VR体验时,设计师应考虑:
- 手势命令所带来的用户学习成本:我们必须限制它们的数量,并提供可供用户学习的参考文件;
- 提供手势操作教学范例(tutorial),例如使用图标和视频来介绍不同手势操作带来的交互行为;
- 手势命令必须简单易懂,易于重复和识别;
- 在用户执行完手势操作后,提供用户反馈,以使用户知道他们是否正确执行了相应的操作;
- 在设计手势体验时,应考虑产品所面向的目标受众和文化背景(例如不同国家之间的手势文化差异);

Racket Fury融合了空间,符号和情感交流
VR交互是人机交互的一种形式,用户可以在虚拟环境中执行交互。在VR界面中,最常见的手势任务包括对象操作任务和UI命令:
- 对象操纵任务包括选择对象,缩放,旋转,创建,删除,编辑等命令。其中一些命令契合我们在现实生活中执行的动作(抓取,旋转),而其他一些则在现实世界中是不可能的,它仅存在于计算机的应用程序中(缩放,删除)。
- XR中的UI命令包括由真实用户在虚拟用户界面内生成的任务,包括诸如确认/取消,打开/关闭,打开/关闭等事件。
VR中的UI命令的一个很好的例子是竖起大拇指,让我们看看以下这个案例:进行Paint VR或Microsoft Hololens中的入门教程中的下一步,后者正在使用空中滑动和手摇手势等手势来传达命令。

Hololens中打开菜单的手势命令
借助提供真正直接对象操纵和手势通信的手部跟踪设备,我们可以进一步探索如何将现实世界中的手势与最常见的虚拟命令相对应。
这种交流的好处在于它具有非常直观的特点。用户还可以通过触觉或触觉反馈来增强虚拟物体的感觉,就像他们在现实生活中感觉相同的物体一样。

Blocks中的对象操作
命令和手势
记住,无论您要为您的虚拟体验选择哪种手势,都必须与目标用户进行测试,以了解这些手势操作是否清晰,易于使用和易于记忆。
下面,我列出了一些可以更自然地与我们日常生活中使用的某些手势匹配的UI命令:
o选择(Selecting)-通过用食指指向,捏以创建光线,将鼠标悬停在上面,将手/手指移到形状中
o靠近/进一步移动(Move closer / further)-通过抓住和拉动/推动空气,用手指或手掌招手
o收集/握住/捡起一个物体(Collecting / holding / picking up an object)-通过轻拍,捏捏,将手掌收集在选定物体上的拳头中
o关闭/打开(Switching off / on)-通过左右挥动手,鼓掌,一挥手消散,弹响
o确认(confirming)-通过竖起大拇指,确定的手势,点头(Paint VR)
o取消(cancelling)-通过摇动否定,拇指向下,张开手掌作为停车标志,交叉双手,挥手
o暂停(pausing)-拳头向上,手指合拢,挥手
o删除(deleting)-通过丢弃,轻弹,挥舞
o向上/向下缩放(scaling up/down)-通过用手指捏,用两只手拉伸
o滚动(scrolling)-通过向左,向右,向上或向下挥动;指向左,右,上或下;向左,向右,向上或向下抓住和拉动空气
o打开菜单/开始体验等(opening menu/starting experience)-通过挥手打招呼,绽放手势,手掌朝上打开,手掌朝下打开以在下面投射场景
o闭合(closing)-通过挥手再见,将手指聚集在一起,将手掌合为拳头
o组织UI元素/对象(organizing UI elements)-通过选择和指向方向;选择,抓取和移动
o沟通混乱(communicating confusing)—通过耸耸肩,摇头,举手
o交流挫败感/挣扎/无法继续经验(communicating frustration/struggle/inability to proceed with experience)-通过脸部按摩,双手交叉,手掌握紧拳头
o交流满意度/成功(communicating satisfaction)-通过轻拍,拍手,挥舞拳头

本文由Anastasiia Ku首发于Medium平台
文章来源:https://medium.com/inborn-experience/gestural-communication-in-vr-2-cd0d12da0963








评论区 (0)
最新评论登录后发布评论并参与互动。
暂无评论,欢迎抢沙发。