专业知识分享UXDaily| · 设计

UXDaily | 设计前沿速看!NUI世界:无接触手势交互控制

2022-11-049 MIN READ原载于微信公众号 ↗

‍!Image‍

01

写在前面

让我们首先来了解一下什么是图形用户界面(GUI)呢?图形用户界面(GUI)是一种用户界面形式,它在显示器上使用图形图标和视觉符号显示所有元素和相关的用户控件。其中元素是指按钮、图标、列表等。人类与界面的交互是通过键盘、鼠标或任何其他指针设备完成的,这些设备也被称为输入设备或操纵器。

02

图形用户界面(GUI)的历史

图形用户界面(GUI)是一个相对年轻的名词,它的历史并不长, GUI 大约有 50 年的历史。1968 年,创新者 Douglas Engelbart 与他的团队合作开发了世界上第一个 GUI 的基础框架。第一个在线系统(称为 NLS)是以GUI为基础创建的,NLS 支持在显示器上显示光栅图像,与鼠标和超文本交互。

从那时起,科学技术向前迈进了一大步,但我们对界面的基本理解却止步不前。我们仍然会因为我们今天拥有的显示设备(例如,投影仪)、图形元素(文件夹)和用于操作的指针设备(鼠标)而受限制。

然而,我们不能忽视技术领域的成就,这些成就对现代图形界面的感知产生了重大影响。当触摸屏在我们的生活中在全球范围内使用时,触摸屏可以同时用于输入和输出信息。它的优点非常明显,其中包括简洁的界面和良好的可扩展性(小尺寸和大屏幕是设备的良好组合)。但是有一个明显的缺点,那就是高功耗。

2007 年史蒂夫·乔布斯 (Steve Jobs)推出 iPhone (第一款支持多点触控的设备)时说: “一个带有触摸屏的 iPod、一部手机和一个用于在一个设备中上网的设备”。这在当时击败了所有仍然依赖按钮解决方案的竞争对手。

“按钮和控件无法更改。即使你不需要它们,它们也在那里。”—— 史蒂夫·乔布斯

人工智能对于用户图形界面的发展确实发挥了很大的作用。语音识别领域的进一步发展和语音助手的出现为使用图形界面创造了一个新的交互维度。Siri 和 Alexa 等语音助手的图形界面“并不在我们的视线范围内”,所有的交互“魔法”都发生在设备内部。但与完全扼杀按钮设备市场的触摸屏不同,语音界面只是与系统交互的附加选项。下面我将会具体说一下为什么语音交互只是附加选项。

构造句子方式的可变性、上下文的细微差别、单个单词的数百种含义、单词的发音方式、口音、语音缺陷、语调等都能完全改变某些语言中短语的含义 —— 所有这些因素都很难让智能设备识别出庞大的数据样本。

毫无疑问,语音控制有着广阔的前景,但要想赢得用户的绝对忠诚度,在这个领域还有很多工作要做。

03

要么保留它,要么忘记它

传统的 GUI 是在还没有任何人考虑滚动界面的时候开发的。现在它已经过时了,想象一下,你有一个空闲的晚上,你决定补上你最喜欢的系列剧中错过的剧集。因此,你可以使用电视、iPhone、电视遥控器、Apple TV、iPhone(这就像 21 世纪的法律)和家用平板电脑(查看电子邮件或浏览 Instagram)。一方面,你习惯于同时操作多种设备;另一方面,你也会厌倦所有这些设备。

《黑镜》中展示了很多未来的图形界面交互设备,这些设备看起来如此真实可靠,以至于当我们看到这些设备,我们便认为该系列的创作者对未来的交互方式有很深入的了解。多希望在下一次 Apple 发布会演示中,我们能看到类似这些设备的东西。但未来并没有我们希望的那么快。!Image

04

用户界面的未来

《黑镜》中显示的解决方案十分优雅而简单。这不再是我们熟悉的图形界面,更多的是所谓的自然用户界面(NUI)。NUI是一个直观的用户界面,完全不需要键盘或鼠标等机械设备进行输入。

这种界面的优点是它非常直观,用户不必专门学习如何使用它。从理论上讲,只需要将我们的经验和习惯从现实世界转移到虚拟世界,我们就应该能够执行某些任务了。我们知道如何在现实世界中移动物体,因此我们可以在虚拟空间中使用相同的移动动作来移动物体。

增强现实技术让我们离理想的 NUI 又近了一步。但我们仍然缺乏广泛使用的非接触式手势控制技术。如今,设计师正在修改 UI 元素库,试图摆脱以往的解决方案,以便为输入信息的新方式提供更多的可能。我们可以提出与系统交互的新原则来专注于手势控制管理。然后我们需要在实践中测试它们,找到弱点,接着根据弱点改进它。一次又一次的迭代,我们将离无接触式自然交互界面更进一步。

下面是一些常用的用于识别手势的手部跟踪方法:辅助使用的特殊手套大约三十年前,第一个广泛使用的特殊手套模型出现了。Mattel Inc 的 Power Glove 被用作任天堂的控制设备。尽管多年来用于此类目的的特殊手套模型变得更轻更好,但这项技术很难推向大众市场,因为用户通常不想在日常生活中使用和佩戴这种繁重的配件。使用相机

显着特点——计算和能源消耗低。该软件了解手的骨骼结构、各部分的距离、与其他物体的关系以及动态手势。例如,单击、敲击、挤压和释放等。

05

苹果公司

设计师在寻找新的解决方案时通常会忘记交互设计的基本原则(来自Don Norman 和 Jacob Nilsson的文章)。其中包括:

  • 可见性
  • 反馈
  • 一致性(标准)
  • 无损操作
  • 可发现性
  • 可扩展性
  • 可靠性

不遵守这些标准的结果可能会导致企业创新失败,NNG 的 Donald Norman 早在 2010 年就提出在做手势交互时候需要注意的第一个问题,他说: “手势是短暂的,它们不会留下任何路径记录,这意味着如果一个人做出一个手势并且没有得到响应或反馈,那么这个交互是无法传递信息的失败交互设计。”这篇文章是在 iPad 上市后发表的,它批评了接触手势,而八年后我们看到,这项技术如今发展的十分成功。

需要注意的第二个问题是人体工程学,史蒂夫·乔布斯曾经解释过为什么 MacBook 的屏幕永远不会有触摸屏显示器。乔布斯认为: “触摸屏表面是垂直的,并不符合人体工程学。”人体工程学问题在手势控制技术中也同样存在,但是没有什么是不能改进的。也许问题不在于技术本身,而在于它如何正确的使用。

06

如何应用和使用这种新的输入信息的方式需要设计师重新修改整体用户体验。随着“触摸友好”的交互方式的快速发展,又出现了另一种新的交互方式 ——“手势友好”。技术先进的公司已经在他们的日常流程中使用新技术,在他们的生产或管理流程中增加了手势交互的使用。此外,这种技术最好的应用之处就是教育行业。

手部追踪和手势识别可以将实际工作体验提升到一个完全不同的层次。解剖学教科书中的插图现在已经逐步开始过时了,骨骼和内脏的 3D 可视化以及学生与它们的互动可以让学生们真实地感受到物体的大小和比例,这是纸上的平面图片永远无法实现的。

在语音控制不够用,手指又忙于其他所需动作的情况下,手部追踪和手势识别这项技术也是必不可少的。在外科医生的手术中使用手势追踪并不是科幻片中发生的事情,而是今天我们实实在在可以使用的。大公司了解到这种技术发展的重要性,并逐渐在他们的产品中使用以提高用户体验。比如,BMW 7th 车型设置了一组基本手势命令,并允许用户添加自己的自定义手势。

07

写在最后

自然用户界面的想法并不新鲜,但尚未普及。现在是实施它的最佳时机:技术变得更加普遍,人类潜力现在已达到最大。一千年来第一次,我们的技术大部分都可以满足我们的需求。我们相信,在不久的将来,人们将不再受界面的限制,界面将尽可能个性化,以满足所有人的需求。

设计师和开发人员在开发一种新的交互语言时一定会面临巨大的挑战,这与可用性问题和可能会违反交互设计的原则有关。我们在对非接触式交互领域产生兴趣后,已经预测了可能的痛点。以下是开发自然用户界面时可能出现的一些常见错误:

过分专注于GUI原则: 新界面不能一味地继承旧的交互原则。我们可以参考以前的经验,但 NUI 应该主动阿展自己的设计原则。

创建过多的手势动作: 专注于基本手势,不要被额外的信息淹没。

无视设备的限制: 不明显的范围、跟踪和检测速度可能会导致识别效果不佳、不稳定,从而导致用户困扰。

没有适当的进行用户测试: 在开发 NUI 时,用户测试起主要作用。因为可能某一个动作对一个人来说是自然的,然而对另一个人来说可能是难以理解或陌生的。在测试时,参与测试的人数最多的选择是最自然的选择。

复杂的手势动作: 在技术领域已经或将要开发的一切都是为了促进和改善人们的生活,并为我们周围的世界增加价值。如果交互动作看起来太复杂,用户不会在这上面浪费宝贵的时间,无论他对想法或整体技术有多忠诚。


ABOUT US


参考文章:查看链接 ↗ Chuta译者:小鸡炖蘑菇为尊重版权和译者转载请联系我们

本文原载于微信公众号,正文与配图已转存至本站以便长期访问。 查看原文 ↗

有想具体聊聊的问题?把你的情况说一说。

联系咨询