我第一次接触生成式人工智能是在2016年，由Alexander Mordvintsev创建的Deep Dream Generator。这是一个图像生成工具，使用卷积神经网络（CNN）构建，对图像分析和模式识别很有帮助。我向生成器输入了一些图像，它应该从视觉数据中创造出全新的东西。它处理了我上传的图像中的形式和数字，并创造了一系列模糊不清的组合。有一个按钮可以创造出更多不同的构图，直到你找到你喜欢的东西。我几乎无法理解这些形式意味着什么，只能模糊地辨别出它看起来是什么。看起来机器正在努力理解它收到的所有输入的任务，似乎它正在努力使这一切有意义。生成式人工智能在当时仍然非常原始。它能很好地处理自然界的图像，尽管它在处理人像时很费劲。不过，我发现它很吸引人。
以下是我创造的一些图像。
我很好奇，想知道更多。对于我的下一个任务，我决定深入了解神经网络的工作原理。在我研究图像处理算法的过程中，我遇到了计算机视觉和随后的扩展现实（XR）等技术。我发现这两种技术都是一个巨大的探索领域，包含了建立创新体验的多种可能性。我的想象力很丰富，我发现要收集我的想法是很困难的，我无法想象如果这些技术变得强大并为大众所接受，我们的生活会发生怎样的变化。
用户界面在这个故事中的地位如何？
等一下，我们就要到了。
快进到今天，我们坐在我们的电子设备前，当我们滚动浏览人工智能的每一个新发展，以及它是如何促进包括XR在内的各种其他技术的有效工作流程时，挣扎着要喘息。随着时间的推移，人类对未来的憧憬，无论好坏，都比大多数人预期的要快。
你们可能都已经看到了很多，但只是为了把事情看清楚，我重新制作了一些我在2016年生成的图像。我在7年后再次使用 “深梦发生器”，这就是输出结果。
随着人工智能世界中发生的所有令人震惊的事情，我作为一个设计师，有两个大问题。首先，一个许多设计师都关心的问题–我的工作内容是否会被淘汰？第二，用户界面（UI）和用户体验（UX）在未来几年会有多快的转变？
第一个问题是相当无意义的，因为我们除了猜测之外没有什么可以做的。人工智能是否会调整到或完全取代现有的系统是很难预测的事情。因此，我选择追问第二个问题。
我想通过全面了解新兴技术是如何塑造用户体验的，当前的趋势，以及用户是如何适应这些变化的来处理这个话题。我把这些话题与人工智能和XR的发展结合起来，因为我设想，如果我们把这些技术结合起来，并有效地利用它们的产品，就可以建立伟大的体验。虽然有些想法以前可能已经讨论过了，但我通过引入我们现有的技术经验的观点，以一种更接地气的方式来介绍它们。
好了，让我们开始吧!
塑造当今用户体验的创新之举
随着人类在过去十年中对电子设备越来越熟悉，许多公司的优先事项现在已经转移到为其产品和服务提供良好的用户体验。随着人工智能等技术的整合，他们正在不断尝试和建立解决方案，以追求提供最佳体验。让我们来看看一些例子。
当我们想到由人工智能驱动的先进的人机交互（HCI）时，我们设备中的面部识别系统可以是一个很好的例子。面部识别完全消除了有密码保护的手机解锁方法，从而将用户的努力减少到只需看一眼。同样，像语音助手这样的功能使用户甚至不需要接触他们的设备就能执行若干任务。另一个例子是手势识别。虽然相对较新，使用也没有那么广泛，但手势识别以其快速有效的互动大大减少了用户的努力。
通过每一个例子，我们看到一个趋势，即让技术不再像一个独立的工具，而更像是用户的延伸。现在可能已经很清楚我在说什么了。一个好的用户体验有最小的或没有的界面互动。这使得技术更容易被接受，而且总体上使用起来很愉快。然而，上面提到的例子是让界面完全 “看不见”。
那么，设计师如何去实现这种用户体验呢？像这样的体验，最重要的指导原则之一是自然用户界面（NUI）的概念。NUI的目标很简单–设计直观的互动，以便尽可能地接近人类与物理世界的接触方式。其他一些真正符合NUI定义的技术是XR体验，包括增强现实（AR）、虚拟现实（VR）和混合现实（MR）。这些技术所提供的三维和环境背景使得与数字信息的互动比任何其他方法都更加直观和身临其境。空间意识和情境界面将体验放在首位，而传统界面则成为次要的。
这两个在交替界面领域的平行发展有着非常相似的目标。通过利用NUI的原则，他们的最终目标是使数字交互的感觉尽可能的自然。
但用户对此的反应如何？
用户如何适应技术和设计的变化
技术发展可能不需要等待用户，但只有当用户发现它有足够的好处并使之成为他们生活的一部分时，它们的真正价值才能实现。为了了解用户如何看待即将到来的技术创新，我们应该首先了解他们在过去是如何看待创新的。
对于每一项新技术，我们总是看到公众中好奇、兴奋和怀疑的有趣梯度。但是，最终，最重要的是它如何改善和简化人们的生活。触摸屏界面刚问世时，许多人质疑它的寿命。从人体工程学角度来看，它不如它的前身–按键式键盘。按钮式键盘提供了触觉反馈，而且更加精确，而触摸屏则增加了意外触摸和污迹的机会。尽管有这些缺点，触摸屏最终还是被广泛接受，因为它在开发和使用方面都具有可配置性、灵活性和适应性。
这是一个很好的例子，可以理解技术中经常为了 “更大的利益 “而做出取舍。当用户看到 “更大的利益 “时，他们会在将一项新技术融入他们的生活时对他们的习惯和期望做出调整。通过用户研究，这些技术中剩余的缺点会随着多年来的渐进式改进而得到缓解。
采用XR
XR有着悠久的历史，比手机甚至互联网都要早。然而，它的潜力只有在支持性基础设施得到改善，具有强大的计算能力、降低硬件成本和尺寸以及商业可行性时才得以实现。尽管如此，XR仍处于采用的早期阶段。让我们了解一下为什么会这样。
我曾在一家有各种XR产品的公司工作。在作为UI/UX设计师参与了几个项目后，我意识到了一件事，无论用户的数字素养有多高，都会有一个重要的学习曲线。在我们看到由XR驱动的产品完全融入我们的生活之前，这种情况还将继续发生。要想对一项设计有坚定的信念，仅仅在孵化环境中与用户交谈并接受他们的反馈是不够的。这是一个艰苦的纵向研究过程，只有当这些技术无处不在的时候才有可能。虽然对XR的认识和兴趣随着时间的推移而增长，我们已经看到了零售、娱乐、教育等部门的巨大潜力，但即使在今天，其实际应用中也存在着一些挑战和障碍。
无论是建造还是体验，XR仍然很昂贵。大多数人在浏览这些体验时仍然需要帮助。此外，现有的优质内容也非常有限，而且严重缺乏多样性。这是因为XR的内容开发管道非常复杂。从内容生成、优化和动画到内容发布、消费和管理，所有阶段都需要大量的资源、庞大的软件和设备。即使我们看一下它的预期用途，我们也会注意到限制。在用户和虚拟体验之间有一个障碍，或者在用户和他们的周围环境之间有一个障碍。例如，举着智能手机或平板电脑就能观看AR体验，或者，戴着VR头盔，用户对其实际环境的空间意识被完全消除了。MR通过合并现实和虚拟环境在一定程度上弥补了这些缺点，但其目前的应用极为有限。这些障碍阻碍了XR与常规使用的无缝整合。
我们经常将这些技术的新成就视为人机交互的下一个前沿领域，有可能改变我们与数字内容的接触方式。但我们只通过原型看到它的 “潜力”。只有当我们看到地面的现实时，我们才明白还有很长的路要走。这正是人工智能发挥变革作用的地方，它通过使先进的技术变得容易获得、负担得起和高效而改变了范式。
Adoption of AI
让我们重温一下我在上一节中讨论的例子。语音辅助、面部识别和手势控制等技术已经大大简化了用户的互动。它们已经做到了这一点，以至于老年人和残疾人能够在他们的设备上独立完成任务。总的来说，这些技术得到了积极的回应，并被广泛使用。2017年，皮尤研究中心研究发现，46%的美国成年人每天都在使用虚拟助手。到2020年，多达51%的美国公民使用人工智能驱动的语音助手作为他们的主要信息来源，而且这个数字还在继续增长。
人工智能也导致了可穿戴人工智能的发展，它被纳入智能手表和眼镜中。它们收集有关用户环境和活动的数据，并利用这些数据为用户提供信息、见解、建议和更多。由于缺乏有说服力的实际案例，成本高，技术局限性大，智能眼镜还不能引起用户的兴趣。但是，智能手表自推出以来已经变得越来越受欢迎。使用免提设备的便利性和人工智能的功能，如语音控制、健康跟踪、智能通知和建议，使可穿戴人工智能非常有吸引力。
我们还应该注意到这样一个事实：大多数由人工智能驱动的技术在幕后工作，以增强用户可能已经熟悉的产品和服务。人工智能并没有引入完全不同的互动形式，这也是其高采用率的原因。
通过以上讨论的所有主题，我们了解到新技术的采用不仅仅取决于它们的原创性或颠覆性。它还取决于各种因素的组合，如便利性、成本和感知的好处。只有当用户能够看到这些技术在他们眼前的生活中的好处时，才能被接受。人工智能在很大程度上已经成功做到了这一点，但XR却面临许多障碍。硬件的不断发展正试图解决这些障碍。但是，如果我们把这些放在一边，在创造坚实的用例和高质量的内容方面，仍有许多零散的碎片需要拼凑起来。这就是人工智能的最新发展能够改变未来几年XR的发展方向的地方。事实上，关于XR的讨论已经有了势头，因为人们看到这两种技术正在慢慢融合。
人工智能和XR的最新发展
在过去的一年里，人工智能领域发生了很多事情。本节简要介绍了一些选定的发展，这些发展暗示着未来的界面。
当我还在写这篇文章的时候，Humane公司宣布了可穿戴式人工智能领域的一个有趣的发展。他们正在开发一种无屏幕的设备，它完全是为人工智能而生的。它使用一个微型投影仪来显示用户手上的信息，大部分任务只用语音命令来执行。它允许用户真正留在他们的周围环境中–没有屏幕，没有按钮，没有分心。凭借其人工智能驱动和完全定制的洞察力，该设备增强了用户在探索世界时的日常互动。
另一个值得注意的发展是发生在人体植入物的世界里。脑计算机接口（BCI）是一种使用户能够利用大脑信号与外部设备互动的设备。它已经发展了几十年，在猴子和猪身上进行了成功的试验。人工智能和机器学习一直是BCI发展的关键工具。在此阅读更多相关信息。最近，美国食品和药物管理局批准了涉及由埃隆-马斯克的Neuralink公司开发的BCI芯片的人体试验，该公司的任务是开发一种BCI，根据人工智能改善人类交流。如果试验成功，人们将能够通过思考在特定设备上执行各种任务。
在这两个例子中，界面的功能是人的认知和身体能力的自然延伸，这使它们成为NUI的好例子。但是，这些界面中的内容呢？它们看起来/感觉起来会是什么样子？XR为我们带来了一些有趣的想法。
正如我们之前所看到的，XR已经能够证明沉浸式和情境式界面是如何高度直观的。我们还看到，XR技术的成功将依赖于一个强大的应用程序、游戏和体验的生态系统，以满足不同的兴趣和需求。这就是人工智能介入的地方，我们正在见证这些技术的空前进步。
例如，Moth+Flame的新生成性人工智能平台使用户能够在飞行中创建VR内容。它最近被全球投资公司Investco使用，他们能够建立一个定制的VR培训体验，只花了72小时就完成了开发。用于不同内容生成软件的几个新的人工智能插件也在加速这一进程。Blender（一种三维内容创作软件）的人工智能插件正在使用户能够只使用文本提示来创建纹理、动画和三维物体。除此之外，许多独立创作者已经通过结合不同的工具和软件来探索新的工作流程，在数小时内创建XR内容。例如，使用BariumAI和Midjourney创建3D资产和纹理，并将其与8th Wall（一个WebAR内容开发平台）等平台相结合。
硬件正在缩减为免提设备，创建交互式XR内容也变得更加容易。当内容创作和硬件的障碍完全消除后，我们的首要目标将是展示新的和创新的使用场景。换句话说，向用户展示 “更大的好处”，以便他们愿意从旧设备中进行过渡。而就像智能手机一样，新设备将迅速变得无所不在。
在另一端等待我们的是什么
到目前为止，我们所讨论的所有界面都还是独立的体验，它们在未来可能会朝着各自独特的方向发展。在这个阶段，各种版本的 “未来界面 “仍然是任意的。尽管所有这些技术都在以各自的方式改善用户的体验，但如果我们看一下人类以及他们与周围世界的互动方式，就会发现整体上缺乏凝聚力。
上面提到的界面没有一个适合我们的进化环境，它们都是自己的。因此，为了能够设想未来，我们需要注意那些对人类理解和参与世界有意义的方面。我通过解决3个主要方面来定义这一点–背景信息、控制和选择以及轻松管理。通过解决这三个非常重要的问题，我们将更接近于即将在我们面前展开的未来界面。
情境信息–空间界面
视觉信息是塑造我们的认知、建立信任和可信度、保持我们的注意力和唤起情感反应的主要来源。在正确的背景下呈现给我们的信息在这样做的时候更加有效，而XR已经承诺以其身临其境的视觉效果提供引人注目的体验。
现在，将XR的新发展与谷歌的Geospatial Creator这样的工具放在一起，该工具将允许用户在地球上的任何地方放置空间锚定的AR内容–我们可以慢慢开始建立一个画面。有了XR，我们可以期待在浏览世界时看到信息的空间显示。界面将主要分为两部分。第一个界面将固定在用户身上，是一个个性化的仪表板，跟随用户到处走。第二个界面将锚定在世界的各种物体和地点，为用户提供他们与周围环境互动时需要知道的所有相关信息。
此外，在人工智能的帮助下，信息将根据一个人以前与世界的互动方式进行定制，为每个人创造一个独特的体验。随着用户与它的互动时间的推移，界面将不断改进自己。
控制和选择–灵活的方式
我们已经看到像语音辅助和面部识别这样的技术现在被许多人日常使用，但总有一个选项是不使用它们。用户仍然可以键入他们的密码或手动执行任务。一些用户喜欢对界面有更多的控制和可见性，而另一些则不喜欢。
技术不能强加给用户，因此未来的界面会给用户几个选择。用户将能够根据他们的要求来切换模式。他们可以选择语音激活或视觉触摸的界面，或者与人工智能驱动的虚拟助理互动。用户将能够使用传统的二维界面、基于互动手势的XR界面，甚至将自己传送到虚拟环境中，所有这些都使用同一设备。
界面将是多感官的，有视觉、声音和触觉，它将让用户选择为自己完全配置一个个性化的用户体验。这也将适用于用户根据自己的需求选择的硬件。说到这里，让我们看看硬件可能是什么样子的。
易于管理–可穿戴生态系统
可穿戴设备的概念已经变得非常流行，因为人们能够使用一个免提设备来执行普通任务。然而，新设备将更加不显眼。未来的设备不会让自己成为关注的焦点，而是在用户与世界互动时从后台默默地协助他们。
在未来，我们将购买一系列可穿戴设备或附着在皮肤上的小型植入物，它们几乎或完全不可见。从这些设备中，我们将根据我们想消费的内容的性质选择我们需要的设备，并移除我们不需要的设备。每个设备都会有自己的用途。例如，戴上隐形眼镜来获取视觉信息，把听力设备放在我们的耳朵里来获取声音，或者用小指环来获取触觉反馈和手势互动。
图片来源： Sintec
有了人工智能，设备将根据用户的需求来学习和塑造自己。这将确保设备真正成为用户的延伸，无缝整合到他们的日常生活中。未来的可穿戴设备将是不显眼的，并将使用户毫不费力地与技术互动，同时与他们周围的世界保持自然和沉浸的联系。
总结
当我们冒险进入用户界面设计的未来时，有一点是显而易见的–技术正在朝着更加无缝和无形的互动方向发展，而NUI正在为这种转变铺平道路。人工智能和XR的融合为未来带来了巨大的希望。对于技术来说，这是一个令人兴奋的时代，因为它正在被精心打造，与人类和谐共处。但是，也有一片恐惧的阴云笼罩着我们。有时，技术对人类不利，造成破坏和伤害。而技术越强大，其影响就越深远。
因此，随着技术越来越先进，对我们来说，定期退后一步，思考我们想要为自己建立的未来也将变得非常重要。
在了解人类追求的错综复杂的过程中，我们可以清楚地看到，在人类愿望的大计划中，技术只是一个小片段。我们的主要需求在于对真正高质量生活的追求，这超越了技术带来的即时满足和短暂的欲望。高质量的生活包括许多其他无形的品质，如满足我们的情感、智力和精神愿望，以及与人类同胞的共存。技术的建立应该是为了帮助我们实现这一追求，而不是引导我们远离它。
我们应该珍惜和重视这些使我们成为人类的无形品质。只有当我们这样做的时候，我们才能创造一个技术为我们的基本目标服务的未来：一个有意义的目的和实现的生活。
