以自我为中心。这是一个奇怪的词。对于Facebook而言，关于AR和VR，这意味着计算机将按照您的感知开始处理这个世界。这是我们似乎已经走向的一个奇异未来的基石，助手和通知以及社交媒体将在我们已经寻找的地方与我们会面。或我们似乎正在寻找的地方。
虚拟现实在使我们感到自己处在其他领域已经很出色了，Facebook的Oculus Quest 2完善了这种能力。但是增强现实是一个陌生的野兽。Facebook正在计划明年使用智能眼镜，但是已经开始进行世界扫描的AR技术的现场测试，这可能还要花费几年的时间。该公司的AR / VR部门Facebook Reality Labs的首席科学家Michael Abrash表示，所需的未来界面尚未破解。
在Facebook的虚拟Connect会议上，这通常是在会议中心举行的VR和AR活动，该公司期待新的神经接口(由CTRL-Labs开发的臂章，这是去年收购的)和眼镜，这些眼镜将构建3D世界地图，探索如何开发人工智能以从我们的注意力中学习。
将智能眼镜与助手结合在一起的想法使我想到了威廉·吉布森(William Gibson)的最新著作《代理商》(Agency)或蒂姆·莫恩(Tim Maughan)的《无限细节》：听起来很奇怪，听起来很恐怖，听起来也很疯狂。我实际上与Abrash交谈(通过视频聊天，而不是VR)，讨论接下来会发生什么。为了清晰起见，对此转录进行了轻微编辑。
真正的AR眼镜听起来好像还遥不可及，但Facebook智能眼镜即将问世。您认为智能眼镜和AR眼镜之间的区别是什么?随着时间的推移，您认为可能会包含或添加哪些功能?
关于AR眼镜的对话通常是个性分裂。每个人都看到AR眼镜是电话之后的东西。有这样的进展：台式机，笔记本电脑，智能手机，AR眼镜。而且在每种情况下，当这些事情出现时，它们所做的事情与前任完全一样，实际上使它们更糟。他们只是让它们变得更可用了……确实，您想到的是第一款iPhone，它做了一部手机可以做的事情：它上网不畅，而且听音乐。所有这些您已经可以做的事情。
毫无疑问，这将成为人们为什么开始戴智能眼镜以及从长远来看真正的AR眼镜会做什么的重要部分。您如何留言?您如何获得导航?绝对有价值。
然后有第一台计算机问世的类比。第一台个人计算机没有实现您以前执行的任何操作。实际上，这是您与世界互动方式的质变。我的意思是，您可以说电子表格就像使用计算器，但不像使用计算器。甚至文字处理器也不像使用打字机。
关于AR，有两点确实是独一无二的。一种是共享虚拟持久对象。拥有这些事实是一个根本性的改变。它基本上使世界成为各种事物的索引，从而使其成为共享环境。那是显而易见的。不太明显的是一个助手，它实际上可以成为您的扩展。
我不知道，从40年后的今天，人们将真正在AR和VR中做什么。人们说，对于VR中的协作，它与现实世界的协作有多近?我认为答案确实是，它能改善多少?
这两件事-可共享的虚拟持久性对象(它成为世界的索引)和该个性化助手-如果您回顾退休的那一天，并且涵盖了整个革命，那么您认为真正重要的是什么改变了世界，这将不再是当今人们的想法……这就像社交媒体如何改变了世界。在线零售。我们看不到它将是什么，但是它将是。
这就引出了一个问题：我知道使用3D映射的Facebook构想也是其他两家公司映射空间的构想。这让我考虑使用不同的OS版本和不同的应用程序时所处的位置。您如何看待AR中的解决方案?您是否拥有不同的操作系统或应用程序?是渠道吗?您看到互操作性了吗?
我个人认为它更像是互联网，只是互联网将是数据量的几个数量级。因此，它必须与操作系统无关，对吗?您会疯狂地说，好吧，您只能通过Windows使用互联网。我将其视为不依赖于平台且不能依赖于平台的东西。您知道这些事情总是会发生的：达到标准需要很长时间，需要确定要达到的目标。最终，我认为那将会发生。
好吧，我想到了互联网。它的构建方式与所有追求世界地图的公司相比。目前，在VR中，Oculus无法与iOS和Android上的手机应用程序互连。您是否看到我们之间将开始有交流?
实际上，这就是我所说的产品方面的考虑。您知道，我确实是思考未来前景的人。所以说真的，我的看法是，最大的诀窍是使其正常运行，使其开始自举，这就是我们正在尝试做的事情。然后，它的出处在我的手中。因此，我想说的是，敬请期待，这将需要数年时间。
我很好奇，您如何看待未来几年AR和VR之间的鸿沟?显然，将会有多种设备，明年智能眼镜将以某种形式出现。您是否认为VR是桥接许多这些AR工具的一种方式?随着时间的流逝，智能眼镜会满足人们的需求吗?
我认为在这里真正架桥还需要一点时间。因为我看的是VR，我说你有基础设施，有散热设备，有电源。我的意思是，您在那里拥有更多功能。这并不意味着您不可能在AR中做某些事情。但是例如，您想坐在VR会议中，有一个100度的视野，这意味着您实际上可以看到坐在虚拟桌子周围的人。您在AR中进行操作，可以看到您正在看的人，但是您对外围设备没有任何了解。这些小细节加深了体验上的巨大差异。
FRL Research的腕部界面可通过VR头盔导航：肌电(EMG)腕带可以感应运动神经元，从而发出预期的手指运动信号。
VR可以绘制黑色，因为它控制着每个像素。AR实际上不能画黑。它是添加剂混合。您不会从中得到太多的脆度。因此，我认为您会看到AR随处可见的东西，这些眼镜基本上没有提供丰富的体验，但是以某种方式可以传播到您更多的生活和更多的人中，而VR可以满足我的需求调用具有高价值的丰富重量级体验，但是在谁使用它们以及在哪里使用它们方面受到限制。
您可以拥有一个混合现实的VR耳机，假设您可以一直佩戴。这样您就可以很好地控制体验。但不被社会接受，重量不足以始终可穿戴。我的意思是，您还遇到其他这些问题。我一直觉得AR和VR就像一个水气球...当您尝试将所有轴准确地放置在所需位置时，您无法将其中的每个轴都挤压到那里。因此，最大的分歧确实是，您是基于位置的基础设施，电源和热力设备，还是您生活中每时每刻的一部分?这两件事还无法合并。
我对你说老实话，实际上我真的不知道那里有什么计划。有什么可能。我的工作实际上是考虑从现在开始的五年后，乘积会乘以整数。我不是要淡化这项工作。我的意思是，已经完成的抛光工作可以一直追溯到[Oculus] DK2 -想想我们在DK2上所处的位置以及现在的位置，这真是令人惊讶，它在做这些事情上有多好。但是我在想，好吧，现在我们该如何改变这种经历?如果您获得焦点深度会怎样?如果您有触觉，会发生什么，因为过去我曾经谈论过触觉手套。如果您的音频被完美地空间化会怎样?只是说[关于Quest 2]，并不是说我不重视它，这并不是我的主意。
CTRL-Lab与神经输入的结合确实令人着迷。我考虑的问题甚至包括健康传感器或其他生物识别技术，以及它们如何成为方程式的一部分。您会在其中扮演什么角色?
确实有潜力-已经讨论过一个单独的团队。我对构建平台有这种特定的见解。然后，类似的东西就是平台支持的功能之一。那么，我们如何做到让您戴着那些眼镜呢?您今天早上醒来，戴上了眼镜。他们一直呆在你的脸上，直到你今晚睡得像我一样，对吧?问题是，我们如何让眼镜在那里?一旦它们到达那里，所有其他所有这些都会随之而来，但是由于您所谈论的原因，您不会让人们戴上眼镜。
我也在考虑那种以自我为中心的想法：眼动追踪和空间音频。注意似乎是图片的一部分。现在看来，这和您将要遇到的一样多。这绝对像是与VR不同的舞蹈，感觉更像是我正在努力使事情变为现实。当AR正在读取您的信息以帮助您浏览更广阔的领域时，是什么?
我喜欢它，因为这意味着我的演讲实际上传达了信息。您刚了解它的核心。我认为，尤其是AR眼镜，基本上可以说是您的扩展，因为它们将与您的感知和行为紧密相关。听力的东西说，如果您可以自己动手听，这就是您会听到的声音。您不是在说，“为我做，为我做。” 它只是自动将信息带给您。您还可以想象对比度增强功能适用于在弱光下视线不好的人，例如我的家人通常不喜欢的人。它也可以帮助您记住事情，因为它可以理解您的上下文。
认为这是什么，只要您工作得更好，您就不会做自己。如果您的记忆力更好，如果您的眼睛更好，如果您的耳朵更好。因此，这确实是您的扩展和增强，这与说这是一种您可以操纵自己想要做的事情的设备完全不同。今天是这样运作的。
几年前，我读了海伦·帕帕吉安尼斯(Helen Papagiannis)撰写的一本有关增强现实的书，《增强人类》(Augmented Human)，这使我对增强现实的想法从视觉上转向了其他感觉。像空间音频。这几乎就像周围的事物，您的感官意识可以采取多种形式。这是无所不在的事情吗?
人们总是想到视觉效果，因为我们是视觉生物，对吧?这是嘶嘶声。音频，人们非常低估了音频的功能。对于最近的空间音频事件，我感到非常遗憾的一件事我们所做的是，由于，我们无法进行演示。有一个特定的演示，当您周围发生动作时，他们会在您的耳朵中录制双耳音频，然后完美播放。而且，您不仅无法分辨出两者之间的区别，而且在某个地方，人会用您的头部周围的剪刀靠近您。即使他们不在那里，您实际上也可以感觉到他们的身体在热。人们不了解真正出色的音频有多么强大，因为他们从未体验过。它比视觉部分更容易处理。构建新的显示系统非常困难，构建新的显示系统以非常紧凑的重量和热预算摆在您的头上非常困难。音频，没有什么需要奇迹发生的地方。
但是，还有您要谈论的另一部分，那就是纯感觉输入。真正想要的是您想要更多有价值的信息。这不仅仅意味着感觉输入。这意味着您的背景和对其他事物的意识。音频可以是文本，就像助手试图使您的世界成为一个更好地满足您的需求的地方一样，而其中只有一部分是感知性的。
由于可实现性，音频似乎是AR眼镜可能的起点。首先是音频，然后是视觉效果。公司已经开始关注音频和智能眼镜，这可能是[Facebook]的起点吗?
您可以制造基于音频的眼镜。但是，我认为每个人都对眼镜将为您做些准备。问题是，什么时候可以获得真正的AR影像?当然，总会弹出一些中间的东西。您听说过智能打字机吗?在70年代，随着微处理器的发展，他们开始制造打字机，在那里您可以拥有一个小的LCD窗口，以便您编辑最后几行。当您犯了一个错误时，您实际上可以返回并修复它。那是一笔大生意。我之所以提出这一点，是因为智能打字机很成功，它们是一个很大的业务类别，而且最近没有人听说过它们。那些中间的事情，人们会做的。北方焦点是一个人在做我称之为能力有限的中间产品的好例子。但是我想在您看到的地方找到它，然后离开并撰写文章，说我已经看到了未来。您会知道它何时发生。您说，这就像您第一次戴上VR耳机一样，这与我从未做过的一样。并不是说“哦，这很有趣”，或者这是一个更好的版本。好像，不，这是新事物。这就是我要在这里构建的。
在今年的一切中，大流行和人们改变的方式是否改变了您的哲学?今年似乎有很多事情强化了这些想法，例如在家工作。但是关于VR的某些工作有效，而有些则无效。事情有失败。
制作个人计算机的是VisiCalc。如果看一下Apple II的销量，曲线的拐点就是VisiCalc。而且，如果您看一下PC的销量，曲线的拐点就是IBM PC。这实际上是关于个人计算机的制造，以便使企业提高生产力。现在，虚拟协作似乎比我更强大。今年，对于所有这些令人恐惧的方面-我一直看着窗外的烟雾和空气质量指数为200，连续第九天是非常糟糕的一年-对我来说，一线希望是全世界都知道我们需要更好的远程工作方式。如果我们拥有五年来一直在谈论的远程协作环境和VR，那么除了疫苗之外，这将是当今地球上最有价值的东西。我是说真的 你会用它。我们将在其中进行操作，每个人都会变得更有效率。所以现在我们永远不会停止思考，对吧?因为您永远不知道是否还会再发生大流行，所以您永远也不知道会发生什么。公司正朝着更远程的方向发展。马克说对我们来说，但我的意思是，公司现在看到它可以工作，但可以做得更好。因此，对我来说，就像是验证这一年。我唯一的遗憾是我们再也没有五年了，因为从现在起五年后，也许我们本可以在那里。公司正朝着更远程的方向发展。马克说对我们来说，但我的意思是，公司现在看到它可以工作，但可以做得更好。因此，对我来说，就像是验证这一年。我唯一的遗憾是我们再也没有五年了，因为从现在起五年后，也许我们本可以在那里。公司正朝着更远程的方向发展。马克说对我们来说，但我的意思是，公司现在看到它可以工作，但可以做得更好。因此，对我来说，就像是验证这一年。我唯一的遗憾是我们再也没有五年了，因为从现在起五年后，也许我们本可以在那里。
我确实相信，随着时间的流逝，这没有任何理由无法实现。无需进行任何奇迹，只需进行大量的研究和工作。但是我对此很有信心。
我很想知道您一直在阅读什么，最近是什么困扰着您。
对我来说，这是虚构的。它不是很多，但是当我拥有时，它触发我说：“我知道这是如何工作的，我知道那是真实的。” Ready Player One，当我阅读它时，我从它中脱颖而出，我很容易地认为其中80%似乎可行，从长远来看，也许所有这些都可行。对于AR，Vernor Vinge的《Rainbow's End》确实是我读过的唯一一本书，我仍然认为[AR]接触不会持续很长时间，但即使您抽搐，界面的服装，就像他实际上在尝试如何与您进行交互，而不仅仅是说我们将完全按照我们多年来所做的事情来做。那两个确实是最开创性的。大多数科幻小说往往更像是“哦，它是VR，Ready Player电影一部电影是：嘿，你知道，这只是一个完整的空白。我们可以做任何事。