网站首页

产品中心

智能终端处理器 智能云服务器 软件开发环境

新闻中心

关于PG电子

公司概况 核心优势 核心团队 发展历程

联系PG电子

官方微信 官方微博
主页 > 产品中心 > 智能终端处理器

扎克伯格45分钟深度采访:透露下个十年VR和脑机接口野心

发布时间:2024-04-22 12:26浏览次数: 来源于:网络

  智东西3月9日消息,今日,Facebook创始人兼CEO扎克伯格在最新接受的专访中,贡献了他迄今为止有关AR/VR最深入的策略分析、行业洞察和见解。

  他不仅阐述超低成本的VR/AR硬件战略,透露第三、四代Quest VR设备的新功能细节,还预判未来十年VR/AR设备出货量将接近智能手机。

  在交谈过程中,扎克伯格金句频出。比如谈AR眼镜产热时,说“你显然不想烫伤任何人的脸”;谈马斯克Neuralink侵入式脑机接口技术时,说“我不认为人们会为了使用VR/AR而愿意把头钻开”。

  相当有趣的是,不知道是不是因为在隐私和App Store控制方面的交火而记仇,扎克伯格仿佛忘了苹果公司叫啥,相当清楚地多次提到苹果的所作所为,就是不说出“苹果”的名字。

  在采访中,扎克伯格还隐晦地表达了对苹果严格控制App Store的不爽,说Facebook的操作系统和芯片投资,将是确保现有平台公司不会扼杀其创造力的一种方式。

  超有料的研发进展、超前沿的一线洞察,都出现在这位VR/AR重要人物长达45分钟的专访中,智东西将此次采访内容完整编译呈现。

  3、正在设计Quest3、Quest 4,将增加眼球追踪和面部跟踪功能,可用来定制逼线、VR头显Oculus 2活跃用户数将超过1000万,之后会达到数千万。

  5、下一版VR头显将能捕捉用户的面部表情,基于多传感器、眼球追踪技术、机器学习等技术,实现更逼线、AR设备比VR设备更难做,最大技术难点在于微型化、散热。

  8、想摆脱苹果、谷歌等厂商的平台限制,通过VR/AR平台搭建布局,占据下一个十年的新终端高地。

  9、到2030年,人们将能用先进的智能眼镜“传送”到其他人的房屋,就像面对面一样地交谈。

  10、VR/AR设备的隐藏优势是减少旅行或上下班时间,智能眼镜可以帮忙应对气候变化。

  扎克伯格:作为社交媒体,我们通过短信、图片和视频,帮助人们沟通互动。社交体验的“顶峰”是让用户感到与另一个人在一起的能力。对于这种“在场感”,现在各种技术都难以很好实现。这就是VR/AR所能提供的,因此我对它充满热情。

  Facebook当下大部分业务是基于他人的平台构建的,对我们来说在下一代主要计算平台,如VR/AR上进行深度投资很有意义。通过自己搭建硬件平台,来确保VR/AR应用实现。

  这会带来许多很棒的体验。我们不再局限于给别人打电话、打视频,而是可以动动手指就隔空传送信息,和不同空间的人坐在同一沙发聊天,将游戏中的人物制作为虚拟对象进行交互……

  这将对我们深刻关注的许多事物产生巨大影响,比如气候变暖。通过VR/AR技术,我们将可以更多的实现在线沉浸式交互,减少汽车、飞机的使用,是我们免于被很多通勤和琐碎杂事拖累。

  我们有很多不同产品线正在研发,其中有一些VR产品线。按照硬件研发逻辑,你需要同时知道接下来三种产品的外观,这与每周迭代的软件开发很不同。我们已经组建团队进行Quest3、Quest4的外观设计。我们研究其中的基础技术,改善光学特性和器件性能,让设备更小、更轻、功能更丰富。

  例如,我对新版本很兴奋的一点就是增加了眼球追踪和面部跟踪功能,可以用来定制逼真的动画头像。

  在AR方面,我们已经宣布了今年将会与雷朋联合推出的首款智能眼镜。眼镜本身不提供AR体验,但这有助于构建一个开发人员生态系统,用以促进该技术未来蓬勃发展。而后,经过几代人研究最终会形成未来的AR眼镜。

  我们也一直在公开谈论一些脑机接口的工作,当脑机接口出现将如何与AR进行交互?这是一个有趣的问题。玩虚拟游戏时,不需要键盘,也不用手操作来操作去。

  除了这些,还有语音和智能助手,也是其中的重要部分。脑机接口在输入、输出方式方面将与VR、AR的工作从根本上交织在一起。

  总的来说,你可以看到我们正在做这些不同的工作,加起来会花不少钱。许多是基础技术和研究,将来会开发出多种产品。这是项大工程,但我们在此不确切的公布人数、预算。

  扎克伯格:我认为这是社交体验和计算平台的未来,自己非常专注于此。我通常一周连一周花时间在上面,这也取决于周围发生的其它事情。显然,我事务繁多。

  不仅是CEO,对大多数人来说,人生就是不仅对正在发生的事做出反应,还应努力朝着前进方向努力。

  我会说,在好日子力我会花更多时间在VR、AR上面。当然,也有好几周我没花时间在上面。但我们有一只出色的团队正在努力。小组负责人Boz (Andrew Bosworth )长期参与构建Facebook多块业务。后来我意识到这是我重点关注领域时,我聘请了一位打造VR、AR消费产品的高管。

  Quest 2将成为第一款主流VR耳机,它发布之后很快超越了Quest,我认为出于多种原因。

  产品进行了重大改进,更轻、更快、屏幕更好,同时更便宜,售价300美元,比Quest还低100美元。内容生态系统和开发人员生态系统也在建立。

  过去一年,由于“非接触”生活方式,我更多地用VR与朋友社交。《亚利桑那阳光》、《Onward》和《人口第一》等都是很不错的游戏。

  购买Quest的价值会随着时间增加,因为随着生态发展会有更多的内容及更新。在过去一年半中,我们做的一件大事就是向Quest中添加了手动追踪功能,只需要通过无线方式付费使用,现在效果不错。

  我一直相信,当你使用的VR吸引了1000万活跃用户时,市场就足够大了,会回馈开发人员。一开始,我们投入很多资金来补贴优秀开发人员。现在,随着我们越来越接近(1000万活跃用户),更多的开发者也被这个生态吸引。

  随时间推移,机会是巨大的。它(活跃用户数)将超过1千万。我认为它会达到数千万。就像在游戏方面,Xbox和PlayStation的受欢迎程度一样。而后,我们再考虑添加AR应用。

  VR和AR是一枚硬币的两面。戴上AR眼镜,你可以看到远方的朋友传送到你的沙发,一起聊天。当你关闭AR功能,又可以用眼镜访问VR内容。我认为,这将是杀手级应用,前景就是下一代计算平台(可以理解为智能终端)。

  扎克伯格:这一直是我们的观念。当Oculus团队加入我们时,我们认为VR设备可能比AR设备更好做,但现在开始做AR也很好,因为VR和AR实际上是同一个生态系统。很多人想到的是AR,但你要想的是未来。

  只要保持手指划过触及信息,交流就会容易很多,你就能做很多事情。我们非常专注于AR,我们还认为VR将成为AR构建方式的重要组成部分。

  我们思考的切入点是所有吸引人注意力的屏幕,包括电话、电脑、电视等,人们花大量时间,沉浸在媒体、游戏等体验中。

  VR技术中的显示器、芯片等很多来自智能手机技术栈得演变,产业链比较成熟。AR显然是不同的赛道,目前任何消费电子中都没有这一技术,它可以拥有一种透明的屏幕,不仅可以呈现对象,还可以把对象放置在现实三维空间的各个点上,尺寸小到可以放进一副眼镜。

  我们没有将投影仪放进眼睛框中的技术,AR是一条需要构建的完全不同的技术道路。我认为围绕3D和空间计算以及生态开发将首先围绕VR进行。

  等到能够构建AR硬件时,生态开发系统已经比较成熟。我一直将VR视为AR彼此的延伸,而不是仅仅思考AR一面。

  扎克伯格:就像我刚才说得,用于AR的技术完全不同。光学元器件、投影仪、显示器以及围绕它们的微型化方面有很多基础技术开发。开发它们最大的障碍之一就是散热问题。

  在VR方面,我们最关注的问题是,如何集成更多的传感器,从而实现更好的交互体验。运行传感器需要更强的CPU能力,并产生更多热量。我们也很想让用户能够拥有逼真的虚拟形象,在虚拟形象上表现真实的表情,与对方进行真实的目光交流。

  这需要什么?需要眼神追踪技术,需要对人的表情有一定的研究,才能使得表情制作更自然。建立虚拟形象(化身)是我们大量投资的事情。制作虚幻引擎的公司Epic就刚发布了一款创建虚拟人类头像的工具,原本设计师需要渲染几周的活,他们只需要一天。而后,我们还需要开发技术和机器学习来批量生成这些化身。

  虚拟化身系统的下一个版本将于今年在我们的头显上发布,随时间推移它将越来越逼真。

  当我们展望十年后的头显,一定是希望它更小巧,并且戴上头显看到周围的常见和真实世界一样清晰、鲜活。背后也有众多挑战。

  现在头显的分辨率很好,但不是视网膜分辨率。即便能再未来几年实现视网膜分辨率,也存在一个问题,即如何使用设备上的芯片为视网膜分辨率水平的实时场景供电,而避免高发热?那是不可能的。显然,这个问题要解决。

  另外,在当下的VR中,显示器上基本上只在一个焦距上投射物体。人眼会尝试变焦观看,但画面本身只在一个焦距投影,因此看不清的东西就是看不清。这一需要解决的问题,称为“变焦”。有必要创建某种液体透镜或者机械移动透镜等技术,来实现变焦。

  但是,就显示来说最困难的挑战,可能还是“高动态范围”。当下,电视在HDR成像方面有一些改善,但是,但是屏幕的生动度(以单位nit来测量)与你的眼睛在现实世界中看到的相比,就差了一个数量级或更多。

  你可能不会希望立刻就进入这样的VR世界,因为色彩、画面生动感都不太满意,VR中的一切都还有些沉闷。

  扎克伯格:为了传达一种身临其境感,就像你与另一个人在一起或在另一个地方,空间音效非常重要。

  如果我们进行一个Zoom视频会议,我基本上能听到你的声音从我面前传来。但实际世界中,声音来自我们四周。对事物所在位置的空间感,对我们处理世界和记忆事物的方式非常重要。

  过去一年,我经历过很多类似现象。我们进行了更多的视频会议,我也用VR技术参加很多会议,即便是相对基础的虚拟形象,即便无法进行真正的眼神交流,VR中人们周围有空间感是多么的强大。显然,当前视频会议要比VR有更多的东西。

  我认为确实被低估的一件事是,当进行Zoom通话,你有一个格子。你并不觉得自己有空间感,对吧?如果你在我左边的格子里,那不意味着我在你右边的格子里。我们没有共同的空间感。

  当我度过一天——有5个、6个或10个会议或诸如此类——所有这些都混合在一起,我不觉得自己和一群人处于一个独特的空间里。

  在VR中,如果你在我的右边,那就意味着我在你的左边,所以我们有共同的空间感。当你说话的时候,声音是从我的右边传来,这个事实进一步证明了这一点,这实际上是你记住的东西,是我们大脑中一种微妙提示。它这能帮你更好地安排整个对话,让你感觉更线年收购的脑机接口公司CTRL-labs?与VR/AR业务什么关系?

  我们正在考虑如何将其VR和AR输入的一部分,会包含所有这些不同的部分,其中一些是控制器,一些是手,一些是声音。随着时间的推移,将有一个重要的方面——脑机接口。

  不同的人尝试过很多不同的策略。我们早期研究的一些东西和一些大学教授研究的东西是,可以直接从大脑的血流中提取一些信号吗?

  就像我们之前说的,如果你想把所有功能都用在一副看起来一幅普通眼镜上,那是很难的。你不能只是对电脑或移动操作系统进行改造,来为输入和输出构建全新的流程。

  想一想,在AR中,你并没有绘制屏幕上所有的像素,只是在不同平面上渲染某些虚拟对象。在VR中,为了达到想要的分辨率,需要做一种完全不同的显示器,着重于凹形渲染(foveated rendering)。

  考虑我们这方面商业利益的最佳方式,可能更类似于谷歌对安卓的看法,他们想创造自己想要的体验。在这一点上,谷歌可能会从安卓上赚到一些钱。但能够确保移动生态系统以他们认为好的方式发展,最终是非常重要的。

  将来,我想这种谈话不应该通过电话或Zoom进行,应该是你们传送到我的沙发上,或者我传送到你们那里,坐在那里。

  我的猜测是我们也会有手机一阵子,我们所做的那部分工作永远是重要的,随着时间推移,它将成为越来越多人的主要平台,由此产生许多很棒的东西。

  如果我们能做建立这一基础——我确实认为在十年内,今天谈论的很多东西都能在一定程度上实现——那将是非常令人兴奋的。这些东西很多将从21世纪20年代开始出现,可能要到2030年或2030年代才能真正达到全面规模。

  当前,包括苹果、Facebook、微软、谷歌在内的许多公司都争相加入AR/VR战争,试图率先拿下这个被视作下一代智能终端的高地。通过扎克伯格的这段专访,我们能穿越到十年后看人类生活如何被VR、AR技术改变,也能回归技术本身,了解VR、AR当下最紧迫的问题和发展节奏。

下一篇:QuestMobile2020中国移动互联网秋季大报告
上一篇:达实智能2022年半年度董事会经营评述

咨询我们

输入您的疑问及需求发送邮箱给我们