Meta的新技术,可能会改变MR行业的未来 - 行业动态 -

当前位置:首页  >  行业动态  > 正文

Meta的新技术,可能会改变MR行业的未来

Meta的新技术,可能会改变MR行业的未来
2023-08-24 09:18:23 来源:雷科技

苹果 Vision Pro 会是未来吗?放在今天依然是一个极具争议的问题,甚至在 Vision Pro 正式推出发售之后,可能也很难达成共识。

另一个毫无疑问的现实是,不管是 VR、AR 还是 MR,XR 头显还有很多需要攻克的技术和工程难题。就说如今,头显稍一用久容易头晕的问题还是存在,这就涉及到了方方面面的问题,包括屏幕分辨率、延迟、亮度以及焦距等,本质上还是大脑不觉得画面足够「真实」。


(资料图片)

虽然苹果 CEO 库克在发布 Vision Pro 时将其誉为开启空间计算时代的「革命性产品」,但实际上 Vision Pro 也不是很「空间」,至少还无法调节焦距,用户看到的画面始终聚焦在一个固定的焦距处,容易导致眼睛疲劳。

不过就在 8 月 6 日开始的计算机图形学顶级年度会议 SIGGRAPH 2023 上,Meta 就展示了两台原型头显—— Butterscotch Varifocal 与 Flamera。当然,我们与其将这两台头显视为产品原型,不如看成 Meta 正在探索的两种技术的展示。

Butterscotch Varifocal 与 Flamera,图/Meta

值得在意的是,Butterscotch Varifocal 将展示接近视网膜的分辨率和变焦光学器件,而 Flamera 则证明了一种实现「透视」真实世界的全新方法。

尽管 Meta 表示这些原型头显上的是技术「可能永远不会进入消费级产品」,但或许也会通向 VR、MR 乃至 AR 的未来。

01

从 25cm 到无限远

真正的「空间」

SIGGRAPH 对大众来说可能名声不显,但却是计算机图形学的顶会,除了论文、学术界与产业界的合作交流,每年都会有研究团队在会上展示计算机图形硬件和软件方面的突破。

去年的 SIGGRAPH 大会上,Meta 就展示了一款 HDR 头显原型 Starburst,峰值亮度达到了惊人的 20000 nit。作为比较,苹果 Vision Pro 的峰值亮度传闻达到了 5000 nit,其 HDR 显示效果已经让一众体验者相当惊艳。

然而相比 Starburst 上的超高亮度,今年两个头显原型上的技术还是更让人在意一些。

对头显有一定了解的读者应该都知道一个参数——PPD(角分辨率,即视场角中每度的像素数),类似于手机上我们常说的 PPI(每英寸像素),关乎实际入眼画面的精细程度。总而言之,如果说手机屏幕的 PPI 达到 326 以后就能称为「视网膜级」,那在头显产品的屏幕上,一般认为 PPD 要达到 60 才能达到「视网膜级」的视觉效果。

Vision Pro 和库克,图/苹果

但在现实中,即便是搭载索尼单眼 4K(双眼 8K)Micro OLED 屏幕的 Vision Pro,参照 Meta Quest Pro(22 PPD)进行估算,距离 60 PPD 也还有一定的差距。

苹果官方宣称 Vision Pro 屏幕共有 2300 万像素(双眼),是 Meta Quest Pro 屏幕像素的三倍多,但具体到每度视场角看到像素数,即 PPD,倍数肯定要小于分辨率的倍数,技术社区 Hacknews 上有人计算得出 Vision Pro 应该在 34 PPD 左右。

而 Butterscotch Varifocal 在上一代原型机的基础上,不仅扩大了视场角,说是也实现了视网膜级别显示的 60 PPD,但要如何实现如此高像素密度的显示屏幕以及算力驱动,目前还不得而知。

同时还有一个对业界来说可能更加重要的技术——变焦。

包括 Vision Pro 在内,目前所有已知的头显的画面都是固定焦距(通常是 1m),屏幕光线没有深度信息,辐辏和调焦的位置发生了分离,从而产生视觉辐辏调节冲突(VAC 问题),引发视觉疲劳、晕眩等问题。

与之相对,实现变焦可以让 VR 体验变得更加真实,视觉上的使用感受也会更舒服。而从 Meta 放出的视频来看,Butterscotch Varifocal 显然是加入了变焦电机,再配合眼动追踪技术,实现了 25cm 到无限远的自动变焦调节。

变焦电机,图/Meta

事实上,不少厂商都尝试在头显设备中实现动态变焦的效果,至少从 2019 年开始,苹果就一直在探索动态变焦显示技术,其中一种方向就是多透镜的 Pancake 方案,通过调整透镜折射率来调节焦距。早前传闻中 Vision Pro 就会采用这项技术,但目前来看并没有用上。

至于即将展出的另一台头显原型 Flamera,则是在目前主流的彩色透视方案外,开辟了一条新的技术路线。

02

彩色透视的未来

一定要大算力?

众所周知,Vision Pro 和 Quest Pro 都是通过对外的摄像头拍摄真实世界,再将画面「拼接」显示在内侧屏幕上,实现用户戴着头显也能看到周围环境,甚至实现 AR 体验。

说起来容易,实现难度极高,Quest Pro 全彩透视的糟糕体验就曾被近眼显示专家 Karl Guttag 炮轰。Vision Pro 目前来看完成度要比前者更高,此前雷科技的文章中,我们就综合了国内外体验者的说法:

「虽然与人眼观看真实世界还有明显差距,但 Vision Pro 不仔细看已经非常接近了,转头也感受不到明显的延迟。」

图/苹果

唯一的问题是,不管是苹果宣传视频中的人物,还是首批体验的媒体和博主,基本都是在固定位置上体验 Vision Pro,只能证明 Vision Pro 在静态下已经有了足够优秀的表现。但当人走动起来,一切计算都会变得更难、更复杂。

这也引出了目前主流方案的问题,由于这些摄像头与用户真正的眼睛位置不同,必须使用图像处理算法以及大量算力来重新「拼接」摄像头拍到的画面,然后显示到屏幕上。这个过程会增加延迟,还会导致视觉伪影。

Flamera 则是想通过一种全新的光学设计,直接捕捉与肉眼看到相同的光线。

「通过从头开始设计头显,而不是修改现有设计,我们最终得到了看起来非常独特的设计,但可以实现更好的图像质量和更低的延迟。」Meta 科学家 Grace Kuo 说。

Flamera,图/Meta

按照 Meta 公布的工作原理,Flamera 与传统光场摄像头不同,在阵列中每个透镜后面都放置了一个孔径(相当于光圈)。这些孔径物理上阻挡了不必要的光线,只有需要的光线能够到达眼睛,同时将有限的传感器像素集中在光场的相关部分,从而产生更高分辨率的图像。

工作原理,图/Meta

最后,原始传感器数据最终看起来像小圆点,每个圆点只包含头显外部物理世界「视图」的一部分。Flamera 将进行重新排列,估计一个粗略的深度图,实现基于深度的图像重建。

得益于此,Flamera 理论上可以实现更低的延迟和更少伪影的透视效果。换句话说,通过头显看到的画面更接近真实的物理世界,实现更好的 MR 体验。

03

写在最后

Butterscotch Varifocal、Flamera 上的技术会改变头显的技术路线吗?眼下可能都还很难判断。

就像前文所提,Meta 也明白,这两台头显原型更多是承担了技术展示的需求,距离解决工程实现问题和量产还有很长的路。

同时 Meta 也没有「把鸡蛋放在一个篮子里」。并没有迹象表明要专注在变焦电机与无重投影的技术路线上,变焦电机的机械式方向始终存在可靠性方面的问题,不仅是面向消费者需要得到足够的信任,在量产环节上可能也要面对更大的挑战。

在此之前,已经有太多消费电子产品证明了「机械」 这条路上的坑,比如全面屏进程中的升降式镜头。

倒是无重投影确实给 MR 提供了一种很新的思路,可以避开对算力的高要求,同时减少延迟和视觉伪影。悬念在于实现的难度和效果,这可能就需要等到日后才能见分晓了。

标签:

(责任编辑:news01)
沙漠王子越剧赵志刚(越剧赵志刚)

沙漠王子越剧赵志刚(越剧赵志刚)

我是小前,我来为大家解答以上问题。沙漠王子越剧赵志刚,越剧赵志刚很
08-19 06:05:53
亚洲日本55页 亚洲日本5566

亚洲日本55页 亚洲日本5566

1、X-JapanX和MJ一样,是世界摇滚历史的标志物。2、5566和飞都不错,但
08-19 01:18:27
福特招聘前苹果高管 Peter Stern,出任新综合服务部主管

福特招聘前苹果高管 Peter Stern,出任新综合服务部主管

IT之家8月15日消息,彼得・斯特恩(PeterStern)于今年1月从苹果公司离
08-18 21:50:45
164个药品通过医保目录初步审查,两款CAR-T疗法和两款“减肥神药”均在其中

164个药品通过医保目录初步审查,两款CAR-T疗法和两款“减肥神药”均在其中

国家医保局发布《关于公示2023年国家基本医疗保险、工伤保险和生育保险
08-18 20:10:08
初秋稻飘香

初秋稻飘香

初秋时节,川东广安市种植的约200万亩水稻相继成熟,连片翻着金浪的水
08-18 19:00:07
江西安义:建设幸福河湖 留住美丽乡愁

江西安义:建设幸福河湖 留住美丽乡愁

人民网南昌8月18日电(记者秦海峰)安义县是江西省唯一一个全国水系连通
08-18 17:24:38
中国空间站收获阶段性应用成果

中国空间站收获阶段性应用成果

中国载人航天工程办公室今天下午召开载人航天工程空间应用与发展情况介
08-18 15:44:49
恒大被爆在美申请破产保护!许家印所图为何?律师解读

恒大被爆在美申请破产保护!许家印所图为何?律师解读

今早,一则恒大在美申请破产保护的消息登上各大热搜榜第一。01传恒大在
08-18 14:36:07
辽宁省2024年硕士研究生考试下半年备考时间表

辽宁省2024年硕士研究生考试下半年备考时间表

19月统考考生进入预报名阶段推免考生进入报名阶段教育部会公布2024年全
08-18 13:23:50
有头发、牙齿!玉林一女子腹内竟长出“怪胎”

有头发、牙齿!玉林一女子腹内竟长出“怪胎”

近日,玉林桂南医院接诊了一名19岁女子小林(化名),小林没怀孕肚子却
08-18 11:53:59
澳媒:澳大利亚用这策略吸引中国游客

澳媒:澳大利亚用这策略吸引中国游客

参考消息网8月18日报道据《澳大利亚人报》网站8月15日报道,澳大利亚探
08-18 10:14:29
地铁机械工程师是做什么的 机械工程师是做什么的

地铁机械工程师是做什么的 机械工程师是做什么的

1、从设备的设计--制造--销售--采购--安装--使用--维护--修理--改造--
08-18 07:58:20
泰国为泰党组建11党联盟 拥有国会下议院314席

泰国为泰党组建11党联盟 拥有国会下议院314席

【泰国为泰党组建11党联盟拥有国会下议院314席】财联社8月18日电,泰国
08-18 06:20:18
洛克王国世界boss身边飘四把武器是什么(洛克王国世界boss)

洛克王国世界boss身边飘四把武器是什么(洛克王国世界boss)

1、有五灵神兽,毁灭伯爵应该也算。2、但是现在世界BOSS的活动已经没有
08-18 03:03:38
恒锋信息最新公告:拟定增募资不超5.03亿元

恒锋信息最新公告:拟定增募资不超5.03亿元

恒锋信息公告拟定增募资不超503亿元扣除发行费用后将用于行业数字化应
08-17 22:21:58
天津新闻 (2023-08-17)

天津新闻 (2023-08-17)

8月17日《天津新闻》的主要内容有:推动京津冀协同发展走深走实,宝坻
08-17 20:52:55
季羡林谈翻译(关于季羡林谈翻译简述)

季羡林谈翻译(关于季羡林谈翻译简述)

,你们好,今天0471房产来聊聊一篇羡林谈翻译,羡林谈翻译简述的文章,
08-17 18:56:23
提升国际消费中心城市美誉度 重庆“两江四岸”十大公共空间基本建成开放

提升国际消费中心城市美誉度 重庆“两江四岸”十大公共空间基本建成开放

新闻发布会现场。华龙网-新重庆客户端记者石涛摄华龙网-新重庆客户端讯
08-17 17:55:47
金杨股份:公司供应宁德时代的产品包括方形封装壳体

金杨股份:公司供应宁德时代的产品包括方形封装壳体

同花顺金融研究中心8月17日讯,有投资者向金杨股份提问,请问公司的产
08-17 16:27:27
比亚迪鼓励举报腐败行为 奖金高达500万

比亚迪鼓励举报腐败行为 奖金高达500万

比亚迪公司于8月16日在其公众号上发布消息,鼓励全体员工、合作伙伴及
08-17 15:00:50
如何解决win10专业版软件不兼容的问题 win10专业版不能运行exe文件

如何解决win10专业版软件不兼容的问题 win10专业版不能运行exe文件

如何解决win10专业版软件不兼容的问题呢,话说不少用户都在咨询这个问
08-17 13:38:30
培育好乡土人才“金种子”

培育好乡土人才“金种子”

乡村振兴,人才是关键。当前,不少优质劳动力返乡、归乡成为“新农人”
08-17 12:01:55
奥福环保:8月16日融资买入22.47万元,融资融券余额2039.83万元

奥福环保:8月16日融资买入22.47万元,融资融券余额2039.83万元

8月16日,奥福环保(688021)融资买入22 47万元,融资偿还21 18万元,
08-17 10:34:59
运动场地、广场大道……宝山这个社区公共空间焕然一新

运动场地、广场大道……宝山这个社区公共空间焕然一新

随着居民对社区服务和居住环境品质的期待和要求逐渐提升,今年,宝山区
08-17 09:17:28
日韩股市低开

日韩股市低开

据Choice金融终端数据,8月17日,日韩股市开盘齐跌,日经225指数跌0 46
08-17 08:09:04
《原神》博物通志水国寻迹第二关方法

《原神》博物通志水国寻迹第二关方法

《原神》博物通志水国寻迹第二关方法时间:2023-08-1705:52:34人气:0
08-17 06:20:20
康健国际医疗(03886):暂停陈振康非执行董事的职务

康健国际医疗(03886):暂停陈振康非执行董事的职务

智通财经APP讯,康健国际医疗(03886)发布公告,于2023年8月16日举行的
08-17 03:00:38
中国恒大突然宣布:会议延期,恒大地产被立案

中国恒大突然宣布:会议延期,恒大地产被立案

中国恒大突然宣布:会议延期,恒大地产被立案
08-16 22:03:12
石狮32家企业获面料行业大奖

石狮32家企业获面料行业大奖

泉州网8月16日讯(记者温文清)记者日前获悉,在刚刚揭晓的“2023中国
08-16 20:49:22
元声象素参编国家信标委《数据要素流通标准化白皮书(2023版)》

元声象素参编国家信标委《数据要素流通标准化白皮书(2023版)》

为深入贯彻落实“数据二十条”,推进数据要素流通标准化工作,形成更加
08-16 18:55:26

为您推荐

精彩推送