中国行业发展报告

【摘要】　　6月30日，VR陀螺讯，当苹果公司在WWDC23介绍他们革命性的Vision Pro空间计算头显时，其技术开发集团副总裁Mike Rockwell上台介绍了新设备背后的关键组件。在Rockwell介绍新的VisionOS的部分时，他指出了该操作系统的“Foveated Renderer”技术。其表示，新的“动态注视点渲染管道能将高图像质量准确地传递到你的眼睛所看的每一帧”。近日，美国专利商标局公布了苹果公司的一项专利申请，题为“带有注视点渲染的透视校正矢量图形”，该专利涉及实现渲染过程的设备、系统和方法，该过程根据从源应用程序收到的信息执行矢量图形渲染。此处披露的各种实施方案包括设备、系统和方法，这些设备、系统和方法通过基于注视有选择地只为某些区域绘制内容，利用从源接收的内容实现注视点渲染。在一些实施方案中，其专利申请中披露的技术可以在具有光学透视或不透明显示器的头戴式设备（HMD）上实现。XR系统可以检测头部运动，并作为回应，调整呈现给人的图形内容和声场，其方式类似于这种视图和声音在实际环境中的变化。

【关键词】苹果，专利，注视点渲染

【摘要】　　6月30日，VR陀螺讯，28日，美国专利商标局正式授予苹果公司一项专利，该专利涉及体育赛事的视觉增强系统、方法和设备，由于它与XR环境有关，因此可以呈现给佩戴Apple Vision Pro的用户。苹果公司在其专利背景中指出，人们已经习惯了在电视上观看体育赛事时显示补充信息。例如，在转播足球比赛时，球场上可能会显示一条黄色的边界线。另一个例子是，在篮球比赛的转播中，比分可能会显示在右下角。然而，当亲临体育赛事现场时，观看体育赛事的人并不能得到同样的体验。苹果公司的专利指出，扩展现实（XR）环境是指完全或部分模拟的环境，人们通过电子设备感知和/或与之交互。例如，XR环境可以包括AR内容、MR内容、VR内容和/或类似内容。通过XR系统，一个人的物理运动或其代表的子集会被追踪，并且作为响应，以合适的方式调整在XR环境中模拟的一个或多个虚拟对象的特征，以符合至少一个物理定律。头戴式系统可以结合一个或多个成像传感器来捕捉物理环境的图像或视频，和/或一个或多个麦克风来捕捉物理环境的音频。头戴式系统可以有一个透明或半透明的显示屏，而不是一个完全不透明的显示屏。透明或半透明的显示器可以有一个媒介，通过这个媒介，代表图像的光线被引向人的眼睛。亲临体育赛事现场的人可能希望了解有关体育赛事当前状态的补充信息。特别是，该人可能希望在不停止观看体育赛事的情况下知道这些补充信息。因此，在不同的实施方案中，一个设备在观看体育赛事的过程中会获得并显示这种补充信息。

【关键词】苹果，HMD，专利

【摘要】　　6月30日，VR陀螺讯，近日，爱尔兰廷德尔国家研究所宣布与Meta已建立为期四年的研究合作伙伴关系，研究范围包含Micro LED微显示器系统的效率等AR先进技术，以应对开发Micro LED的挑战。有消息透露，在这项合作中，Meta将投资500万欧元（约合人民币3910万元）。该项目将由Paul Hurley教授领导，最近他被任命为廷德尔大学和科克大学（UCC）化学学院Meta半导体技术工业主席。Paul Hurley教授指出AR依赖高效率、高分辨率和小尺寸显示技术来提供逼真、身临其境的用户体验。按照Meta此前公布的计划，其将在2027年推出首款AR眼镜，此次合作或有望为Micro LED与AR技术带来很大进步。

【关键词】Meta，MicroLED，AR

【摘要】　　6月30日，新浪VR讯，索尼的重投影系统使PSVR2游戏的帧速率翻倍，但也导致了模糊感。据一位开发人员称，索尼正在改进该系统。据悉，重投影是一种渲染技术，可以渲染人工帧以将帧速率从60Hz提高到120Hz，而不会降低性能。许多VR头显使用某种形式的重投影，索尼的实现并不被认为是最好的。一些用户抱怨依赖重投影的VR游戏图像模糊，因此也难以成为某些VR游戏的卖点。视觉上令人惊叹的PCVR游戏《Hubris》将登陆PSVR2，也使用了重投影技术。在Reddit问答环节中，VR游戏制作人Koen Van den Steen回答了粉丝的各种问题，透露索尼正在开发改进版本的渲染技术。他写道：“我认为从现在开始，PSVR2每次更新都会变得更好，一个很好的例子是他们目前正在研究的重投影系统的未来改进。”

【关键词】索尼，PSVR2，重投影技术

【摘要】　　5月31日，VR陀螺讯，Adobe公司的研究机构Adobe Research已经开发出一种技术，可以使用普通的喷墨打印机在纸上嵌入AR内容。嵌入的数据在视觉上是看不到的，可以用智能手机的摄像头读出来。这项技术将能够创造新的内容，将纸张的触感与数字媒体的互动性相结合。这次开发的技术可用标准喷墨打印机在纸上打印“隐形的AR数据”——通过使用红外吸收墨水而非普通墨水，可以嵌入“人眼不可见但可被红外相机读取”的AR数据。以这种方式创建的文件被称为“StandARone”，是一种纸质-数字混合文件。嵌入StandARone的数据包含显示和操作内容所需的所有信息，这使得它与从URL或QR码调用的AR内容不同，也不需要安装专门的应用程序读取。文档创建者需要使用一个基于网络的专用工具，来设置想要嵌入的AR内容的位置、内容（文本、按钮等）和行为。该工具可以通过拖放的方式直观地操作，使创建AR内容变得十分容易。StandARone被认为能够创建下一代内容，目前，只有2D视觉内容可以在StandARone上创建。然而，未来他们计划增加3D内容和多模态内容（如音频和动画）。此外，还有计划支持AR头显，如微软HoloLens。

【关键词】Adobe，AR，StandARone

【摘要】　　5月31日，VR陀螺讯，依托在光学显示领域的深厚积累，歌尔光学于近日推出新一代单层镜片全彩AR衍射光波导显示模组，其光机体积小于1cc，重量低至1.6g，单层衍射光波导镜片厚度仅0.7mm，FOV 28°，在低功耗前提下入眼亮度可高达700nits，在极致轻薄化基础上，实现极佳显示效果，可满足AR导航、音影娱乐、交互协作等AR场景应用。模组光机基于LCoS 技术开发，采用折叠式偏振光学架构，并有单通道和多通道方案，是目前行业内体积最小、重量最轻的全彩显示光机模组之一，其核心器件均为歌尔光学自主研制。同时，该模组搭载的歌尔光学单层全彩衍射光波导镜片，对超过100个不同的光栅区域进行光学调控，还可以满足客户差异化的外观定制需求及量产服务，以适配不同外形的AR眼镜。此外，歌尔光学此次还发布一款可量产的Micro LED单绿色衍射光波导显示模组，其FOV 30°，入眼亮度高于1500nits，搭配了自主开发的小型化光机（体积0.3cc）和衍射光波导镜片，能较好地满足AR导航、提词翻译等信息提示类应用场景需求。

【关键词】歌尔光学，AR显示，AR眼镜

【摘要】　　5月31日，VR陀螺讯，近日，消息人士指出，三星正着手于开展XR设备主处理器芯片的研发工作，目前其进军XR芯片市场的计划已初具规模，但是更多细节信息尚未披露。今年年初三星Mobile eXperience (MX)部门公布了开发XR设备的计划，该公司认为未来XR终端将会成为继智能手机后的新的增长点。随后，公司内部启动了它们的XR芯片计划，未来三星将有望成为高通的有力竞争者。目前三星拥有系统LSI部门，该部门旨在生产研发面向智能手机、汽车和可穿戴设备的Exynos系列处理器，但该处理器并非XR设备专用处理器。鉴于此，三星正考虑为XR产品开发新的处理单元，或者在原来Exynos处理器的基础之上进行修改以满足XR设备的需求。

【关键词】三星，XR，芯片

【摘要】　　5月31日，VR陀螺讯，近日，VR/AR触觉技术提供商SenseGlove公布了其最新触觉手套产品Nova 2。据了解，新手套配备了主动接触反馈功能，即通过限制手指的运动从而模拟抓握的感觉，该功能是力反馈技术的有效补充，可以还原更为真实的触觉模拟体验。新手套不仅把触觉反馈引入了手指，它还对于手掌区域进行了针对性设计，如可以模拟握手、挤压或打破玻璃杯等感觉。SenseGlove指出，新设备将会在虚拟培训、研究以及多人社交场景中提供更为真实的体验，并改善用户与数字世界的互动方式。

【关键词】SenseGlove，VR/AR，触觉手套

【摘要】　　4月28日，VR陀螺讯，Humane是一家由前苹果交互设计师Imran Chaudhri创办的一家AI软硬件交互公司，今年三月获得了1亿美元C轮融资。近日，在TED演讲上，Chaudhri展示了一款让人印象深刻的可穿戴设备：该产品夹持在衬衫口袋，可以将数字信息投射到手、墙面等任何表面上。在LED演讲过程中，Chaudhri演示了该设备的多种功能，如无需打开菜单即可接听电话、将声音翻译成另一种语言等。此外，它还可以在把干扰降到最低程度的情况下提供重要的信息通知，并可根据喜好提供相应的建议。如向用户提供个性化食谱建议等。Humane的可穿戴设备基于AI技术开发，它可模仿人们与周围世界的互动方式。Chaudhri在TED演讲中指出：“在未来，AI技术将既是环境的，又是情境的。”这款设备的目标是消除我们对于传统屏幕的需求，并在计算方面提供截然不同的体验。“这是很好的人工智能，这是重新构想我们所知道的人与技术关系的可能性。”Chaudhri透露，将会在未来几个月内公布该设备的更多细节。

【关键词】Humane，AI，可穿戴设备

【摘要】　　4月28日，VR陀螺讯，芝加哥大学人机集成实验室发布了一项研究，用户无需穿戴厚重的手套就能在VR中“感受”物体。实际上该装置的硬件部分都被设计在手背处，手和手指可以正常运动，同时接受触觉反馈。这个独特的装置由控制盒、电线和一些连接在手背和手指上不同位置的电极组成。据称设置好的电信号在正面产生触觉，尽管是来自背面的电极。虽然这项研究在VR方面有明确的应用，但该团队认为这个概念也可以应用于康复或假肢。当电信号穿越手部组织，通过前后两边的神经。但手的前部（手掌）的感受器大约是手背的60倍，手掌更容易对电信号敏感。即同样的电刺激作用于两组神经，手掌感受到的会更明显。通过设置，可以稳定地定位11个不同点的触觉反馈。该设备据称能能提供“幻影”般的触觉，因为没有外部设备对手部发力，也不会影响手部的正常动作，所以它不能像其他触觉反馈手套那样对用户的手部进行物理限制。

【关键词】芝加哥大学，触觉反馈，触觉手套

【摘要】　　4月28日，VR陀螺讯，据彭博社马克古尔曼的一份新报告，苹果正在研发一种名为Quartz的人工智能健康指导服务与跟踪情绪的新技术，并计划在今年推出iPhone健康应用的iPad版本，这是其通过健康功能锁定用户的最新尝试。人工智能驱动的健康指导服务旨在帮助用户保持锻炼的积极性、改善饮食习惯和改善睡眠。该服务背后的想法是使用人工智能和用户Apple Watch中的信息来开发专门为他们量身定制的锻炼计划。与苹果的其他服务一样，健康指导服务预计会收取月费。而苹果的健康应用程序将获得用于跟踪情绪和管理视力状况（例如近视）的工具，同时允许用户记录他们的心情。未来苹果希望情绪追踪器能够使用算法根据用户的语音、文本和其他数据了解用户的心情。正如马克古尔曼所指出的那样，苹果早在2014年就开始了健康方面的努力，当时它推出了专用的Health应用程序，然后一年后推出了Apple Watch，苹果为其智能手表增加了多项健康功能，包括跌倒检测和睡眠跟踪。而该公司即将推出的MR头显也将扩展苹果目前在健康方面的努力，因为据了解苹果MR新品将包括一项允许用户在佩戴该设备时进行冥想的功能。

【关键词】苹果，AI，健康应用

【摘要】　　4月18日，TechWeb讯，腾讯云发布消息称，继去年3月顺利“点亮”后，腾讯自研视频编解码芯片“沧海”已经量产并投用数万片。在云游戏、直点播等场景中，沧海目前已面向腾讯自研业务和公有云客户提供服务。在最新揭晓的MSU硬件视频编码比赛结果中，沧海在参加的2个赛道8项评分中，全部获得第一。从各项指标看，在同码率下，相较于业界GPU等标品硬件，沧海能大幅改善画面质量；在120fps的高帧率档位上，同等质量下，沧海比行业领先水平进一步节省10%以上的码率；另外，沧海芯片的单帧1080p的编码耗时仅4毫秒，吞吐性能几乎不受到编码参数、视频类型的影响。

【关键词】芯片，沧海，腾讯

【摘要】　　3月31日，VR陀螺讯，近日，Meta推出了基于Android 12L的Quest v51系统的抢先预览。Meta指出，未来所有新的Quest应用都必须与Android 12L兼容，这一变化将于今年6月30日生效。此前Quest系统基于Android 10开发而来，系统底层更新到Android 12L之后，可以充分利用Quest 2和Quest Pro设备的硬件功能。一些测试人员体验新系统后发现，Quest Pro设备可在连接电脑时开启局部调光（Local Dimming）功能，该功能可以实现更深的黑色以及更高的对比度效果。从对比图可以发现，在没有局部调光功能的情况下，画面显示灰色而不是黑色。由于Quest Pro采用MiniLED背光，它启用局部调光功能时会出现常见的泛光效应，它仍无法做到像OLED屏幕那样控制所有像素点的亮灭。

【关键词】Meta，V51，局部调光

【摘要】　　3月31日，VR陀螺讯，《Rec Room》是一款知名VR社交应用，最初于2016年推出。近日，《Rec Room》面向SteamVR平台推出了全身追踪功能。该功能不依赖于tracker等设备，可以选择性开启或关闭。《Rec Room》在博客中透露了全身追踪功能的一些开发细节：尽管没有tracker，但系统可以根据头、手位置和运动状态来预测Avatar的下半身动作。当Avatar在奔跑时，腿部会播放相应的动画，一旦停止前进，又会恢复真实的腿部姿势。除《Rec Room》外，Meta的《Horizon Worlds》也计划在今年晚些时候通过机器学习为Avatar添加腿部动作功能。对于手部追踪，《Rec Room》表示，它的推出时间要稍晚于全身追踪，这意味着它或许会在今年晚些时候发布。此外，《Rec Room》还在博客中分享了一组由手部追踪驱动的Avatar手部概念示意图。

【关键词】VR，游戏，全身追踪

【摘要】　　3月31日，VR陀螺讯，近日，一些消息透露，KAIST（韩国科学技术院）的研究人员发现了一种可以修改Micro-LED外延结构的新方法。目前制造高效Micro-LED屏幕所面临的一大问题是效率下降，这是蚀刻工艺在像素侧产生缺陷所导致的。像素和显示分辨率之间存在反比关系，像素越小，显示分辨率则越高。像素侧壁率劣化会导致画面暗淡、画质低下等问题，这些问题阻碍了高密度Micro-LED面板的制造。KAIST的研究人员发现，修改外延结构可以抑制效率下降过程，此外，与传统Micro-LED结构相比，它能够将显示器产生的热量减少40%。三星未来技术开发中心在本次研究中提供了相关支持，未来，不排除该技术会被三星用于生产Micro-LED面板，从而提升它在近眼可穿戴设备显示领域的技术实力。

【关键词】三星，KAIST，Micro-LED

【摘要】　　3月31日，VR陀螺讯，SteamVR测试版更新1.26.1已于3月29日发布，该更新主要带来了对VR控制器兼容性的改进。硬件分析师Brad Lynch仔细查看了更新的源代码，并有一个令人兴奋的发现：Valve的下一代VR头显将提供眼动追踪。Valve自主研发的虚拟现实头显Valve Index于2019年6月28日发售，并没有眼动追踪功能，所以新发现的功能只能适用于Valve的下一代VR头显。今年2月，Brad Lynch就表示HTC将接管Valve Lighthouse 2.0基站的生产。由HTC接管后既可以促进业绩增长，同时也为Valve的下一个项目释放了产能。他还指出Valve最近一直在忙于VR方面的工作，只是还没有对外公开。近期关于Valve的新一代VR头显的传闻越来越多，但始终未得到官方确认，此次更新也可能只是将代码用于Valve Deckard等原型的内部测试。

【关键词】Valve，VR，眼动追踪技术

【摘要】　　2月27日，VR陀螺讯，近日，谷歌获得了一项关于试戴系统的专利，该系统可以指导用户选择合适的镜架和元件，以获得适合自己的尺寸，同时也考虑到了眼镜佩戴者的需求。该公司可能正在幕后努力开发AR眼镜，但它也在寻求解决佩戴的舒适度问题。谷歌在其专利中写道，用户可能希望选择和/或定制一个功能适合的可穿戴设备。例如，用户可能希望选择和/或定制一副智能眼镜，以包括选择框架、纳入处方镜片和其他此类功能。特别是在没有零售机构的情况下，现有的此类可穿戴设备的系统不能提供准确的装配和定制。谷歌概述说，它将使用用户的智能手机或笔记本电脑的摄像头，识别AR眼镜上的关键点或为试戴目的设计的复制品。系统将识别关键的装配点，如鼻梁或镜片的边缘。它还可以计算出瞳孔在眼镜框架内的位置，以确保屏幕和光学部分正确排列，使AR眼镜的操作舒适。该系统将检测眼镜和框架的关键点，如果用户有眼科需求，这些测量将被计入贴合性。

【关键词】谷歌，AR眼镜，专利

【摘要】　　2月27日，VR陀螺讯，作为近眼显示设备，VR/AR产品的人机交互方式一直以来备受关注。据彭博社最新消息称，苹果的首款MR头显可能具备“空中”打字功能，并且无需配套iPhone即可独立使用。在最新一期的“Power On”时事通讯中，彭博社的Gurman表示，与Apple Watch相比，苹果的头显不太可能需要与iPhone进行配对才能使用。该设备可以在没有iPhone的情况下进行设置，并独立下载用户所需内容，包括iCloud数据。在头显设置时，从用户的iPhone传输数据将是一个选项，而不是必需的。据称，在最新的苹果MR头显Demo上，苹果已经了支持“空中打字”功能，该交互方式由眼球追踪和手势识别两项技术加持，从而实现文本输入。苹果仍计划在今年6月WWDC上推出第一款MR头显，命名可能为“Reality Pro”，该设备最早将于2023年底发货。与此同时，苹果还在同步开发其他型号的头显，包括定位消费级，配备一般光学显示器件，搭载低端处理器和传感器的“Reality One”，该产品计划在2024年底或2025年推出。

【关键词】苹果，MR头显，手势交互

【摘要】　　2月27日，VR陀螺讯，近期，雷鸟创新与3D全景XR影像技术领导者深圳看到科技有限公司达成合作。3D视频应用“Kandao AR”已上线“雷鸟XR眼镜”APP，雷鸟XR眼镜用户登陆应用即可近距离观赏立体惊艳的3D视频和图片，私享3D巨幕影院体验，感受满满的空间感和沉浸感。随着XR硬件的迭代发展，用户对优质内容的需求愈发迫切。3D内容因其立体真实感强、视觉冲击震撼、体验自然逼真而受到大众广泛喜爱。视觉的三维化也是打造XR空间的重要元素，对XR行业发展具有重要价值。但3D虽惊艳，内容创建却很难，高昂的成本和技术难度都导致了3D内容的匮乏或低质量。看到科技作为3D全景AR影像技术的行业领导者，在3D软硬件领域均拥有核心实力，旗下QooCam EGO是全球首款即拍即看即时分享的3D相机，为用户提供了一个低成本、高效率的3D影视创作工具，同时也带来了丰富优质的3D资源。雷鸟创新与看到科技合作，将进一步丰富雷鸟XR的3D内容生态，并借助眼镜的高清巨幕、出彩音质和便捷交互，为用户打造全方位沉浸体验，随时随地畅游3D世界。

【关键词】雷鸟创新，看到科技，3D巨幕

【摘要】　　2月14日，IT之家讯，2月7日，北京百度网讯科技有限公司“虚拟对象驱动方法、深度学习网络的训练方法及装置”专利获授权。专利摘要显示，本专利涉及人工智能领域，尤其涉及深度学习、计算机视觉、虚拟/增强现实和图像处理技术领域，可应用于虚拟数字人、元宇宙等场景。具体实现方案包括：响应于获取的语音数据，确定初始语音特征；对初始语音特征进行时序增强处理，得到目标语音特征；基于目标语音特征和目标虚拟对象的基准面部图像，生成唇形图像序列；根据唇形图像序列，对目标虚拟对象进行驱动，使目标虚拟对象执行与语音数据匹配的唇部动作。简而言之，这个专利可使虚拟数字人在说话时的唇部动作更加接近真人。值得一提的是，百度此前已经正式对外确认将发布类ChatGPT项目“文心一言”（ERNIE Bot），如果再结合这个技术，那么就能打造更加逼真的虚拟数字人了。

【关键词】数字人，百度，订单增长