【摘要】 4月3日，VR陀螺讯，TaoAvatar是阿里巴巴研发的实时3D数字人生成技术。可根据多视图序列生成逼真、拓扑一致的3D全身虚拟形象，姿势、手势和表情均可完全控制。该技术基于阿里自研的3D高斯溅射技术，通过MLP网络优化非刚性变形，支持高分辨率渲染且存储需求低，可以构建照片级逼真的3D全身数字人。该技术能让数字人在Vision Pro等移动和AR设备上以每秒90帧的速率运行，该系统可根据音频内容动态生成面部表情和手势，实现唇部动作、表情和动作之间的自然同步。其在3D空间中能聆听、能说话、有表情、有动作，同一数字人可瞬间切换职业/服饰，未来可应用于AR电商直播场景等。
【关键词】阿里巴巴，3D数字人，TaoAvatar
【摘要】 3月31日，VR陀螺讯，Meta研究人员展示了生成式人工智能如何通过单个图像创建逼真的虚拟现实环境。想象一下，能够从单个图像创建3D环境，然后使用Meta Quest进行探索或将其用作头显的主页环境。Reality Labs Zurich的一个研究团队希望将这一愿景变为现实，并提出了一种实现这一愿景的新方法。根据上周发表的研究论文，虽然现有的生成式人工智能模型可以根据单个图像创建视频，但它们难以生成完全沉浸式的场景。研究团队Katja Schwarz、Denis Rozumny、Samuel Rota Bulo、Lorenzo Porzi和Peter Kontschieder写道：“我们的主要见解是，从单一图像生成3D环境这项任务本质上是复杂且模糊的，但可以分解为一系列更易于管理的子问题，而每个子问题都可以用现有技术解决。”研究人员这样解释他们的方法：“我们的流程包括两个步骤：使用预先训练的扩散模型生成连贯的全景图，并使用度量深度估计器将其提升到3D状态。然后，我们通过在渲染的点云上调节修复模型来填充未观察到的区域，这需要微调。”最终得到结果是使用高斯溅射渲染的3D环境，可以在VR头戴式设备上的2米（6.5英尺）立方体内查看和导览。该方法适用于合成图像和照片，甚至场景的文字描述也可以用作输入，以生成适合VR头显的高质量3D环境。研究论文还提到了一些限制和挑战。例如，很难将可导览区域扩展到两米以上，因为这大大增加了任务的复杂性。此外，该管道尚不支持实时场景合成。然而，一旦创建了高斯溅射环境，就可以在VR设备上实时显示，研究团队写道。
【关键词】Meta，Quest，3D环境
【摘要】 3月31日，VR陀螺讯，mocopi如今可作为手部传感器连ContactGlove动捕手套适配器。该适配器用于将mocopi移动动作捕捉系统连接到Diver-X的ContactGlove和ContactGlove2动捕手套上，结合使用mocopi的12个传感器进行全身动作捕捉和使用Diver-X的ContactGlove进行手部跟踪，将变得更加容易。mocopi的官方角色“RAYNOS-chan”通过佩戴适配器，她实现了弹奏吉他的动作捕捉。此外，作为购买适配器的奖励，用户还可以获得Diver-X官方角色“Diver-X-chan”的虚拟形像。
【关键词】索尼，动捕手套，适配器
【摘要】 3月31日，VR陀螺讯，Tobii和CitrusBits已签署协议，将眼动追踪技术和Tobii Ocumen集成到新的CitrusBits IntelliXR查看器中，这项合作将促进、改善和优化医疗培训、诊断、通过XR眼镜进行康复以及通过实时信息对患者进行护理。通过整合两家公司的软件和硬件，可以实时监控用户行为，适应不同的光学系统，保证数据隐私，并符合所有卫生法规和标准。CitrusBits首席商务官Gaurav Malik表示：“CitrusBits IntelliXR将在尖端技术和实际健康应用之间架起一座桥梁。通过将眼动仪与XR相结合，我们将为医疗保健专业人员提供更智能的工具，以优化培训、完善诊断并最终改善患者的治疗效果。我们的目标是在未来三年内为超过100,000人提供服务。”Tobii集成高级副总裁Emma Bauer表示：“通过深入了解人类的注意力和行为，眼动追踪技术正在改变医疗评估和治疗。我们与CitrusBits的合作将Tobii的眼动追踪技术推向了前沿，使XR应用变得更强大、更准确、更有效。”
【关键词】Tobii，医疗，眼动追踪
【摘要】 3月31日，VR陀螺讯，近日，Meta面向开发者推出了v74版本的Quest SDK，开发工具首次引入了一个名为拇指微手势的新特性。简而言之，该功能为手势交互新增了更多精细化操作选项，如左右滑动拇指可以切换视角、移动手腕可以快速选择传送位置等。在开发工具中，里面提及了数种全新的手势玩法。值得一提的是，Meta还将这套拇指微手势方案用于开发sEMG神经腕带，有传言称神经腕带可能会在今年Meta的AR眼镜新品有所亮相。
【关键词】手势交互，SDK，Quest
【摘要】 2月28日，VR陀螺讯，日本东京大学风险投资公司commissure开发出了一款名为“SenseFuse”的力触觉传感系统，该系统采用了独特的专利技术。SenseFuse能够在估算人体手部肌肉纤维运动产生的力的同时，获取指尖的振动并进行流式传输，获取的力触觉数据可在该公司的力触觉反馈系统FeelFuse上回放。该设备的另一个主要特点是不覆盖手部的设计，因此可以在不干扰手部跟踪的情况下收集与物体互动相关的力触觉数据。由于其开放式设计，它还不会干扰内置于XR设备中的基于摄像头的手部追踪。为了充分发挥FeelFuse的潜力，commissure正在为Unity准备一个SDK，可以动态根据用户的手部动作产生触觉反馈。不仅可以针对特定事件触发固定的感觉，还可以连续地播放来自用户和虚拟环境之间的实时交互的触觉数据。Unity SDK预计将于2025年春季发布。
【关键词】commissure，SenseFuse，力触觉
【摘要】 2月28日，VR陀螺讯，名古屋大学和丰田合成集团开发出了专门治疗前臂疾病的远程触诊系统原型。开发团队计划在新加坡国立大学医院和名古屋大学医院之间进行示范性测试。该远程触诊系统的开发是日本规模最大的核心性研究开发机构NEDO“利用人工智能开发创新远程技术项目”的一部分。该项目从2021年持续运行至2024年，由名古屋大学和丰田合成实施。这次，其开发团队在对基于神经科学的触诊定位及其对患者的影响进行了理论验证后，建立了一个系统，使医生能够准确地进行远程触诊。演示试验表明，前臂和手腕的疼痛和关节疾病，如网球肘（肱骨外上髁炎）等疾病，可以通过远程触诊得到充分诊断。
【关键词】触觉反馈，医疗，远程诊断
【摘要】 2月28日，VR陀螺讯，三星电子宣布与韩国浦项科技大学（POSTECH）在学术期刊《Nature Materials》上联合发表了一篇研究论文，详细介绍了Achromatic Metalens（消色差超构透镜）的开发情况。据三星称，这篇题为《Roll-to-plate printable RGB-achromatic metalens for wide-field-of-view holographic near-eye displays》的论文反映了三星和POSTECH联合研究团队的研究成果，他们开发了一种没有色彩失真的消色差超构透镜，并将其与全息显示器相结合，以解决各种光学缺陷和不规则问题。三星表示，新的研究成果可以支持紧凑型、高品质全息XR可穿戴设备和沉浸式媒体设备的开发，以及各种光学系统（包括显示器、摄像头和传感器）的开发，从而提高性能并缩小尺寸。
【关键词】三星，Metalens，透镜
【摘要】 2月6日，IT之家讯，歌尔股份控股子公司歌尔光学科技有限公司（以下简称“歌尔光学”）日前在美国SPIE（国际光学工程学会）AR|VR|MR大会上，发布采用表面浮雕刻蚀光栅工艺的全新AR全彩光波导显示模组Star G-E1，实现在AR光学镜片先进刻蚀工艺的新突破。歌尔股份公告称，Star G-E1模组采用高折射率材料和表面浮雕刻蚀光栅工艺，具备“高均匀性、高亮度、低杂光”等特性，即使在亮光环境下也能保持“清晰舒适的显示效果”。这一工艺突破了传统纳米压印技术在高折射率材料应用上的瓶颈，提供更广泛的折射率选择，同时具备更强的耐紫外线性能。通过优化光栅材料和结构，Star G-E1可实现5000尼特的峰值亮度。其亮度均匀性超过45%，色差小于0.02，对比同类技术方案分别提升约50%和100%，减少了图像颜色偏差，提升色彩表现。另外，Star G-E1采用单层光波导镜片，厚度0.7毫米，并采用Micro LED显示方案，光机体积小于0.5立方厘米。
【关键词】歌尔光学，AR，光波导
【摘要】 1月15日，VR陀螺讯，Plessey Semiconductors是一家嵌入式技术开发商和AR/VR/MR显示应用的Micro-LED技术提供商，该公司最近宣布，与Meta合作开发出了声称“世界上最亮的红色Micro-LED显示屏”，适用于AR眼镜。Plessey表示，新型红色Micro-LED显示屏在高分辨率（<5um）下可提供高达6000000尼特的亮度，并且功耗极低——克服了AR硬件的关键技术挑战，该公司相信这将有助于为下一代计算平台铺平道路。2024年，Meta发布了AR眼镜原型“Orion”，Plessey称该成果是“几乎所有现代计算领域”的突破性发明。Meta的Orion AR原型将普通眼镜的外观和感觉与AR的沉浸式功能相结合，这得益于其业界领先的70度FOV、碳化硅高性能波导、定制芯片、Micro-LED微显示器、集成输入系统以及其他高端AR功能。作为与Meta达成的长期商业协议的一部分，Plessey表示将继续与该公司合作，致力于其制造业务，以支持原型和新技术的开发，以供XR产品使用。
【关键词】Meta，Plessey，Micro-LED
【摘要】 1月8日，金融界讯，2025年1月7日消息，国家知识产权局信息显示，中国移动通信有限公司研究院、中国移动通信集团有限公司取得一项名为“虚拟现实空间中行走重定向控制方法、设备及存储介质”的专利，授权公告号 CN 112799502 B，申请日期为2019年11月。天眼查资料显示，中国移动通信有限公司研究院，成立于2006年，位于北京市，是一家以从事研究和试验发展为主的企业。企业注册资本None。通过天眼查大数据分析，中国移动通信有限公司研究院参与招投标项目1428次，知识产权方面有商标信息233条，专利信息5000条，此外企业还拥有行政许可3个。
【关键词】中国移动，虚拟现实，专利
【摘要】 1月6日，同花顺财经讯，近日，英伟达公司在美国专利及商标局官网上公布了一项名为“无背光增强现实数字全息技术”的AR眼镜专利(专利号US20250004275A1)。据悉，该专利由英伟达在2024年6月提交申请，并于2025年初正式对外公开。该专利技术摒弃了传统的背光系统，转而采用数字全息和环境光干涉技术，通过特定的光学设计和基于深度学习的神经网络控制系统，实现了更为自然和清晰的虚拟图像呈现。这意味着用户无需依赖传统的背光显示器，就能在各种环境条件下获得更加清晰、细致的AR体验。
【关键词】英伟达，AR，数字全息
【摘要】 1月3日，财联社讯，从国内侵入式脑机接口公司上海脑虎科技有限公司获悉，该公司自主研发的高通量柔性脑机接口产品近期在复旦大学附属华山医院开展了语言解码临床试验研究，两位语言功能受损的患者术后状况良好，有望重建语言功能。受试者实现了意念实时合成汉语、驱动“数字人”以及对话大语言模型等高级功能，还能将人的脑电解码成语言进而转化成指令实时操控灵巧手，实现人机交互。
【关键词】数字人，脑机接口，人机交互
【摘要】 12月31日，VR陀螺讯，2024年8月，Meta对外透露将于2025年1月取消对Instagram平台AR滤镜创作工具Spark AR的支持，对于该决策，当时企业并没有对外透露太多细节，而现在事情开始趋于明朗。近日，Instagram CEO Adam Mosseri分享了一个名为Movie Gen的AI滤镜功能，用户可以通过简单的文本提示改变“视频的几乎任何方面”。在视频中，可以看到Mosseri不断在改变服装、背景以及装饰等内容，而这些都是基于AI生成的。Mosseri在Instagram平台表示，“我对Movie Gen感到非常兴奋，这是我们早期的AI研究模型，它可以让您通过简单的文本提示更改视频的几乎任何方面。”尽管他没有给出Movie Gen的上线时间，但他表示，Meta希望在明年某个时候将该功能引入Instagram。
【关键词】AI，Instagram，AR滤镜
【摘要】 12月31日，VR陀螺讯，近期，Meta为Quest头显v71系统引入了一个名为“音频到表情”（Audio to Expression）的SDK，它是一种AI模型，能够分析用户的语言和声音细节从而更好地驱动Avatar的面部表情。早些时候，Meta Avatar声音驱动所采用的是Lipsync SDK，它只能使Avatar的嘴唇动起来，表现一般。现如今，“Audio to Expression”可以进一步模拟还原说话、大笑、咳嗽等表情动作，有效增强化身的感染力。“Audio to Expression”方案不需要接入面部追踪系统，此外，它相较于Lipsync SDK的硬件开销也更少，只需消耗一小部分CPU算力以及内存。只不过它目前仍无法描绘眼球运动，因而后续仍需要引入眼动追踪。“Audio to Expression”可以应用到Horizon Worlds、VRChat等VR社交应用当中，从而获得更加真实的体验。
【关键词】SDK，Meta，AI
【摘要】 12月31日，VR陀螺讯，2024年9月，Meta展示了其最新的AR眼镜原型Orion，产品的一大看点在于配备了无线计算单元。这不免让人感到好奇，无线计算解决方案能否同样应用于头显产品？近期，Meta CTO Andrew Bosworth在Instagram直播时提到了关于这一个问题的看法，他认为无线计算单元并不是头显的最优解。“我们已经研究过很多次了。无线计算单元根本不能解决问题。如果你使用的是无线设备，那么头显上仍然有电池，这是导致重量增加的主要原因。当然，这套方案会获得更多散热空间，因此性能可能会更好。但别忘了考虑无线电所受到的带宽限制。”当然，成本也是一大制约因素，Bosworth指出，“你的成本大幅增加，因为即使你的主要芯片放在无线计算单元中，你仍然需要相当多的芯片来为显示器供电、进行所需的本地校正以及数据流处理。所以最终结果就是......数学不起作用，这就是我要说的。它最终并没有为你节省那么多重量，反而大大增加了你的成本和复杂性。”
【关键词】VR，Meta，Quest
【摘要】 12月27日，IT之家讯，根据美国商标和专利局（USPTO）最新公示的专利，三星获批一项智能眼镜专利，概述了一种全新的扬声器设计，可以保护其免受电磁干扰。电源线和扬声器彼此靠近时，由于电源线产生的磁场，扬声器会产生噪音。科技媒体91Mobile在博文中，介绍称三星通过一条部分重叠扬声器线圈中心区域的电源线，平衡线圈磁场，减少其他组件的电磁接口产生的扬声器噪音。专利文件显示，该可穿戴设备有一个外壳，其中包括扬声器、电池、电源传输结构和光输出模块（用于显示/输出图像）。至于三星可穿戴设备的设计，它与其他任何智能眼镜一样，正面有两个椭圆形镜片，镜腿容纳所需的传感器，还将配备一个触摸传感器，用于检测触摸，以及一个压力传感器，用于测量触摸力的强度。
【关键词】三星，AR眼镜，电磁干扰
【摘要】 11月30日，VR陀螺讯，近日，谷歌提交了一份名为“自适应曝光的注视点图像”的专利申请，该技术可以基于用户的注视点自动调整VR/AR中的环境曝光。尽管人类的眼睛可以在现实世界中自动调整曝光度，但终端设备却不具备这种能力。专利文件中提到，“（早些时候）在向用户显示图像的过程中，捕捉到的图像细节会丢失。”谷歌利用红外眼球追踪来监测用户的注视并确定“注视点”。系统会在此点周围应用“高斯掩模”，这是一种在用户焦点周围创建模糊区域的技术。高斯掩模内的每个像素都会单独调整以修复曝光，然后将生成的注视点图像流回用户。除了可用于调整画面图像外，注视点技术的引入还可以降低设备的计算负载。
【关键词】AR，专利，注视点
【摘要】 11月30日，VR陀螺讯，有消息称，三星将推出具有AI功能的智能眼镜，并将其作为智能手机配件进行销售。此外三星还将推出一款具有竞争力的XR头显，以挑战苹果Vision Pro。三星在欧洲公布了一项专利申请，主要针对下一代XR头显。其指出，设计的可穿戴设备可以为用户提供佩戴便利。还可以提高空间效率，并提供制造的经济可行性。这款XR头显的各个方面也有被提及，例如声音输出模块、音频模块、显示模块、传感器模块、触觉模块、摄像头模块、电源管理模块、电池等均有提及。其中的人工智能模型可以通过机器学习生成。人工神经网络可以包括深度神经网络（DNN）、卷积神经网络（CNN）等，人工智能模型可以另外或替代包括硬件结构以外的软件结构。该专利深入探讨了头显的构造和附加功能。在三星的欧洲专利申请WO2024237661中查看所有内容。
【关键词】三星，专利，XR头显
【摘要】 11月30日，VR陀螺讯，11月26日，小鹏汽车公布了一项名为“一种基于VR头显的机器人遥操作系统、方法和设备”的专利。该系统通过集成动捕设备、VR头显、上位机和机器人，旨在实现对机器人的高精度控制。据摘要显示，该系统的核心在于动捕设备采集被穿戴人员一个或多个身体部位的位姿数据，并传输至VR头显。VR头显对这些位姿信号进行滤波处理，并将处理后的数据与VR头显自身的位姿一同发送至上位机。上位机依据机器人控制算法，对接收到位姿数据进行处理，生成至少一个控制信号，并发送给机器人。机器人则根据这些控制信号执行相应运动，通过增加机械臂的冗余自由度，有效解决了机械臂在奇异位置失控的问题，从而显著提升了对机器人的控制精度。
【关键词】VR，机器人，小鹏汽车
