• 发文
  • 评论
  • 微博
  • 空间
  • 微信

SIVA2026|诠视科技林瓊:让XR空间感知能力服务物理AI

追焦Focus XR 2026-09-21 11:12 发文

9月9日至11日,由中国国际光电博览会(CIOE中国光博会)和深圳国际VR/AR博览会(SIVA)联合主办,深圳协伴展览有限公司、深圳市增强现实技术应用协会、追焦XR协办的SIVA 2026(2026深圳国际VR/AR博览会)在深圳(宝安)国际会展中心重磅启幕。作为AR/VR领域全产业链核心盛会,今年主要议题涵盖空间计算、光学、AI&AR眼镜产业、沉浸大空间的四场论坛峰会与闭门会、SIVA Awards颁奖典礼也同步举行。

在9 月 9 日下午举办的全球空间计算产业发展论坛上,诠视科技创始人林瓊,以“物理AI与具身智能时代XR的机会与挑战”为主题发表了演讲。

全球空间计算产业于 2026 年迎来新的发展阶段,单眼 4K、手势交互、轻薄分体式形态成为新的发展趋势,终端售价格降低的同时,产品体验大幅提升。另一方面,以轻量化眼镜形态为主的空间计算设备开始走向市场,系统、内容生态、应用场景、AI 融合稳步发展。2026年空间计算产业与物理AI、世界模型等加速融合发展,带来全新的景象。

林瓊回顾公司自2016年创立以来的空间计算探索,从XR与物理AI的关系切入,梳理感知、决策、执行和反馈的闭环。他强调人机协同,提出“人来负责策划,机器人负责执行”,并讨论数据、功耗与实时计算的挑战。

在产品层面,林瓊围绕SeerSense、SeerLens和SeerFusion,介绍公司覆盖机器人感知、XR终端与具身数采的布局。结合时空同步、全身追踪、端侧质检及云端后处理,全面介绍诠视科技如何把XR积累转化为数采和工业应用所需的基础能力。



以下为演讲实录(有删减):

大家下午好!非常高兴在这里能够跟大家分享我们过去十年在空间计算领域当中的探索。说到空间计算,可能要追溯到2019年,当时微软推出了HoloLens 2这样一款划时代的空间计算产品。但那个时候,大家没有人听得懂什么是空间计算。

而诠视科技2016年在硅谷创立以来,我们一直在做空间计算。同一个基础技术平台,迎来了不同的风口,从早期做XR,到今天又迎来了具身智能与物理AI。今天我们就一起看看,同样是空间计算,XR在不同时代的机会在哪里。

谈到XR,第一次说是未来的计算平台,后来又提到5G,元宇宙, 甚至苹果Vision Pro似乎也有所萌动,但都没有起来。现在又迎来了具身智能跟物理AI的发展机遇,今天分享的主题,就是看XR跟物理AI是什么关系、背后的逻辑是什么,在这个场景下我们有什么样的机会与挑战,未来我们往何处去。

首先,从语言到行动智能,AI大模型扮演大脑的功能,具身实际上是执行体,而XR,这里泛指广义的XR,扮演了感官交互接口的角色。

XR提供可视化的交互能力,AI给我们提供了算法决策和具体执行,形成了具身的数据;数据回来又反哺到模型的训练。这样,就形成了一个从感知、决策、执行到反馈的完整闭环。这就是我们今天看到的具身智能,在这样一个进程当中走向自我进化的过程。

这种外部变迁带给我们的机会在哪里呢?首先,加速内容的生成,重塑生产力,例如2D图片快速生成3D模型。另外,改善交互形式,我们所有的眼镜都带有了AI对话能力。再有一个,从感知层面来看,从传统的CV感知变成了基于AI的感知能力。所以说,AI的出现,给XR行业注入了新的能量。

反过来,XR这样一个我们耕耘了十年的技术,对今天物理AI、具身智能这样的时代,大概有什么贡献?首先,从虚拟训练到现实执行,各个环节, 经历Real2Sim、Sim2Sim、Sim2Real这样三个环节,也就是从真实世界到仿真、仿真到仿真、再到从仿真回到真实世界,都离不开XR的基础能力。最核心的一点,就是多模态感知,构建了机器人的感官系统。

另外,从数据角度,也就是Real2Sim的角度,XR的基础能力起到了至关重要的作用。如果没有XR前十年的耕耘,今天物理AI和具身智能会不会发展?就像当时OpenAI的CTO有个评价,没有XR,AI也一定会发展,但可能不会像今天发展这么快。

再有一个,XR技术也提供了高效的仿真能力,包括英伟达提供的从种子数据到数据再生的高效仿真。特别是有了在XR平台上的物理仿真引擎,可以在机器人落地的前期就做到高效仿真,填补了"具身鸿沟"。

今天还有一个重要的变迁,就是VLA模型的生成。它的出现,实际上给XR行业从业者带来了一个巨大的机会。VLA本身是具身最核心的引擎,VLA顾名思义就是vision-language-action。里边的视觉感知,和XR底层的逻辑近似,是多模态的感知,还包括空间与时间上的对齐。

这为XR行业创造了一个新的增长机会。有了AI、有了具身能力,远程遥操与维护、智能产线,包括辅助装备与训练,都将进入一个新的阶段,将会给智能制造带来新的活力。

机会和挑战往往是共存的。

首先,XR领域当中,通常大家说有"不可能铁三角",重量、功耗、算力。今天特别是在XR跟AI结合的时代,对实时AI算力的要求,跟XR这种低功耗可穿戴本身,就是一对矛盾。再有一个,在物理AI的时代,如何解决仿真到现实迁移的问题;再一个,是多模态数据的融合,多模态也不仅是光学,实际上还有听觉数据、力觉数据,但是,机会,解决这些问题的窗口,正是我们的机会所在。

今天谈空间计算和具身智能、物理AI的关联,也免不了谈数据采集。数采的成本、标注和数据安全,都会成为这个时代的挑战。

当然还有一些机器人、虚拟人带来的社会、伦理、分工上的一些挑战。未来机器人会从专用智能迈向通用智能,朝着这个大的方向演变,而首先,数据成为驱动所有性能的基础。

我们作为XR从业者需要抓紧时代给予的机遇,就是如何利用XR的基础能力,来解决具身时代所需要的数据。用XR技术实现数据采集,有不同层级,有遥操,有UMI,还有Ego数据。

在人形机器人蓬勃发展的时代,我们更强调的是人机协同的组合方式,人来负责策划,机器人负责执行。

诠视科技从2016年创立以来,一直专注于空间计算基础能力。今天我们是全球化部署,在中国、欧洲、美国都有相应的主体,形成了三条产品线,一个叫SeerSense,一个叫SeerLens,还有一个叫SeerFusion。

SeerSense是我们最早推出的、面向机器人的空间计算感知部件。SeerLens是基于空间计算和SeerSense基础打造的、面向人,用于辅助人进行沉浸式3D交互的系列产品,就包括了覆盖AR、VR、MR的XR产品。SeerFusion是在这基础上演绎出来的、面向机器人和具身机器人与物理AI的数据采集系统方案。我们的定位,是致力于物理AI时代物理空间智能底层技术平台的打造,这是我们空间智能通向未来的一个桥梁。诠视科技创立至今,从一个底层的算法公司,发展成了一个底层技术基座的公司,并演绎出三个产品系列,覆盖从机器人、到人、到数据这样三大领域,每一条产品线都围绕空间计算的基础能力。

SeerSense这款产品看起来似乎是一个双目模组,但它跟市场上其他的双目模组有重大的区别,大家的定位不一样。我们这款产品是以空间感知、位姿感知为核心定位的,而其他一些竞品更多是从深度感知出发。

SeerLens这个产品系列,我们有基于VST技术路径打造的,类似苹果Vision Pro的产品。用于职业飞行仿真训练、沉浸式游戏,是基于PC的PCMR产品。

也有基于OST技术路径,类似微软HoloLens的产品,迭代了四代。今年也推出了大视场角光波导的产品。

SeerFusion系列是今天我们重点要介绍的。就是迎合今天这个发展时代,面向具身智能的数据采集终端。

诠视科技的优势,不是单一硬件,而是覆盖数据采集、处理、标注、训练与部署的整体解决方案。在终端侧,SeerFusion One、SeerFusion Gripper、SeerFusion Glove、SeerFusion Traq等产品矩阵,覆盖头手眼身、视觉与触觉、全身动捕、高精度头手追踪等多模态采集需求。其中,SeerFusion One承担第一人称多模态数据采集的中枢,同步记录双目RGB、多路鱼眼、IMU、深度与手部追踪等信息,完整还原人类操作过程中的“人—行动—环境—时空”交互链条;SeerFusion Gripper面向精细操作场景,捕捉抓取、装配等手部动作与力觉反馈;SeerFusion Glove提供高精度手部关节与触觉数据,让灵巧操作从“看得见”走向“摸得着”;SeerFusion Traq则实现高精度头手6DoF追踪与空间位姿对齐。由此形成从第一人称操作、手部精细动作、触觉反馈到全身动捕、毫米级与亚毫秒级高精度头手追踪的时空同步,为具身智能训练提供高质量、多模态、时空对齐的数据入口。

在云端,SeerFusion云端数据处理平台提供一站式在线服务:注册即用、零部署、按需GPU、多区域就近处理、多租户数据隔离、一键直传云盘。用户只需浏览器上传数据,选择处理流程,即可把第一人称多传感器原始数据转化为训练级三维运动数据,让“人类完成任务的真实交互”高效转化为可训练资产。

在平台侧,开放SDK与生命周期管理支持主流OS、设备管理、版本控制、仿真与机器人主控接口,帮助客户从单次硬件采购升级为长期平台关系。

具身智能数据采集,难点不在“采”,而在“采得准、对得齐、标得快、用得安全”。

诠视科技围绕高精度多模态时空同步感知构建核心技术底座:硬件时钟、快门控制、内外参标定、跨设备坐标对齐,统一时间轴和坐标系,保证行为因果链与真值一致性。系统支持VIO/VSLAM、重定位、深度融合、三维重建与空间锚点,输出6DoF、深度、地图、点云和空间关系。

在端侧,诠视科技自研算法,实现空间解算、异常检测、质量评分与现场实时反馈,把事后抽检变为过程控制,减少返工。在数据标注环节,智能预标注、辅助工具集与质量智能把关,让整体处理效率大幅提升,综合标注成本大幅下降。

在数据安全与隐私层面,诠视科技通过多方安全计算、联邦学习、同态加密等技术,在“数据可用不可见”的前提下实现联合计算,符合GDPR、CCPA等全球主流数据隐私法规要求,构建安全可信的数据协作生态。

从总体来看,在基于过去十年的耕耘,我们打造了这样一个空间计算的基础平台。

从赋能我们的机器人、AGV,到赋能XR,再到具身智能与物理AI的时代。从Real2Sim到Sim2Sim到Sim2Real这样三个环节,我们三款产品都有它相应的应用场景。所以我们的客户,就包括大模型厂商、具身智能厂商,还包括数据服务厂商。俗话说,诠视科技是做铲子的,提供这样一个基础能力,最后靠大家一起来挖掘今后十年AI数据的金矿。下面是一些案例分享,是基于以前我们XR时代的一些案例,包括今天物理AI时代的这样一些新产品的分享。

一、MR助力智慧机务新范式

中移物联联合诠视科技推出智慧机务解决方案,其中诠视科技MR眼镜作为核心交互终端,在5G网络加持下,实现了飞机蒙皮检测、发动机错漏装检测、部件检测及智能机库等多场景的智能化升级。

几个关键数据值得关注:

国内首套5G飞机蒙皮缺陷手持快速检测系统,成本降至原来的1/7;检测精度从0.2mm提升至0.05mm;一线人员通过自然语言即可完成网络管理,运维成本下降50%以上。

从“老师傅经验”到“可沉淀的数据资产”,从本地终端算力到云端大模型协同——5G+MR的组合,正在重新定义工业检测的效率与精度。

二、6DoF自追踪手柄带来全新的机器人操控体验

极低延迟,实现“人机同频”:得益于边缘端的前置计算能力,手柄无需将大量图像数据回传至电脑处理,决策在本地即可完成。这使得机器人能够实时跟随操作员双手的细微动作,这对于模拟装配、精密操作等动态交互任务至关重要。6DoF全维度输出,采集完整行为数据:不仅是位置(X,Y,Z),更包括姿态(俯仰、偏航、滚转)。左右手各一支,完美对应机器人双臂,系统可同步记录时间严格对齐的(视觉,双手动作)数据组,为后续的模仿学习提供高质量训练集。开放平台,定义专属采集流程:SeerController不仅仅是一个硬件。它提供开放的SDK和基础开发平台,用户可以便捷的集成到现有的ROS生态系统中。

三、以空间计算能力锚定物理AI数据基础设施关键一环

2026年7月,与飞捷科思联合发布FysiData-Ego高精度具身数据采集方案。进一步将数据质量管控前移。通过与飞捷科思物理仿真引擎的深度协同,采集的数据可在采集端侧即完成物理约束验证,将数据质量的判断从“事后清洗”前置到“采集发生的同时”,显著提升有效数据率和后续数据转化率。加入国内首个“物理智能创新联合体”,该联合体由飞捷科思发起,联合中国软件评测中心,复旦、哈工大等顶尖高校,沐曦股份等国产算力龙头,拓斯达、智平方、博雷顿等机器人和实体产业头部企业,以及头部创投机构共32家单位共同参与。旨在打通创新、产业、资金、人才、场景全链路,回应物理AI发展对系统性生态协同的迫切需求。

声明:本文为OFweek维科号作者发布,不代表OFweek维科号立场。如有侵权或其他问题,请及时联系我们举报。
2条
评论

评论

    相关阅读

    暂无数据

    追焦Focus XR

    变局之中,焦点始终清晰。聚焦 X...

    推荐商品

      举报文章问题

      ×
      • 营销广告
      • 重复、旧闻
      • 格式问题
      • 低俗
      • 标题夸张
      • 与事实不符
      • 疑似抄袭
      • 我有话要说
      确定 取消

      举报评论问题

      ×
      • 淫秽色情
      • 营销广告
      • 恶意攻击谩骂
      • 我要吐槽
      确定 取消

      用户登录×

      请输入用户名/手机/邮箱

      请输入密码