【东方通信-半导体】字节世界模型将连接 数字与现实,打开AI广阔应用空间 1、字节将于2026年底前发布世界模型,用户能与虚拟数字世界直接互动。(1)字节世界模

图片

无图片

正文

【东方通信-半导体】字节世界模型将连接 数字与现实,打开AI广阔应用空间

1、字节将于2026年底前发布世界模型,用户能与虚拟数字世界直接互动。(1)字节世界模型定位于一款能够生成实时、可交互三维虚拟环境的人工智能模型。该模型构建一个“可走进”的数字世界,允许用户通过语音指令、头部转动或身体动作与环境进行实时互动。(2)该模型是字节2026年AI四大重点之一,张一鸣亲自督导协调不同业务部门,把AI资源和算力向其倾斜,目标2026年底前至少发布一版。其基于Seedance,用户能以Pico头显为入口与虚拟数字世界进行互动。

2、世界模型强调AI理解物理世界,对空间准确性、长期一致性要求更高。(1)世界模型是AI从理解信息走向理解并模拟物理世界的关键技术,世界模型必须能够理解环境状态、预测环境变化,并且知道不同动作会带来什么结果。(2)世界模型的技术路线包括基于视频生成的世界模型、基于压缩模拟空间的世界模型、基于3D/4D空间表征的世界模型等,基于视频生成的世界模型让已经成熟的视频生成大模型能够根据用户的动作持续生成世界的下一步变化。字节世界模型技术基础包括Seedance 2.5、Seed3D 2.0、SeedRealtime。

3、世界模型可用于XR、游戏、虚拟世界,也用于自动驾驶、具身智能、工业制造等场景。(1)XR、游戏和虚拟内容是字节世界模型、Genie 4等最直接的应用场景,连接云服务、内容平台和Pico硬件。(2)世界模型可以降低自动驾驶测试成本、增加场景覆盖范围;可以扩大机器人训练数据规模、把对未来世界的预测和机器人动作生成结合起来;可以在工业场景对生产线、机器人、设备、物料进行建模,测试不同生产参数。(3)自动驾驶仿真、具身智能训练和工业制造的商业化路径更明确;XR、游戏及虚拟世界的市场想象空间更大。

4、世界模型未来迭代方向包括长时序一致性、全模态感知等,关注XR产业链、数据采集硬件和云计算相关机会。(1)Genie 4当前只能在短时会话中保持一致性,长时序的动态连续性、对外部操作的精准响应有望在未来改善,空间维度提升、全模态感知、云端协同也是世界模型未来的迭代方向。(2)关注XR设备相关的显示、光学、感知、芯片及头显整机,数据采集相关的空间感知与传感器硬件,云计算、AI算力和高速互联的投资机会。

总体总结

主题正文

  1. (2)该模型是字节2026年AI四大重点之一,张一鸣亲自督导协调不同业务部门,把AI资源和算力向其倾斜,目标2026年底前至少发布一版。
  2. (1)世界模型是AI从理解信息走向理解并模拟物理世界的关键技术,世界模型必须能够理解环境状态、预测环境变化,并且知道不同动作会带来什么结果。
  3. (2)世界模型的技术路线包括基于视频生成的世界模型、基于压缩模拟空间的世界模型、基于3D/4D空间表征的世界模型等,基于视频生成的世界模型让已经成熟的视频生成大模型能够根据用户的动作持续生成世界的下一步变化。
  4. 字节世界模型技术基础包括Seedance 2.5、Seed3D 2.0、SeedRealtime。
  5. (1)XR、游戏和虚拟内容是字节世界模型、Genie 4等最直接的应用场景,连接云服务、内容平台和Pico硬件。
  6. 4、世界模型未来迭代方向包括长时序一致性、全模态感知等,关注XR产业链、数据采集硬件和云计算相关机会。
  7. (1)Genie 4当前只能在短时会话中保持一致性,长时序的动态连续性、对外部操作的精准响应有望在未来改善,空间维度提升、全模态感知、云端协同也是世界模型未来的迭代方向。
  8. (2)关注XR设备相关的显示、光学、感知、芯片及头显整机,数据采集相关的空间感知与传感器硬件,云计算、AI算力和高速互联的投资机会。