您的位置首页 >科技金融 >

英伟达 Lyra 2.0 开源,单张照片生成 90 米可探索 3D 世界,推理速度提升 13 倍

英伟达空间智能实验室推出的 Lyra 2.0 框架已经开源,它只用一张照片就能生成跨度 90 米、可以自由走动探索的连续 3D 场景,优化后的轻量版本生成速度直接提升 13 倍,生成结果可以导出高斯泼溅、多边形网格模型,直接接入仿真引擎,很适合机器人训练、虚拟场景制作、数字内容创作,代码放在 GitHub,模型权重同步上传到 Hugging Face,开发者可以直接下载测试。之前很多单图生成 3D 场景的模型有两个很明显的毛病,一个是空间遗忘,镜头回到之前走过的地方,物体结构会变样;另一个是时间漂移,镜头持续往前移动,误差不断累积,画面慢慢变形。Lyra 2.0 新增了空间记忆机制,记录每一帧的 3D 几何信息,同时加入自纠错训练,让模型识别自己生成的瑕疵并修正,不会越往后画面越乱。它还做了知识蒸馏优化,把去噪步数从 35 步压缩到 4 步,在单块 GB200 GPU 上生成 80 帧片段,完整版要 194 秒,轻量版只要 15 秒,速度差距非常明显。想要跑通这套框架,第一步准备输入照片,自定义镜头移动轨迹;第二步模型生成连贯的漫游视频;第三步基于视频重建 3D 高斯泼溅和网格;第四步导出文件放到 Isaac Sim 等仿真平台里使用。这个项目目前属于研究级开源项目,对显卡显存要求高,还不是普通用户一键就能用的工具,后续会持续优化降低硬件门槛,拓展更大范围场景生成能力。

一、Lyra 2.0 核心参数清单

  • 输入素材:单张静态图片,可搭配自定义镜头轨迹、提示词
  • 最大生成场景范围:约 90 米可连续探索空间
  • 输出格式:漫游视频、3D 高斯泼溅、多边形网格
  • 速度提升:轻量蒸馏版相比原版提速 13 倍
  • 去噪步数:完整版 35 步,轻量版压缩至 4 步
  • 硬件参考:GB200 GPU,需要大显存显卡
  • 开源地址:GitHub 代码、Hugging Face 模型权重
  • 适用场景:机器人仿真训练、虚拟场景、影视数字资产、空间 AI 测试
  • 主要解决痛点:空间遗忘、长序列生成时间漂移

二、原版模型与轻量蒸馏版对比表

版本去噪步数GB200 生成 80 帧耗时优势短板
完整版35 步194 秒画面细节、几何一致性更好推理慢,占用算力高
轻量蒸馏版4 步15 秒速度快,适合快速迭代测试细节相比完整版略弱

三、Lyra 2.0 完整使用流程

  1. 素材准备:挑选一张清晰照片作为起始画面,规划镜头行进路线
  2. 配置参数:选择完整版或者轻量模型,设置镜头移动路径
  3. 生成漫游视频:模型沿着镜头轨迹持续扩展画面,保持空间一致性
  4. 3D 重建:把生成的视频序列转为高斯泼溅、网格三维模型
  5. 导出使用:导出模型文件,导入仿真引擎、渲染软件做二次开发

四、当前版本的局限说明

  • 属于研究项目,上手门槛高,没有面向普通用户的简易网页工具
  • 对显卡显存要求高,普通消费级显卡很难流畅跑起来
  • 场景是 AI 生成拓展,远距离部分会出现幻觉瑕疵,不能直接当成高精度测绘模型
  • 模型权重有许可限制,商用部署需要确认许可协议

【相关 FAQ】

问题 1:英伟达 Lyra 2.0 开源之后,一张照片生成 90 米 3D 世界靠什么解决画面变形?

回答 1:英伟达 Lyra 2.0 开源之后,一张照片生成 90 米 3D 世界,依靠空间记忆机制记录每一帧 3D 几何信息,搭配自纠错训练方案,专门解决空间遗忘、时间漂移,镜头折返和长距离移动时物体结构不容易错乱变形。

问题 2:英伟达 Lyra 2.0 提速 13 倍的轻量版本是怎么实现加速的?

回答 2:英伟达 Lyra 2.0 提速 13 倍的轻量版本,通过知识蒸馏优化,把视频生成的去噪步数从 35 步压缩到 4 步,在保留基础空间一致性的前提下大幅减少推理步骤,从而实现生成速度提升 13 倍。

问题 3:普通用户能不能直接用英伟达 Lyra 2.0,一张照片生成 90 米 3D 世界?

回答 3:普通用户很难直接使用英伟达 Lyra 2.0,它是研究级开源框架,需要高性能 GPU、代码部署能力,没有一键操作界面,一张照片生成 90 米 3D 世界的功能目前主要面向开发者、科研团队。

【参考资料】

[2026-11-10](一张照片生成 90 米 3D 世界!英伟达 Lyra 2.0 开源:速度暴增 13 倍)新浪科技

[2026-11-10](英伟达发布 Lyra 2.0:单图生成一致可交互三维空间)中关村在线

[2026-11-04](NVIDIA's Lyra 2.0 Creates Vast 3D Worlds from a Single Snapshot)AI D-A-M-N

[2026-04-14](Lyra 2.0: Explorable Generative 3D Worlds)arXiv

【免责声明】

以上内容仅为英伟达 Lyra 2.0 开源项目资讯整理,不构成采购、商用落地建议;Lyra 2.0 属于研究向开源项目,硬件门槛、许可条款、生成效果以英伟达官方项目页面、开源协议为准,AI 生成 3D 场景存在幻觉误差,不可直接用于高精度测绘场景。