Odyssey推出生成世界模型Explorer,能够将任何图像转化为一个逼真且详细的3D世界

浏览:289次阅读
没有评论

共计 1520 个字符,预计需要花费 4 分钟才能阅读完成。

1986 年,Ed Catmull、Steve Jobs 和 John Lasseter 创立了皮克斯动画工作室。从那时起,皮克斯不仅成为了全球最具标志性的讲故事公司之一,还通过其核心信念——故事必须塑造技术 ——推动了计算机图形学的革命。这一理念使得皮克斯在 80 年代和 90 年代开创了许多至今仍为行业标准的技术创新,如 Catmull-Clark 细分曲面算法和 RenderMan 渲染系统。这些技术突破为皮克斯创作了一系列改变世界的故事铺平了道路,使 Ed Catmull 在 2019 年获得了计算机科学领域的最高荣誉——图灵奖。( 来源

Odyssey 的愿景:技术服务于故事

在 Odyssey,我们坚信这一理念同样适用于人工智能时代。技术应当始终为故事和讲故事的人服务,而不是反过来。因此,我们非常荣幸地欢迎 Ed Catmull 加入我们的董事会,并成为我们的投资者。作为皮克斯和迪士尼动画工作室的前总裁,Ed 的经验和远见将为我们实现电影、游戏及更多领域中的下一个重大技术突破——生成世界模型——提供宝贵的指导。

探索新世界:推出 Explorer

今天,我们自豪地推出Explorer——我们的第一个生成世界模型。Explorer 是一个图像转世界的模型,能够将任何图像转化为一个逼真且详细的 3D 世界。尽管尚处于早期阶段,但 Explorer 已经展示了其在实景电影、超逼真游戏和新形式娱乐中的巨大潜力。

Explorer 的核心优势
  1. 逼真的世界生成
    Explorer 特别擅长生成逼真的世界,这是该模型的核心优势。它能够在短时间内创建出具有高度细节和保真度的 3D 环境,为艺术家们提供了前所未有的创作自由。
  2. 动态世界的运动
    世界是不断运动的,Explorer 生成的世界也应如此。尽管研究仍在进行中,但我们已经看到了生成世界运动的巨大潜力,这将使艺术家能够以更真实、更精细的方式操控物体和角色的运动。
  3. 高斯斑点的应用
    过去 18 个月,全球顶尖的计算机图形和视觉研究人员对高斯斑点(Gaussian Splatting)产生了浓厚兴趣。这种表示形式能够以几乎难以察觉的真实细节重建场景,因此我们决定在 Explorer 中采用斑点作为世界表示形式。这不仅提升了生成世界的质量,还为未来的改进奠定了基础。
  4. 手动编辑支持
    Explorer 生成的世界可以轻松导入到主流创意工具中,如 Unreal、Houdini、Blender、Maya 等,允许艺术家根据需要手动编辑生成的世界。这种灵活性使得 Explorer 不仅是一个强大的生成工具,也是一个创意平台。
实际应用案例

为了测试 Explorer 的生产准备情况,我们最近与伦敦的 Garden Studios 合作,将 Explorer 生成的世界投射到他们的虚拟制作舞台上。这次合作验证了 Explorer 生成的世界已经具备用于实际生产的能力,效果令人印象深刻。我们相信,随着技术的进一步发展,Explorer 将在电影、电视、广告等多个领域发挥重要作用。

持续改进与未来展望

尽管 Explorer 已经取得了显著进展,但我们深知这只是开始。我们正在努力改进以下几个方面:

  1. 实时世界生成
    目前,Explorer 的生成过程平均需要 10 分钟。我们看到了实现实时生成的明确路径,这将极大地提升用户体验和工作效率。
  2. 提高分辨率和世界完整性
    我们将继续优化 Explorer 的生成算法,确保生成的世界不仅具有更高的分辨率,还能无缝扩展,填补任何空白并创建完整的球形世界。
  3. 增强可控性
    未来,Explorer 将支持视频转世界和世界转世界的输入,允许用户通过提示或其他指导方式更好地控制生成过程。最终,Explorer 将能够以真实世界捕获的高斯斑点为输入,并根据需求进行增强。
正文完
关注公众号获取最新教程
post-qrcode
 0
AI小诸葛
版权声明:本站原创文章,由 AI小诸葛 于2024-12-20发表,共计1520字。
转载说明:除特殊说明外本站文章皆由原创发布,请勿转载。