AI在线 AI在线

刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!

谷歌摊牌了,彻底不装了! 他们前几天刚刚发布的Genie 3世界模型,正在疯狂展示AI的超能力。 它不只是能从文本中生成交互式的AI空间世界,还能操控图像和视频。

谷歌摊牌了,彻底不装了!

他们前几天刚刚发布的Genie 3世界模型,正在疯狂展示AI的超能力。

它不只是能从文本中生成交互式的AI空间世界,还能操控图像和视频。

比如,你现在可以进入到世界名画中去,随意的在其中移动、观察。

这种身临其境的现场感,对于喜欢艺术的同学不要太爽。

有网友就用Genie 3进入到了Jacques Louis David的名画《苏格拉底之死》。

刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!

这幅1787年的油画是新古典主义的代表作,现藏于纽约大都会艺术博物馆。

画的是苏格拉底被判喝毒芹的那一刻:他还在讲道理、伸手接杯子,学生们有人哭成一片,柏拉图则安静坐旁边。

画面干净利落、光影强烈,把「为理性而死」的硬核形象画得很震撼。

以前,我们只能在二维平面前安静地欣赏大师的杰作。

现在,有了Genie 3的帮助,我们有机会1秒钟回到两千四百多年前,目睹苏格拉底饮下毒芹。

轻轻按下按键,就能穿行其中,更加沉浸地去体会艺术、历史与哲学。

这不仅是AI的超能力,更是其存在的意义——更好地成就、提升人们!

刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!

前谷歌XR、地图团队成员Bilawal Sidhu甚至还利用Genie 3的生成,成功训练出了3D高斯溅射(Gaussian Splat)模型。

具体的过程大概是:

  • Genie 3从图像(如油画)生成可互动的动态3D世界,支持实时导航和多视角渲染。
  • 然后,进行内绘(移除UI元素)和放大处理(使用Topaz AI提升4倍超分辨率)。
  • 最后,利用这些处理后的图像训练3D高斯溅射(Gaussian Splat)模型,实现高效的辐射场渲染和沉浸式探索。

刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!

除了高斯溅射模型,Bilawal Sidhu还尝试了通过经典的摄影测量流程处理,以提取一个带纹理的3D网格,可以将其导入到任何3D工具中。

效果虽然不如高斯溅射来的优雅,不过依然可用。

刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!

最后,Bilawal Sidhu还贴心地将两个模型的链接分享了出来,让大家都可以进去体验。

相当nice👍

图片

高斯溅射:https://superspl.at/view?id=e05e5eb7

摄影测量技术:https://sketchfab.com/3d-models/socrates-painting-genie-3-to-textured-3d-mesh-147645d6cc2c4d8c86d23a73f3215b8a

另一个震撼人心的例子是进入到Edward Hopper的《夜游者》。

这是一幅1942年完成的油画,现藏芝加哥艺术学院。

画面是深夜街角的一家餐馆:亮白灯光、玻璃窗内三位顾客与店员,外面空无一人、几乎看不见门。

它是美国现实主义的标志品,被电影、广告与摄影不断致敬,几乎成了「现代城市深夜感」的代名词。

通过Genie 3进入到画中,仿佛你自己就成了那个「夜游者」。

街道上空无一人,孤独、寒冷更加真实地扑面而来。

当然,除了进入名画之外,你还可以把它当作一个游戏来玩。

比如,像下面这种,操控一只狗狗在沙滩上奔跑。

可以随时切换视角,就是那种自由的感觉。

网友热评

网友Hasan感叹道,只需5-10年,我们每个人都会进入到自己的虚拟世界中去。

图片

网友Peter Dedene表示同意,他说「全息模拟舱」这种概念正在变成现实。

图片

相关资讯

PartCrafter:首个结构化3D多部件生成模型

本篇文章是北京大学、字节跳动和卡耐基梅隆大学的联合工作。 我们提出了 PartCrafter,一种新颖的结构化 3D 生成模型,为 3D 对象创建引入了一种变革性的方法。 PartCrafter 不仅能生成可分解的 3D 网格,还支持灵活的部件编辑,为创作者提供了更高的自由度。
8/14/2025 1:37:36 PM
潘攀望

不到60秒就能生成3D「手办」,Meta发力3D生成,ChatGPT时刻要来了吗?

3D 生成,一直在等待它的「ChatGPT时刻」。一直以来,创作 3D 内容是设计和开发视频游戏、增强现实、虚拟现实以及影视特效中最重要的部分。然而,3D 生成具有独特而艰巨的挑战,这是图像和视频等其他生成内容所不具备的。首先,3D 内容在艺术质量、生成速度、3D 网格结构和拓扑质量、UV 贴图结构以及纹理清晰度和分辨率方面具有严格的标准;其次,与其他研究相比,可用的数据量少。虽然该领域有数十亿张图像和视频可供学习,但可用于训练的 3D 内容数量要少三到四个数量级。因此,现阶段的3D 生成还必须从非 3D 的图像和
7/4/2024 5:55:00 PM
机器之心

画个框、输入文字,面包即刻出现:AI开始在3D场景「无中生有」了

现在,通过文本提示和一个 2D 边界框,我们就能在 3D 场景中生成对象。看到下面这张图了没?一开始,盘子里是没有东西的,但当你在托盘上画个框,然后在文本框中输入文本「在托盘上添加意大利面包」,魔法就出现了:一个看起来美味可口的面包就出现在你的眼前。房间的地板上看起来太空荡了,想加个凳子,只需在你中意的地方框一下,然后输入文本「在地板上添加一个矮凳」,一张凳子就出现了:相同的操作方式,在圆桌上添加一个茶杯:玩具旁边摆放一只手提包统统都可以:我们可以从以上示例看出,新生成的目标可以插在场景中的任意位置,还能很好地与原
1/24/2024 2:31:00 PM
机器之心
  • 1