近日,李飞飞领导的空间智能团队发布了其首个产品,引起了广泛关注。该产品能够根据一张图片生成一个完整的3D视频游戏场景。尽管目前市场上已有不少AI工具能将照片转化为3D模型,但World Labs带来的不仅是一个静态的3D模型,而是一个真正可交互、可编辑的动态世界。
World Labs在其博客中指出,大多数生成式AI工具主要生成图像或视频等二维内容。而World Labs的产品则以3D形式生成内容,显著提升了控制和一致性的水平。这将改变我们制作电影、游戏、模拟器和数字物理世界的方式。当前市场上虽然有不少3D生成模型,但它们往往存在诸多问题,如画面模糊、场景混乱等。相比之下,World Labs创造了一个稳定、真实且符合物理规则的3D世界。
这个3D世界不仅稳定、真实,还具有高度的互动性和可编辑性。用户可以通过鼠标或键盘自由移动,查看周围的环境。此外,用户还可以模拟相机的各种操作,如推拉镜头、调节景深等。World Labs的核心突破在于,他们不仅仅停留在像素级的表面呈现,而是深入到了3D场景生成的本质优势:
World Labs还利用深度贴图技术,使每个像素都具有真实的空间距离感,颜色也由像素与摄像头的距离决定。不仅如此,他们还为场景注入了灵魂,增加了各种互动特效,让整个世界更加生动。
World Labs不仅能将现实世界中的场景转化为3D,还能将名画中的场景还原成可探索的3D世界。这种创新的结合使得艺术作品更加生动有趣,也让用户能够身临其境地感受经典作品的魅力。
除了基础的功能,World Labs的产品还能与其他AI工具如Midjourney、Runway等完美结合,为创作者提供更多的可能性。例如,World Labs团队基于同一提示词,让不同的AI绘制出四个版本的青少年卧室,每个版本都有独特的风格,但都保持了高度的真实感。
尽管目前这只是World Labs生成3D世界的初步尝试,但他们已经在努力提升生成世界的大小和保真度,并探索更多与用户交互的新方式。对于有兴趣尝试这一新技术的用户,可以通过申请候补名单参与测试。此外,World Labs也在积极招募人才,包括应用AI研究工程师、业务运营、数据工程师等多个职位。
World Labs的产品无疑为3D内容创作带来了革命性的变化,不仅提高了效率,还赋予了作品更高的真实感和互动性。随着技术的不断发展,我们可以期待更多令人惊叹的应用出现。