NSDT工具推荐: Three.js AI纹理开发包 - YOLO合成数据生成器 - GLTF/GLB在线编辑 - 3D模型格式在线转换 - 可编程3D场景编辑器 - REVIT导出3D模型插件 - 3D模型语义搜索引擎 - AI模型在线查看 - Three.js虚拟轴心开发包 - 3D模型在线减面 - STL模型在线切割 - 3D道路快速建模
大家好,我叫 Kieran Fogarty,自 2005 年以来我一直在游戏行业工作。从 EA Sports 开始,我作为环境和灯光艺术家参与过许多项目,并涉足温哥华附近的领导角色和公司。
这些天,我身兼艺术总监和游戏设计师的职责,从事一款名为 Moonland 的社交多人游戏。 我还涉足了摄影测量和数字化,并经营了一家 3D 打印店几年。在本文中我将介绍用稳定扩散AI模型为3D模型生成纹理的实践,如果你希望避免手工进行UV展开,可以是用DreamTexture.js这个开发包为3D模型自动贴上AI生成的纹理:
1、使用稳定扩散进行纹理化
从早期的 Alice 聊天机器人时代开始,我就对 AI 艺术和 AI 聊天机器人很感兴趣,所以它一直以某种形式出现在我的 Feed 中。 我最近看了一个来自 Default Cube 的 YouTube 视频,他能够在一个立方体上创建一个 AC 单位纹理。 当他向对象添加切口和挤压面时,Blender 附加组件似乎可以适应并创建更好、更准确的纹理。 我不得不试试这个。
我尝试的第一件事是不同类型的城市建筑和城市街道,在早期意识到你只能用相机投射纹理。 它似乎将 3D 模型裁剪为 2D 轮廓,然后将你请求的任何内容渲染到该图像上的 3D 图像,然后将其重新投影回 3D 对象。 这让我意识到可以对一个对象进行镜像以获得更好的结果。 起初,我镜像了一个从 blendswap 下载的 Hovercar 模型。 它很乱,但给我留下了深刻的印象。 我决定尝试在 X 轴和 Y 轴上进行四分之一和镜像。 这可以很快地制作出对称的物体。
这从我的纹理生成的城市场景中的一个大的油容器开始,然后引导我制作了一个 5 分钟的南瓜模型,其质量足以让我在社交媒体上发布。 看起来很棒吗? 不是。但是它是用一串文本创建的吗? 大多数是的。 我想指出这是该技术的第一个版本。
在 20 分钟内,我构建了一个简单的场景,其中包含一座塔、一块岩石场地、一条小路和一座桥。 算我印象深刻。
如果你想自己玩这个插件,要记住的一件事是复制你的种子值。 生成后,每个纹理都以其种子值命名。 这些种子值将允许你制作相似的纹理,但在生成纹理时仍然很难保持一致性。
我期待这项技术的未来,并想尝试使用我自己的所有艺术来构建我自己的体重模型,看看结果如何。 除此之外,我觉得我们必须等待,看看接下来会发生什么,因为人工智能和人类会变得更加复杂地交织在一起。
2、事情的道德方面
技术是一种速度非常快、永远在变化的野兽,它有两个头,是一把双刃剑。 你能要求它用几张源图像在 30 秒内为你画一幅你的狗的肖像吗? 是的。 它是否使用受版权保护的作品作为学习材料来为您构建图像? 是的。 Jaron Lanier 对此事的看法与我一致。 在他谈到早期 VR 以及它是否会取代人们的外部世界时,他说当你摘下头显时,VR 让现实世界变得更加真实。
我对人工智能生成的媒体也有同样的看法。 它真实地展示了人类个人想象力所创造和分享的作品之美。
3、结束语
目前,Adobe 已经在与 NVIDIA 和其他公司进行试验,使用简单的笔触创建 AI 生成的风景。 随着 Quixel 和 Sketchfab 等平台上的大型纹理和对象(如岩石、植物和基础材料)库变得可用,我看到了使用 AI 工具混合库资产以创建新作品和原创作品的潜力。
人类一直在寻求将技术带给更多的人,这些工具及其使用似乎与改变我们在这个星球及其他星球上的进步的任何发明技术遵循相同的路径。
原文链接:Using Stable Diffusion for 3D Texturing
BimAnt翻译整理,转载请标明出处