NSDT工具推荐: Three.js AI纹理开发包 - YOLO合成数据生成器 - GLTF/GLB在线编辑 - 3D模型格式在线转换 - 可编程3D场景编辑器 - REVIT导出3D模型插件 - 3D模型语义搜索引擎 - AI模型在线查看 - Three.js虚拟轴心开发包 - 3D模型在线减面 - STL模型在线切割 - 3D道路快速建模
UnrealGT 是一个可以从虚幻引擎内部的虚拟场景生成数据的工具。 目标是提供一个尽可能灵活的工具包,支持许多开箱即用的数据生成场景,并且能够轻松扩展内置组件以适应更复杂的场景。 为了实现这一目标,该工具以插件的形式直接集成到引擎的编辑器中,因此需要一些关于虚幻引擎的基本知识。
如果你希望直接利用虚幻引擎的渲染能力来生成用于AI模型训练的合成数据,但又没时间学习虚幻引擎的开发,那么可以是用UnrealSythn这个基于UE5开发的合成数据生成工具,非常方便:
1、安装UnrealGT
Unreal GT插件要求虚幻引擎 4.24 或更高版本,你可以尝试旧版本,但某些功能可能无法按预期工作。
环境要求如下:
- Windows:Visual Studio 2017 或 2019(2015 应该也可以工作,但未经测试)
- macOS:XCode 命令行工具
- Linux:如果你已经从源代码构建了引擎,那么什么也不需要了
安装Unreal GT插件的唯一方法是从现有项目中的源代码构建它。 这需要你手动从源代码构建项目。
- 将此存储库克隆到你的项目插件目录中。
- 通过在 Windows/macOS 上右键单击项目
.uproject
文件或在 Linux 上使用GenerateProjectFiles.sh
来生成项目文件(Cmake、Visual Studio 解决方案、Vscode 工作区...)文件。 - 从 IDE 或 CLI 构建并运行生成的解决方案和cmake 项目。
- 选择 DebugGameEditor 或 DevelopmentGameEditor 作为目标。
编辑器启动后,转到编辑 > 插件并启用 UnrealGT 插件。
2、UnrealGT入门
UnrealGT插件公开了一系列actor组件,可用于从编辑器内的虚拟世界生成数据。 下面将解释如何从关卡内捕获图像数据。
首先在虚幻编辑器中打开你选择的关卡。
之后,在内容浏览器中右键单击以创建新蓝图并选择 Actor 作为基类:
在编辑器中打开创建的蓝图。 并将以下组件添加到你创建的蓝图中:
- ULImageGenerator
- ULFileStreamer
- ULTimedCaptureTrigger
- ULCameraMovement:可选
2.1 UnrealGT组件配置
- ULImageGenerator组件配置
图像生成器负责从场景生成像素数据。你可以配置分辨率和输出图像格式。 我们在本例中使用 BMP 作为格式,因为它不需要 CPU 大量压缩。
请记住,多个图像生成器或高分辨率会降低运行时的性能,因为每个图像生成器都需要它自己的渲染通道。
- ULFileStreamer组件配置
Streamer 组件流式传输生成的数据。 在这种情况下,生成的图像将被流式传输到文件中。
要将流媒体与生成器链接,请从下拉列表中选择图像生成器。
由于限制,下拉列表只会列出编译蓝图后的组件,因此如果你的 ImageGenerator 第一次没有显示,请点击顶部的编译并重试。
还可以为创建的文件设置命名约定。 你可以访问 {ID}
和 {Time}
作为变量。 这些文件存储在 UnrealGT 文件夹中的项目保存目录中。
- ULTimedCaptureTrigger
该组件负责触发数据生成。 应由该组件触发的生成器必须添加到数据生成器数组中。 这里我们将图像生成器添加到数组中。
生成以固定时间间隔触发,可以通过更改帧速率参数 1/帧速率 = 图像之间的时间(以秒为单位)来修改该时间间隔。 请小心高帧速率,因为这会严重降低性能。
- ULCameraMovement(可选)
如果你不想在固定位置捕捉,可以将 CameraMovementComponent 添加到你的蓝图中。 该组件将为你的蓝图/Actor 添加一些基本的移动功能,可以在属性选项卡中进行配置。
我们选择默认的跟随主视图作为移动模式(TODO移动模式将是未来更新镜像中的枚举):
- Follow Main View:跟随主视图,将跟随你的主视口相机/播放器
- Follow Actor:跟随一个Actor,只有在蓝图放置在关卡中后才能选择该Actor
- Follow Rail :跟随摄像机 Rail Actor,你可以配置 Blueprint Actor 跟随导轨的速度。
2.2 UnrealGT测试
配置完组件后,保存并编译你的蓝图。
将蓝图从内容浏览器拖放到场景中。 你应该看到一个摄像机,指示你的 ImageGenerator 将记录的方向。
开始模拟,图像应该在你的项目 UnrealGT 下的 Saved 目录中生成。
2.3 UnrealGT 示例
你可以在 github 找到本教程中描述的蓝图和其他示例。
要在编辑器中查看示例,请在内容浏览器的视图选项中启用“显示插件内容”。
要熟悉插件,请将示例参与者放置在地图中,打开调试窗口,如 /basics/debugging- Generation/
中所述,并在文本框中写入示例名称。
3、调试UnrealGT的数据生成
单击工具栏中的 UnrealGT 图标打开调试窗口。 在文本输入中键入要调试的生成器组件的名称以呈现调试信息。
原文链接:Unreal GT
BimAnt翻译整理,转载请标明出处