NSDT工具推荐Three.js AI纹理开发包 - YOLO合成数据生成器 - GLTF/GLB在线编辑 - 3D模型格式在线转换 - 可编程3D场景编辑器 - REVIT导出3D模型插件 - 3D模型语义搜索引擎 - AI模型在线查看 - Three.js虚拟轴心开发包 - 3D模型在线减面 - STL模型在线切割 - 3D道路快速建模

UnrealGT 是一个可以从虚幻引擎内部的虚拟场景生成数据的工具。 目标是提供一个尽可能灵活的工具包,支持许多开箱即用的数据生成场景,并且能够轻松扩展内置组件以适应更复杂的场景。 为了实现这一目标,该工具以插件的形式直接集成到引擎的编辑器中,因此需要一些关于虚幻引擎的基本知识。

如果你希望直接利用虚幻引擎的渲染能力来生成用于AI模型训练的合成数据,但又没时间学习虚幻引擎的开发,那么可以是用UnrealSythn这个基于UE5开发的合成数据生成工具,非常方便:

https://tools.nsdt.cloud/UnrealSynth

1、安装UnrealGT

Unreal GT插件要求虚幻引擎 4.24 或更高版本,你可以尝试旧版本,但某些功能可能无法按预期工作。

环境要求如下:

  • Windows:Visual Studio 2017 或 2019(2015 应该也可以工作,但未经测试)
  • macOS:XCode 命令行工具
  • Linux:如果你已经从源代码构建了引擎,那么什么也不需要了

安装Unreal GT插件的唯一方法是从现有项目中的源代码构建它。 这需要你手动从源代码构建项目。

  • 将此存储库克隆到你的项目插件目录中。
  • 通过在 Windows/macOS 上右键单击项目 .uproject 文件或在 Linux 上使用 GenerateProjectFiles.sh 来生成项目文件(Cmake、Visual Studio 解决方案、Vscode 工作区...)文件。
  • 从 IDE 或 CLI 构建并运行生成的解决方案和cmake 项目。
  • 选择 DebugGameEditor 或 DevelopmentGameEditor 作为目标。

编辑器启动后,转到编辑 > 插件并启用 UnrealGT 插件。

2、UnrealGT入门

UnrealGT插件公开了一系列actor组件,可用于从编辑器内的虚拟世界生成数据。 下面将解释如何从关卡内捕获图像数据。

首先在虚幻编辑器中打开你选择的关卡。

之后,在内容浏览器中右键单击以创建新蓝图并选择 Actor 作为基类:

在编辑器中打开创建的蓝图。 并将以下组件添加到你创建的蓝图中:

  • ULImageGenerator
  • ULFileStreamer
  • ULTimedCaptureTrigger
  • ULCameraMovement:可选

2.1 UnrealGT组件配置

  • ULImageGenerator组件配置

图像生成器负责从场景生成像素数据。你可以配置分辨率和输出图像格式。 我们在本例中使用 BMP 作为格式,因为它不需要 CPU 大量压缩。

请记住,多个图像生成器或高分辨率会降低运行时的性能,因为每个图像生成器都需要它自己的渲染通道。

  • ULFileStreamer组件配置

Streamer 组件流式传输生成的数据。 在这种情况下,生成的图像将被流式传输到文件中。

要将流媒体与生成器链接,请从下拉列表中选择图像生成器。

由于限制,下拉列表只会列出编译蓝图后的组件,因此如果你的 ImageGenerator 第一次没有显示,请点击顶部的编译并重试。

还可以为创建的文件设置命名约定。 你可以访问  {ID}{Time} 作为变量。 这些文件存储在 UnrealGT 文件夹中的项目保存目录中。

  • ULTimedCaptureTrigger

该组件负责触发数据生成。 应由该组件触发的生成器必须添加到数据生成器数组中。 这里我们将图像生成器添加到数组中。

生成以固定时间间隔触发,可以通过更改帧速率参数 1/帧速率 = 图像之间的时间(以秒为单位)来修改该时间间隔。 请小心高帧速率,因为这会严重降低性能。

  • ULCameraMovement(可选)

如果你不想在固定位置捕捉,可以将 CameraMovementComponent 添加到你的蓝图中。 该组件将为你的蓝图/Actor 添加一些基本的移动功能,可以在属性选项卡中进行配置。

我们选择默认的跟随主视图作为移动模式(TODO移动模式将是未来更新镜像中的枚举):

  • Follow Main View:跟随主视图,将跟随你的主视口相机/播放器
  • Follow Actor:跟随一个Actor,只有在蓝图放置在关卡中后才能选择该Actor
  • Follow Rail :跟随摄像机 Rail Actor,你可以配置 Blueprint Actor 跟随导轨的速度。

2.2 UnrealGT测试

配置完组件后,保存并编译你的蓝图。

将蓝图从内容浏览器拖放到场景中。 你应该看到一个摄像机,指示你的 ImageGenerator 将记录的方向。

开始模拟,图像应该在你的项目 UnrealGT 下的 Saved 目录中生成。

2.3 UnrealGT 示例

你可以在 github 找到本教程中描述的蓝图和其他示例。

要在编辑器中查看示例,请在内容浏览器的视图选项中启用“显示插件内容”。

要熟悉插件,请将示例参与者放置在地图中,打开调试窗口,如  /basics/debugging- Generation/ 中所述,并在文本框中写入示例名称。

3、调试UnrealGT的数据生成

单击工具栏中的 UnrealGT 图标打开调试窗口。 在文本输入中键入要调试的生成器组件的名称以呈现调试信息。


原文链接:Unreal GT

BimAnt翻译整理,转载请标明出处