团结AIGraph

在 Tuanjie 1.7.3中,我们全新推出团结AIGraph—— 一个图形化、节点式的 AI 工作流系统,团结引擎自研的一套 AI 工作流系统,具备模块化、可视化、低代码等优势。团结引擎正在与国内外的第三方大模型展开合作,将第三方 AIGC 能力深度集成 Tuanjie AI Graph,形成标准化的节点组件。开发者将无需重复接入多个模型或服务端口,即可在引擎环境中直接调用第三方 AIGC 大模型的 AI 生成能力,实现从 2D 图像/文本输入到 3D 模型、纹理、绑定参数的端到端自动化生产。

关键特性介绍
1.引擎内多入口导入

  • 第一个是从 Editor 中直达 Graph Template,Window -> Tuanjie AI -> Graph Template

  • 此外,AI Graph 集成多模态 API,覆盖文生图、图生 3D、角色生成、自动绑定、动作驱动等完整链路,通过与Sprite、Mesh、Material、Animation、Particle System等核心组件的深度结合,开发者无需离开 Inspector 面板,点击“AI Generate”就能一键完成 AI 生成并预览,不满意还可以重新再次生成,最终将满意的资产一键导入项目,实现一站式AI辅助工作流。

打开网易新闻 查看精彩图片

2.模版化工作流

  • 模板化工作流是 AI Graph 的核心亮点之一。模版涵盖范围极广,当前,无论是从文本自动生成 3D 道具与角色,还是基于图像完成风格转换、PBR 材质生成,甚至是角色及动画生成,开发者都能通过内置的标准化模板快速构建完整的 AI 生产链路。同时,模板会自动推荐给对应的引擎组件(SpriteRenderer、Material、MeshRenderer、AnimationClip 等),并通过AI Generate一键入口触发,帮助用户在熟悉的 Inspector 环境下完成创作,而无需频繁跳转外部工具。未来,AI Graph 也将接入更多 API 接口,提供更广范围的资产生成。

打开网易新闻 查看精彩图片

Graph Template

3.节点可视化编辑

  • 可视化节点编辑是AI Graph的主要工作模式,方便快捷,易于上手。选择 Template 模版中的对应模版,即可进入 AI 生成节点化编辑界面,可以基于已有的节点直接进行图片、模型、动画等资产的生成和编辑,也可以根据需求新建新节点进行生成和编辑。

AI 模型

团结 AI Graph 目具备第三方大模型 API 调用能力,您无需重复接入多个模型或服务端口,即可在引擎环境中直接调用第三方 AIGC 大模型的 AI 生成能力。目前支持的 AI 大模型包括腾讯混元和 Tripo - Vast,此外 Hyper3D - Rodin 节点也在筹备中。

其中,腾讯混元节点基于腾讯混元大模型,涵盖图像生成、角色建模、姿态处理与动画生成等能力,将腾讯混元的最新模型接入团结 AI,包括文生图、文生 Sprite、图片上色、图片背景去除/替换、图生模型、3D 自动绑骨、图生材质等 21 个 API,适合需要快速完成从 2D 输入到 3D 输出的场景,比如角色原型设计、材质替换或动画预演。

快速上手

团结 AI Graph 以包的形式发布,通过 Package Manager -> Tuanjie Registry -> Packages -> Tuanjie AI Graph,点击 install 即可安装并使用团结 AI Graph;

打开网易新闻 查看精彩图片

团结AIAssistant

除全新推出的团结AIGraph外,在 Tuanjie 1.7 中,原 Muse Chat AI 模块全新升级,改名团结 AI Assistant,更新内容包括:优化了界面 UI/用户交互逻辑和 Markdown 文本内容支持;新增 Agent 工具列表管理功能和自定义 Agent 工具支持;以及后端 AI 模型更新。

新界面/功能介绍

更新后的界面如下所示:

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

基础的知识问答和代码助手功能与旧版保持一致:

 团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答
打开网易新闻 查看更多视频
团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答

知识问答 & 代码助手 Demo

作为Agent模式新增的一项重要功能,用户可以按照项目需要,基于

IAgentToolExecutor
接口实现自定义的 Agent 工具(详见团结 AI Assistant 使用指南)。
https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAIAssistant.html

在下面的示例中,我们将地形生成的功能用自定义 Agent 工具进行了封装,从而拓展了团结 AI Assistant的能力边界:

 团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答
打开网易新闻 查看更多视频
团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答

Agent模式:自定义工具 - 地形生成Demo

未来展望

多智能体支持:为了解决团结引擎在使用过程中面临的复杂与高难度任务,我们希望团结AIAssistant能够通过调用其他引擎模块的专家智能体,实现任务的分工协作智能协同处理,从而提升整体的开发效率与智能化水平。

目前,我们已尝试实现ShaderGraph Agent—— 一个专注于Shader Graph领域的专家型智能体,可高效处理与 Shader Graph 相关的各类任务,包括:

  • 节点理解与问答: 可针对指定节点进行功能解析与使用指导

  • 节点与函数生成: 自动生成 Shader Graph 节点及 Custom Function

  • 结构化组装: 根据需求自动配置输入输出参数,并生成合适节点连接

  • 智能协作: 处理团结AI Assistant 转交的 Shader Graph 相关请求,作为专家实现任务分派与执行闭环

以下示例展示了如何通过ShaderGraph Agent协助团结AIAssistant实现水体渲染效果的制作流程:

 团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答
打开网易新闻 查看更多视频
团结 AI 全新升级|AI Graph & AI Assistant:为开发者提供一站式 AIGC 解决方案和疑难解答

Agent模式:多智能体支持 - ShaderGraph Agent水体渲染Demo

此外,为进一步提升团结 AI Assistant 的智能化水平与生态融合能力,目前计划围绕三个核心方向持续优化:一是深度融合团结引擎生态,通过强化底层集成与工具兼容,丰富附件类型支持;二是智能化任务理解与规划,优化 Agent 模式以提升任务拆解与用户意图理解能力;三是开放与生态建设,通过 MCP 支持与开源协作,推动多元、开放、活跃的生态体系构建。

更多使用指南

  • 团结AI用户手册:

https://docs.unity.cn/cn/tuanjiemanual/Manual/TuanjieAI.html
  • 团结AI Graph Package用户手册:

https://docs.unity.cn/cn/Packages-cn/cn.tuanjie.ai.graph@1.0/manual/

Unity 官方微信

第一时间了解Unity引擎动向,学习进阶开发技能

每一个“点赞”、“在看”,都是我们前进的动力

打开网易新闻 查看精彩图片