如何用 AI + Unreal(虚幻引擎) 制作游戏
Source: https://x.com/i/article/2121925861528223745
现在越来越多的人使用 AI 在Unreal(虚幻引擎)中开发游戏内容了,但是这类实战教程少之又少,而且做这方面内容大多都是国外博主,于是我自己跑通了全流程后,把我的工作流全部拆解了出来
https://x.com/xingbugengming/status/2120049690624635261
这次制作的方向与使用的工具如下:
- AI 美术:用 Codex 设计地图概念图和空间布局,由 Claude 搭建场景、调整灯光、制作战斗特效
- AI 建模:用 Tripo 生成建筑、场景物件、角色和武器,作为引擎中的三维资产
- AI 编程:由 Codex 配置角色控制、适配动画并实现战斗逻辑,Claude 负责场景自动搭建与特效配置,全部内容在Unreal(虚幻引擎)中制作
具体流程如下:
一、场景搭建
1. 用 Codex 设计地图
利用 Codex 的生图能力设计地图的视觉风格和空间布局
我希望保留古寺荒凉、安静的氛围,同时让建筑轮廓和材质细节清晰可见。生成山门主视觉时,提示词主要围绕建筑形态、材质风化和光线展开
以下是具体提示词:
深秋山谷里,一座荒废多年的中国古寺。镜头放低到荒草的高度,从院外斜望山门。左前景是一尊被风雨磨钝的石狮,旁边立着一块顶部残缺的旧石碑。几级错位的青石台阶,从画面下方延伸到中景的双层木构门楼。门楼仍保留完整的轮廓,灰瓦屋面局部塌陷,檐口微微起翘,暗红木柱褪色露出木纹,土黄色墙皮成片剥落。枯草从石阶接缝和墙根长出,地上散落着碎瓦和褐色落叶。光秃的树枝从画面两侧伸入,右后方的古塔在山雾中只剩淡淡的轮廓。低角度的侧逆光掠过庭院,只照亮草尖、石碑的一侧和几道瓦脊,门洞与檐下保留深而通透的阴影。近景是低饱和的枯草金、灰褐石材和旧木色,远景逐层过渡到淡蓝灰。焦点落在中景门楼,最靠近镜头的草叶轻微虚化。写实古代游戏环境截图,自然曝光,石材粗糙、干燥、有细小崩口,安静无人。
最初确认的山门概念图,作为后续场景设计的视觉参考
整体设计确定后,再让 Codex 继续补充全寺布局和不同位置的视角
2. 用 Claude 搭建白模
将Codex场景参考图和布局交给 Claude Opus5.5 在 Unreal 中用简单几何体搭建建筑、地面和道路的白模
为什么是 Cluade Opus5.5呢?其实使用Codex Astra搭建场景也可以,但是经过我的实际测试,Claude对于三维空间的理解更好一些,Astra 相对迭代次数要多一些
这一阶段主要肉眼判断白模搭建的效果与照片进行逐帧比对,自己把握具体的方向
古寺白模与替换模型后的场景对照
3. Tripo 建模并在 UE 中调整场景
布局确定后,我让 Claude 调用 Tripo 生成模型,按白模位置逐步替换。石狮、香炉、古钟、石碑分别制作,门环、柱础、屋脊装饰、碎瓦和倒下的木梁也各有独立的生成描述
批量生成模型时无需自己编写提示词,让 Claude 根据设计图的效果自己编写批量生成导入 Unreal 中
第二批建筑和构件的提示词统一加入了:单个独立物体,完整展示,写实,比例准确。
这些约束用于获得可独立放置的场景资产。
Tripo生成的各类模型资产
模型布置完成后,我对照最初的参考图检查明暗和建筑与地面的关系,再让 Claude 调整灯光、曝光与场景布置
二、角色制作
1. 用 Tripo 建模、绑定骨骼
人物和武器是我单独在 Tripo 中制作的,因为自己可以把控
角色模型的骨骼绑定支持在 Tripo 中完成,也可使用 AccuRIG;绑定后,通过动作预览检查抬手、弯腿时是否存在异常拉伸或变形
2. 用 Codex 配置基础动作
骨骼绑定完成后,我让 Codex 将角色导入 UE,配置跑动和跳跃,并在测试场景中检查角色控制与基础动作
衣摆动态通过 Codex 配置的 UE Chaos Cloth 布料模拟实现
三、战斗制作
1. 筛选素材,用 Codex 复刻动作
战斗动作采用了 Mixamo 和 Fab 的现有素材。我通过场景中的白色机器人演示,观察各个招式的起手、挥剑和收招,筛选适合主角沈砚与 Boss 的动作
多个机器人演示不同招式,用于动作筛选
我让 Codex 将选定的剑术和斩杀动作重映射到自制角色上。由于素材角色与目标角色的骨架、身体比例不同,适配时需要重新对应骨骼动作,并调整姿态,再接入战斗系统
动作素材与自制角色的重映射对照
2. 用 Claude 制作战斗特效
Claude 通过 UE 的 Niagara 粒子系统,为 Boss 制作水墨、剑气和碰撞火花特效
因为 Cluade 以审美著称,所以尝试用Opus来制作特效,但是我查阅资料显示Houdini与AI的适配最好,大家可以尝试以下
3. 通过对战调整动作衔接
动作和特效适配完成后,我通过主角与 Boss 的对战检查连续动作的表现。对于停顿明显、衔接生硬的位置,我将对应画面和修改要求交给 Codex,调整连招、格挡和受击之间的过渡,再通过试玩确认效果
等跑通完整个流程后,你就会发现个人用 AI 制作 3A 级游戏可能性为0,深入了解制作过程就会发现需要学习的内容太多了,但是未来 AI 会发展成什么样,我们谁也不知道