这是我们为苏州御窑金砖博物馆打造的AI非遗剧情类光影夜市,线下博物馆投影和线上社媒双场景同时服务的AIGC内容的技术复盘。

交付内容:3条成片——御窑金砖传说(1分15秒)、个人传记(1分钟)、人物抽卡篇(1分钟)

主要播放场景:博物馆内投影(超宽屏)+ 各大社媒发布

执行方式:全AIGC制作

这个项目的技术命题有两个特殊性:

第一,双场景适配。博物馆投影要求超宽屏画幅,社媒发布要求竖屏或标准横屏——同一套内容需要在两种完全不同的显示规格下都有效,这对画面构图和内容信息的排布提出了很高的要求。

第二,三条内容共享角色体系但视觉风格各异。传说故事片是奇幻悬疑风格,人物传记是古典水墨叙事风格,抽卡篇是游戏化国风卡面风格——三套视觉语言完全不同,但六个角色形象需要在三条内容里保持一致。

技术难点一:东方诡秘画风的风格体系建立

这个项目选择了「东方诡秘」作为整体视觉基调——介于古典国风和奇幻悬疑之间,有历史质感,有神秘氛围,同时要有当代审美的精致度——这套风格不是一个现成的AI生成风格标签,需要从零开始建立。

前期用Midjourney批量生成大量概念图,通过对色彩区间、光影处理、线条密度、场景构图的系统性筛选,建立整套视觉参考帧库。重点控制参数是:青蓝色主调与火焰暖色的冷暖对比、宣纸质感与水墨晕染效果、发光卡面与粒子特效。三套色调各自独立,但都在「东方诡秘」的整体气质框架内。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

技术难点二:自研角色LoRA训练与跨内容形象稳定

六个历史人物角色需要在三条风格完全不同的内容里保持形象一致——从奇幻场景到水墨风格到游戏卡面,人物的面部特征、服饰结构、气质调性不能发生漂移。

针对每个角色自研专属LoRA模型,训练数据覆盖不同光线、角度、风格下的人物参考帧,确保LoRA对角色特征的理解足够全面,而不是只在某一种光线条件下稳定。

这里有一个技术判断值得记录:非遗题材的角色训练,对历史考证的准确性有额外要求。沈绫的服饰需要符合南宋织造的历史风格,吴憶慈的火工装束需要对应真实的御窑匠人形象等等这些历史细节的准确性,决定了内容能否获得文旅文博类客户的信任——角色LoRA训练前,需要对历史服饰和人物形象做前置研究。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

技术难点三:超宽屏画面制作与沉浸感建立

博物馆投影场景对画面宽高比有特殊要求,标准的16:9画幅无法覆盖长廊和砖窑的实际投影面积。

使用同义万相制作超宽屏画面,针对博物馆的实际投影尺寸定制画幅比例,确保内容在物理空间里投影时具有足够的视觉覆盖面和沉浸感。超宽屏制作的核心挑战是:画面信息在横向延展时,叙事重心和视觉焦点的分布需要重新规划——不能简单地把标准画幅拉宽,而是要为超宽屏专门设计构图逻辑。

打开网易新闻 查看精彩图片

技术难点四:虚实融合——真实博物馆空间与AI场景的无缝接入

这个项目有一个独特的技术需求:内容需要和博物馆的真实物理空间产生关联,而不是完全脱离现实的纯AI奇幻场景。

将博物馆的实景素材——砖窑结构、长廊细节、遗址质感——上传作为参考,使用ComfyUI搭配LoRA对场景进行重绘,在保留真实空间结构的基础上叠加奇幻视觉元素,构建虚实融合的玄幻空间。

这套虚实融合的处理方式,让观众在博物馆内看到的投影内容,和他们所处的物理空间之间产生了视觉上的连接——投影里的砖窑和眼前真实的砖窑在同一个空间里共存,沉浸感在这个层面被大幅强化。

打开网易新闻 查看精彩图片

技术难点五:可灵精细调控人物动态

三条内容里的人物动态要求各不相同——传说故事片需要戏剧性强的动作和表情,沈绫传需要细腻克制的情绪表达,抽卡篇需要有游戏感的出场动效。

使用可灵对人物的动作、表情、运镜进行精细调控,重点处理两个层面:一是角色在不同情绪状态下的动态细节(沈绫临终托付遗言的手势、守窑人持灯的步态、采花娘等待的眼神);二是不同风格下镜头语言的差异(传说故事片的宏大运镜对应沈绫传的贴近人物的叙事镜头)。

人工逐帧审核是这个环节投入最多的部分——历史题材对人物动态的「气质准确性」有很高要求,不只是动作连贯,而是动作背后的人物性格和历史身份要能被感受到。

打开网易新闻 查看精彩图片

完整工作流

历史研究 + 世界观设定 + 叙事结构设计

Midjourney 东方诡秘画风体系建立

(批量生成概念图 + 视觉参考帧库建立)

自研角色LoRA训练

(六个历史人物 + 历史服饰考证 + 跨风格形象稳定)

同义万相 超宽屏画面制作

(博物馆投影尺寸定制 + 构图逻辑重规划)

ComfyUI + LoRA 虚实融合场景重绘

(真实博物馆实景素材 + AI奇幻元素叠加)

可灵 人物动态精细调控

(动作表情调控 + 镜头语言差异化处理)

人工逐帧审核

(历史准确性校验 + 气质一致性确认)

后期调色 + 音效 + 超宽屏与社媒版本适配

博物馆投影版 + 社媒发布版 双版本交付

三个值得记录的经验

非遗题材的角色LoRA训练,历史考证是前置工作,不是后期校正。服饰错误、道具偏差、朝代特征混淆——这些问题在生成后修复的成本远高于生成前的研究投入。

历史题材的内容,调研和考证是技术执行的一部分,不是创意团队的「软工作」。

双场景适配不是两套内容,而是一套内容的两种呈现逻辑。超宽屏和社媒竖屏的构图重心完全不同,在生产阶段就要为两种场景分别规划视觉焦点和信息分布,不能在成片后简单裁切。

虚实融合的沉浸感,来自真实空间素材的精确引入,而不是AI的自由发挥。把博物馆的真实建筑细节作为生成的视觉锚点,才能让投影内容和物理空间产生真正的视觉连接。纯AI生成的奇幻场景,在现实空间里投影时会产生「悬浮感」,而不是沉浸感。