打开网易新闻 查看精彩图片

8月20日,MiniMax推出多模态创作Agent工作台MiniMax Design,把自家开源多模态视频大模型H3的能力落地,让AI真正参与商业视频从想法到成品的全流程制作。

打开网易新闻 查看精彩图片

简单来说,MiniMax Design是一套AI创作工作台。用户只要把自己的想法告诉它,里面的AI Agent就能读懂创作需求,把大任务拆成一个个小步骤,自动调用对应的模型和工具,搞定素材处理、画面生成、视频编辑,最后输出完整成片。

H3本身就具备看懂图文、生成视频、修改视频、参考画面再创作等能力,很适合做视频剪辑、二次修改这类精细工作。而MiniMax Design在H3的基础上,补上了任务规划、素材整理、多步骤协同的能力。它把怎么用好模型、该怎么输入指令这些经验,全部封装到AI助手和工具组件里。

接到一个创作任务时,MiniMax Design会判断需要哪些文字、图片、视频、声音,分清哪些画面、元素需要保留沿用,把普通人的想法转换成H3能看懂的指令和素材。不光能生成视频,还能提前做分镜规划,视频出来之后,还能帮忙剪辑、拼接,输出完整作品。

其中很有特色的3D导演台功能,用户可以直接在3D空间里摆放人物,调整角色姿势、摄像机角度,多角度预览镜头效果。确认好画面布局之后,系统就会把这套镜头方案交给H3生成视频。相当于把很多试错工作放到正式生成视频之前,减少反复生成浪费时间。镜头画面产出后,平台还能自动剪辑、加字幕,把零散片段合成完整视频。

这款工作台很适合环节多、需要反复修改调整的商业内容制作。

做电商短视频、种草带货视频时,它看懂商品特点和宣传目标,就能自动写脚本、设计镜头,生成素材之后完成剪辑加字幕,一套原材料快速产出多条不同版本的短视频。

做科普、动画教学视频,直接丢课件、教案、知识点进去,AI会梳理讲解逻辑,自动搭配配音、动画画面,把文字材料做成科普动画短片。

宣传片、MV、片头特效短片,也可以交给它处理。AI先把整体创意和镜头规划好,再分工完成制作,支持反复调整修改,创作者不用在多个软件之间来回切换。

MiniMax相关负责人表示:“MiniMax Design,是我们把H3的模型能力,转化成实实在在商业创作生产力的产品尝试。我们也欢迎广大创作者,在平台里探索、搭建更多好用的开源工作流,把社区的创意沉淀成可复用的生产工具,拓宽H3模型的使用场景。”

MiniMax扎根上海徐汇,是徐汇重点培育的标杆AI科创企业。公司运营总部设立在徐汇,依托徐汇区人工智能、数字文创产业集聚优势,不断推进多模态大模型技术研发与产品落地,从徐汇出发面向全球输出AI创作能力,本次MiniMax Design的发布,也是徐汇AI赋能文创产业发展的又一实践成果。

送你一个新闻盲盒

快来打开看看吧

记者:王永娟

编辑:宁平英

转载请注明来自上海徐汇官方账号

打开网易新闻 查看精彩图片