大家都知道各种AI小说漫画推文吧,就是把故事、小说剧情这样的长文本转化为漫画呈现,然后再制作成动态漫画,这样的操作流程。

但是之前想要完成这一流程会比较复杂,需要先把小说整成适合做分镜的文字描述,再根据这些文字描述,去一张一张生成所需要的图片。整个流程下来还是比较繁琐的。

用AI绘图网站一个分镜一个分镜做的方式也可以,还可以一个分镜一个分镜做视频,最后拼接起来,但是花费的时间精力是完全不对等的。

今天这个专辑就是针对长文本连续绘图转视频领域的一个摸索。单张图片和单个小视频制作(包括文生视频或图生视频)都不在这次摸排范围之列。所以我们暂且忘掉Sora、Stable Video、Runway、Pika、pixverse。

已上线现有:巨日禄AI创作平台

已上线现有:巨日禄AI创作平台

上线于2023年10月,深耕该领域,坚守在网页端的,基于SD的长文本AI绘画转视频服务,服务了很多推文达人、各类故事短片、短视频博主的制作神器。比较成熟,期待在动态视频领域的突破。

打开网易新闻 查看精彩图片

打开网易新闻 查看精彩图片

体验感受:

1、工作流还原了推文达人的制作过程,很赞。

2、对角色和场景的提取,辅助角色和场景固定。

3、画风众多,适用不同的题材和类型,20多个画风,并持续优化更新中,古现代男女频,甜爽恐玄都能找到适合的。图片是4:3,目前80%的推文都已经变成这个比例了。

4、字数6000字,每个分镜好像是100字?满足大部分需求,希望还可以加长。配音演员的情感配音很赞!可以选择不同的情感,愤怒、疑惑、开心等。

5、整体操作下来比较丝滑,同时也给了很多选择的空间,比如选择AI写提示词、角色的细节刻画、选择画动物、选择不同音色、选择导出剪映等等。

待上线:Dreamina即梦

待上线:Dreamina即梦

Dreamina中文也叫「即梦」,目前主打AI作图和AI视频生成功能。AI视频生成是开创,通过输入提示词或者提供参考图片可以免费生成3秒钟的视频。

目前故事创作部分也在内测中,说是即将上线。期待字节系的大众产品。

打开网易新闻 查看精彩图片

牛逼&等待区:StoryDiffusion

牛逼&等待区:StoryDiffusion

StoryDiffusion来自南开大学和字节跳动的研究团队提出了一种名为Diffusion的创新方法,通过一致自我注意力和语义运动预测器,实现了高度一致且连贯的图像和视频生成,为视觉故事创作带来了全新的可能。

打开网易新闻 查看精彩图片

参考资料:

1、巨日禄AI创作平台:https://ai.jurilu.com/

2、即梦:https://dreamina.jianying.com/

3、StoryDiffusion 项目地址:https://storydiffusion.github.io