大家都知道各种AI小说漫画推文吧,就是把故事、小说剧情这样的长文本转化为漫画呈现,然后再制作成动态漫画,这样的操作流程。
但是之前想要完成这一流程会比较复杂,需要先把小说整成适合做分镜的文字描述,再根据这些文字描述,去一张一张生成所需要的图片。整个流程下来还是比较繁琐的。
用AI绘图网站一个分镜一个分镜做的方式也可以,还可以一个分镜一个分镜做视频,最后拼接起来,但是花费的时间精力是完全不对等的。
今天这个专辑就是针对长文本连续绘图转视频领域的一个摸索。单张图片和单个小视频制作(包括文生视频或图生视频)都不在这次摸排范围之列。所以我们暂且忘掉Sora、Stable Video、Runway、Pika、pixverse。
已上线现有:巨日禄AI创作平台
上线于2023年10月,深耕该领域,坚守在网页端的,基于SD的长文本AI绘画转视频服务,服务了很多推文达人、各类故事短片、短视频博主的制作神器。比较成熟,期待在动态视频领域的突破。
![](http://dingyue.ws.126.net/2024/0531/e9f43c54j00secaxg00xad000v900hzp.jpg)
体验感受:
1、工作流还原了推文达人的制作过程,很赞。
2、对角色和场景的提取,辅助角色和场景固定。
3、画风众多,适用不同的题材和类型,20多个画风,并持续优化更新中,古现代男女频,甜爽恐玄都能找到适合的。图片是4:3,目前80%的推文都已经变成这个比例了。
4、字数6000字,每个分镜好像是100字?满足大部分需求,希望还可以加长。配音演员的情感配音很赞!可以选择不同的情感,愤怒、疑惑、开心等。
5、整体操作下来比较丝滑,同时也给了很多选择的空间,比如选择AI写提示词、角色的细节刻画、选择画动物、选择不同音色、选择导出剪映等等。
待上线:Dreamina即梦
Dreamina中文也叫「即梦」,目前主打AI作图和AI视频生成功能。AI视频生成是开创,通过输入提示词或者提供参考图片可以免费生成3秒钟的视频。
目前故事创作部分也在内测中,说是即将上线。期待字节系的大众产品。
![](http://dingyue.ws.126.net/2024/0607/1a2794eaj00sep91n005kd000fe007ap.jpg)
牛逼&等待区:StoryDiffusion
StoryDiffusion来自南开大学和字节跳动的研究团队提出了一种名为Diffusion的创新方法,通过一致自我注意力和语义运动预测器,实现了高度一致且连贯的图像和视频生成,为视觉故事创作带来了全新的可能。
![](http://dingyue.ws.126.net/2024/0607/d375b679j00sep94i00khd000e500jnp.jpg)
参考资料:
1、巨日禄AI创作平台:https://ai.jurilu.com/
2、即梦:https://dreamina.jianying.com/
3、StoryDiffusion 项目地址:https://storydiffusion.github.io
热门跟贴