|
有没有工具可以方便的生成四格漫画呢?
喜欢探索的人,运气总是不会太差,我总算找到这类AI工具了。一起来看看这三款AI工具吧!
ChatGPT-4o
ChatGPT-4o是OpenAI春季发布会发布的最新模型,发布会只有短短的24分钟,不过却给全世界带来超过24小时的震撼。在这儿我们关心的是如何用ChatGPT-4o画漫画。
漫画的目的是传达创作者的想法,在开始创作之前,需要明确创作的主题。
为了演示创作的过程,我们也来定一个主题,主题是周一上班像上坟,周五上班像过节,我们将使用4个画面,展示周一到周五情绪的变化。
我们先来设定提示词,其实就是四格漫画的场景描述:
先开看看英文版本的吧:
For four-panel comics, the background is simple and the colors are soft, highlighting the main body of the comic.
The first cartoon: On Monday, a young man was dejected in the office, with dark circles under his eyes and an expression of wanting to cry.
Second frame cartoon: On Tuesday, a young man was working in the company and looked unhappy, but his condition was better than Monday.
Third panel cartoon: On Wednesday, a young man worked very calmly in the office.
The fourth cartoon: On Friday, a young man was in high spirits in the office, as if he were celebrating a holiday.
为了方便理解,我将提示词翻译成中文了:
四格漫画,要求背景简单,颜色柔和,突出漫画主体。
第一格漫画: 星期一,一个青年在办公室里垂头丧气,黑眼圈,想哭的表情。
第二格漫画: 星期二,一个青年人在办公司一脸不开心,但是状态比周一好。
第三格漫画:星期三,一个青年人在办公室非常平静得工作。
第四个漫画:星期五,一个青年人在办公室精神振奋,像过节一样。
下面就是根据提示词生成的漫画了,我们的主题是表达的是一周工作情绪的变化。下面的生成的结果我还是比较满意的。后续用PS,添加合适的文案,可以更好传达我们要表达的主题。

不过,有时候ChatGPT-4o也会抽筋,生成的内容牛头不对马嘴。比如下面这幅,还算是好的了,至少面部表情对了,只有时间没有对,右上角的文本应该是"TuesDay", 最下方的两幅缺少了文本。

ChatGPT-4o生成的漫画可能会有点瑕疵,不过我们可以借助PS进行后期处理。除了ChatGPT-4o外,还有其他的AI漫画生成工具,我们再继续看看。
StoryDiffusion
StoryDiffusion是南开大学和字节跳动联合开发的故事生成软件,在
https://huggingface.co/spaces/YupengZhou/StoryDiffusion
可以直接体验,也可以直接在我们自己的电脑上安装。
在这里,我们一起来探索如何使用StoryDiffusion。
StoryDiffusion创作漫画
进入到StoryDiffusion,你应该会看到下面的页面

这界面的复杂度,需要填写参数的规模估计会劝退一部份的圈友。先不要被表面的复杂度吓到,一起来看看怎么使用吧。
进入StoryDiffusion后,在首页,我们应该是可以看到下面的内容的

这个其实是使用的步骤,使用步骤对应的中文如下
1️⃣ 输入角色的文字描述,如果您添加参考图像,请确保在您要自定义的类词后面加上触发词:img,例如:man img 或 Woman img 或 Girl img。
2️⃣ 输入提示数组,每一行对应一张生成的图片。
3️⃣ 选择您喜欢的样式模板。
4️⃣ 单击提交按钮开始定制。
看起来也没有多难嘛。我们来一步一步看看如何使用
选择模型
第一步我们需要做的是选择模型「sd_type」,默认模型是Unstable

「sd_type」代表选定的模型,有两种可选的模型
「Unstable」, 这个是实验性版本,也是不稳定版本
「RealVisio」,真实视觉模型,生成的是真实风格的漫画
我们可以选择合适的模型类型即可。
选定角色控制类型
这个功能主要用来控制漫画中的角色,StoryDiffusion提供了两种方式:
「Only Using Textual Description」文本描述,懂AI绘画的都知道,我们可以通过文本(prompt)控制图的生成,在StoryDiffusion中,也是同样的功能
「Using Ref Images」,用参考图来生成角色,如果选择「Using Ref Images」的话,就需要我们手动上传一张图片。

上面的参数只是其中一部份,下面还有一些参数,对我们来说,比较重要的是动漫风格和场景的描述,为了简化教程,其他的参数可以先直接使用图片中的。

填写完参数之后,我们来试试生成的效果吧。在这儿,我们还是使用上一节的场景,我使用的是下面的提示词。
Monday, in the office, an expression of wanting to cry.
Tuesday, in the office, looked unhappy
Wednesday, in the office, worked very calmly in th e office
Friday, in the office, celebrating a holiday
由于StoryDiffusion生成的结果会把提示词作为旁白放在画里,提示词太长会影响画面的美观,所以我只能精简提示词了。
我生成了两组图,来一起看看吧。
第一幅使用的是"Comic"画风,下面是生成的结果,生成的结果我看起来不是特别的满意

我切换了另外一个画风“line art”,简约的线条画风,不同的风格生成的内容似乎差距不大。

StoryDiffusion给我的感觉是一个实验性的产品,在人物一致性方面做的不错,但是在图像的细节刻画上,和ChatGPT-4o差距还是非常大的。要真正投入生产使用,帮各位圈友实现漫画梦,还是有一段距离的。
ai-comic-factory
ai-commic-factory是国外的大佬开源的项目,同样可以在现在免费使用 https://huggingface.co/spaces/jbilcke-hf/ai-comic-factory 通过链接,就可以到对应的界面了。
相对于StoryDiffusion复杂的界面,ai-comic-factory的界面和使用方式就简单很多:
主页面上有4个功能按钮,具体可以看下面的截图

和StoryDiffusion不同是,在ai-comic-factory输入了场景描述词后,ai-comic-story会根据场景描述词在切分成四个场景,然后生成对应的画面。接下来,我们一起看看ai-comic-factory是怎么创作漫画的。
ai-comic-factory创作漫画
在这儿,我使用的提示词和第一节是一样的,我把提示词也列在下方了。
For four-panel comics, the background is simple and the colors are soft, highlighting the main body of the comic.
The first cartoon: On Monday, a young man was dejected in the office, with dark circles under his eyes and an expression of wanting to cry.
Second frame cartoon: On Tuesday, a young man was working in the company and looked unhappy, but his condition was better than Monday.
Third panel cartoon: On Wednesday, a young man worked very calmly in the office
The fourth cartoon: On Friday, a young man was in high spirits in the office, as if he were celebrating a holiday
ai-comic-factory最大的好处就是实用简单,没有storydiffusion那么复杂的参数。填写完我们的提示词后,点击"GO"按钮,就可以生成我们的漫画初稿了。
下面这幅是我根据上面的提示词生成的漫画初稿,选的是日系风格的漫画。

这幅画的画风我看起来是挺满意的。不过嘛,他并没有体现一周的工作状态情绪变化,另外,生成主角的性别不对,我可是在提示词里写的是“a young man”啊。
出现这个原因,是由于在前面提到的提示词会被切分成四个场景,这个过程中, 大模型会修改我们的提示词。
不过,不用担心,每一幅画的右上角都有个"Edit"按钮,点击后,可以重新编辑生成这幅画的画面。

我把我的提示词全部修改后,重新生成了下面的画,大家看看,是不是也还可以呢?

ai-comic-factory比StoryDiffusion好的地方在于提供了旁白的编写。里面的中文旁白,其实都是我手动加上去的
ai-comic-factory不好的一点是人物一致性的控制,可以看到上面的这幅画中,第三个场景主角样貌变了。
我在这个例子中,使用的是默认的stable diffusion的sdxl模型,除了这个模型,ai-comic-factory还支持dall-e3等模型。
打开右下角的setting按钮,就可以看到下面这个模型切换到页面了

总结
我已经把目前我知道的AI漫画生成工具全部体验了一遍,为了方便圈友们选择,我按照5个唯独进行了排序:
细节刻画: ChatGPT-4o > ai-comic-factory > StoryDiffusion
人物一致性: ChatGPT-4o > StoryDiffusion > ai-comic-factory
可控性: ai-comic-factory > ChatGPT-4o > StoryDiffusion
复杂度: StoryDiffusion > ChatGPT-4o = ai-comic-factory
剧情连续性: ChatGPT-4o > ai-comic-factory > ai-comic-factory
目前来看,ChatGPT-4o是AI漫画的最佳的选择。StoryDiffusion目前看来只是实验产品,使用复杂度高,生成的画细节刻画不够细致,人物情绪表达还不到位,还达不到产品化的标准。
ai-comic-factory只是个工具,它能够选择不同的模型,和不同的AI绘画模型结合工作。ai-comic-factory和ChatGPT-4o结合是不错的选择。
现在,用AI画的漫画确实还有瑕疵,但,以AI发展的速度来看,人人都能画漫画的时代,也许,不会太远了。
原文链接:https://zhuanlan.zhihu.com/p/699936395
|
|