既然跑通了midjourney的无值守全自动提交，那么我想晚上也应该让它有活干，首先得测试下批量midjourney生产器在夜间不发出干扰睡眠的亮度，目前想到的主意是合上笔记本的盖子但电脑不休眠。目前45分钟合盖状态下跑imagine autokeyword url程序，执行正常，今天晚上通宵继续测试。
我想让chatgpt写小说故事，然后把它转化为漫画分镜描述，用标记符号分割，批量提取输出到txt按行排列，到时候再用midjourney的imagine autokeyword url程序逐行读取去生成。不过看起来这个程序只需要分镜描述一个参数？那么url暂时为“ ”空格就好了，视情况之后再改。
我尝试通过一个梗概信息让chatgpt去编造故事的漫画分镜。
以下是chatgpt给的回复：
以下是漫画分镜描述：
分镜1:
地点: 中国的一个普通城市的街道。
内容: 屏幕上展示了一段视频，是“北极鲶鱼”在社交媒体上炫富的视频片段，她得意洋洋地说着“家里有9位数”。在画面下方，手机屏幕上显示出许多愤怒的表情符号和评论。
分镜2:
地点: 同一个房间里，几位年轻人在电脑前聚集。他们都是中国的普通网民，脸上带着愤怒和不满的表情。他们的电脑屏幕上显示着“北极鲶鱼”发布的贬低国人的言论。
内容: 其中一人握紧拳头说道：“她的嚣张已经激起了全国的愤怒！”
分镜3:
地点: 中国的武侠世界，一座隐秘的山庄内。
内容: 一群身着古代侠客服饰的年轻人聚集在一起，讨论如何对付“北极鲶鱼”。他们中间有人怒目圆睁：“她侮辱我们的祖国，必须要为民除害！”墙上贴着“北极鲶鱼”的照片，周围环绕着火焰般的图案，象征着他们的愤怒。
分镜4:
地点: 飞机的内部。
内容: 几位侠客装扮的年轻人坐在飞机上，前往澳大利亚。他们的目光坚定，手里握着各自的武器。窗外显示着飞机飞跃太平洋的景象。
分镜5:
地点: 澳大利亚的一个富人区。
内容: 一栋豪华别墅前，几个侠客从隐秘的角落现身，准备行动。他们表情冷峻，目光锁定在别墅内。
分镜6:
地点: 别墅内，奢华的装饰与豪华的生活场景。
内容: “北极鲶鱼”正在与朋友们聚会，谈笑风生，丝毫没有察觉到危险的临近。背景中，侠客们悄悄接近，准备采取行动。
分镜7:
地点: 别墅内部的一个房间。
内容: 侠客们突然出现，面对惊慌失措的“北极鲶鱼”。其中一人冷冷地说：“你的傲慢和对祖国的侮辱，今天就到此为止！”
分镜8:
地点: 侠客们离开别墅，澳大利亚的夜空下，他们消失在夜色中。
内容: “北极鲶鱼”跪在地上，满脸恐惧和悔恨。侠客们的背影在远处显得神秘而正义，象征着他们为民除害的决心。
这组分镜描述展现了中国民众因“北极鲶鱼”的炫富行为愤怒不已，最终侠客们挺身而出，跨国除害的故事。
然后是翻译成英文版的：
Here’s the English translation of the comic panel descriptions for input into MidJourney:
Panel 1:
Location: A typical street in a Chinese city.
Content: A video is shown on a screen, depicting “Arctic Catfish” flaunting her wealth on social media, proudly saying, “My family has nine figures.” The screen below displays numerous angry emojis and comments.
Panel 2:
Location: Inside a room where several young people are gathered around a computer. They are ordinary Chinese netizens, with expressions of anger and dissatisfaction. The computer screen shows “Arctic Catfish” making derogatory remarks about the Chinese people.
Content: One person clenches their fist and says, “Her arrogance has sparked national outrage!”
Panel 3:
Location: A hidden mountain villa in the world of Chinese martial arts.
Content: A group of young people dressed as ancient warriors gather to discuss how to deal with “Arctic Catfish.” One of them, with fiery eyes, says, “She insults our country; we must bring justice!” On the wall is a picture of “Arctic Catfish,” surrounded by flame-like patterns symbolizing their anger.
Panel 4:
Location: Inside an airplane.
Content: Several young warriors are on a plane heading to Australia. They have determined expressions, holding their weapons. Outside the window, the plane is shown flying over the Pacific Ocean.
Panel 5:
Location: A wealthy neighborhood in Australia.
Content: In front of a luxurious villa, the warriors emerge from a hidden spot, ready to act. Their expressions are serious, their eyes locked on the villa.
Panel 6:
Location: Inside the villa, showcasing luxurious decorations and a lavish lifestyle.
Content: “Arctic Catfish” is laughing and chatting with friends, completely unaware of the impending danger. In the background, the warriors silently approach, preparing to take action.
Panel 7:
Location: A room inside the villa.
Content: The warriors suddenly appear, facing a terrified “Arctic Catfish.” One of them coldly says, “Your arrogance and insults to our country end here today!”
Panel 8:
Location: The warriors leave the villa, disappearing into the Australian night.
Content: “Arctic Catfish” is left kneeling on the ground, full of fear and regret. The warriors’ silhouettes in the distance appear mysterious and righteous, symbolizing their determination to bring justice.
This English translation should work well for your MidJourney input.
从这样看来可以给到midjourney的提示词可以分为内容和地点两个部分作为读行参数，chatgpt这边以panel x作为标记符号采集location和content之后的内容批量给到txt对应的行。
完整的提示词大概是
a girl is laughing and chatting with friends, completely unaware of the impending danger. In the background, the warriors silently approach, preparing to take action. Inside the villa, showcasing luxurious decorations and a lavish lifestyle，japanese manga, black and white ,inked lines ，–niji –ar 2:3
分镜1屏幕上展示了一段视频，是“北极鲶鱼”在社交媒体上炫富的视频片段，她得意洋洋地说着“家里有9位数”。在画面下方，手机屏幕上显示出许多愤怒的表情符号和评论。
分镜2同一个房间里，几位年轻人在电脑前聚集。他们都是中国的普通网民，脸上带着愤怒和不满的表情。他们的电脑屏幕上显示着“北极鲶鱼”发布的贬低国人的言论。
分镜3 一群身着古代侠客服饰的年轻人聚集在一起，讨论如何对付“北极鲶鱼”。他们中间有人怒目圆睁：“她侮辱我们的祖国，必须要为民除害！”墙上贴着“北极鲶鱼”的照片，周围环绕着火焰般的图案，象征着他们的愤怒。
分镜4：几位侠客装扮的年轻人坐在飞机上，前往澳大利亚。他们的目光坚定，手里握着各自的武器。窗外显示着飞机飞跃太平洋的景象。
2024-9-5更新：
如果要搞漫画的话有几大问题
1.多角色一致性
2.场景一致性
3.人物表情
问题1目前看来只有midjourney的vary region对人物头部用套索选中后替换，以下为一些实例，midjourney的漫画模式换脸是目前看下来最强大的，它甚至可以解决发型以及背面。
问题2，我一开始想的是人物空白背景和无人物场景blend，这样做以后画风会被削弱，整体效果下降。为了保证人物的效果还是得一次成型，我后来又想生成整体剥离人物用–no human，结果不成功人物无法剥离。独立做场景用–no human是基本可以去掉人物的。于是最后就是整体人物带场景+sref 场景链接，这样可以在外部控制场景的变体，在某些情景中需要场景延伸风格延伸可以用这个手法。如果这样做的话就意味着要事先先去/imagine 场景，所以要考虑好哪些需要场景延伸风格延伸，对于一次性的场景则无需这样做。
问题3人物换脸时似乎表情没法顺着关键词？至少目前测试下来好像有这种意思。那么对于角色一致性而言要设法对同一个角色做角色设定图，确保多种表情、甚至动作？下面演示了图1中的角色，换脸后表情还是原来的傲慢状态，我试了3次对关键词调整都没有用。
Stable Diffusion一致性角色差异表情生成_哔哩哔哩_bilibili
上面的视频演示了用sd来做表情设定，看来sd还是有点用处的.
晚上实测了一下，基本没啥用，虽然是可以拟合参考的表情生产不同角色设定，但是没法转换黑白漫画风格，我用了black and white, line art, lora等都无效，大模型的影响非常重，有的大模型甚至没法画出人样。
我试了下用平脸做cref加表情效果依旧不好，swap face无法对漫画人物起作用。
最后各种方法试验下来还是sref直接一个链接给表情，效果是可以的
另外我发现，对于连环画、漫画而言可以切换到niji bot，它似乎需要等待的时间比常规的midjounery bot要小很多。昨天晚上设定8-9分钟间隔通宵作图确实保证了无丢失，但是产率有些低如果niji bot确实所需间隔小，那是个很好的消息。
当然还有个很大的问题就是确认工作量，搞那种长连续剧情的肯定不合适，这对场景、角色一致性的要求太高，会有很多角色需要控制。如果是多个短篇构成，不同主角的，比如各行各业从业者的日常，取材可以从b站的各种视频，但这样好像没法让chatgpt提取文本构思分镜，我试试看b站的视频总结。chrome的chatgpt youtube总结要求是视频带字幕。
漫画方面我想了下就以各种职业的日常展开，剧情通过b站视频ai总结或者偷到youtube发布让chatgpt总结.我看了下b站下载可以自动生产字幕，txt打开就有了文字，可以借此去生产分镜描述不一定要再上传youtube了。
今天用15个职业排列组合mj和niji chinese japanese realistic style，8种画风，120个任务看看能获取些什么，争取风格上面可以剔除几个？能够确认角色设定需要几个style，不同style是不是有恒定特征延续，目前来看mj 模式下的角色设定明显写实，而niji即使加realistic style很多时候也和写实搭不上边。
漫画、连环画这块我想每天可以花1.5个小时作为娱乐替代。漫画的角色设定、表情设定、分镜描述生产都放在晚上跑10个小时，第二天一早用0.5小时筛选uscale，然后upscale批量下载程序跑一下。如果是表情设定么，下载好了再用url批量复制程序获取角色的链接，然后安排建筑装饰的blend、extend、雕塑生产的任务120个。下午累了用1小时看一下生成的图，chatgpt上捣鼓一下分镜描述。晚上大约7点用15分钟安排程序自动化执行，安排的任务为120个，这样差不多用时12小时。
评论