|
|
发表于 2023-7-8 15:52:40
|
显示全部楼层
《参同真解》
正在更新: 摄影咒语 直接去看吧
已经更新: (重要!)一些超参数设置以及一个大BUG修复 首先我们得明确一件事: 这些机器学习数据库, 绝大多数的来源都是一些非常专业, 非常内行数据量非常大的不能说的网站. 这些网站上的各种tag, 就是这里的prompt. 如果你可以熟练掌握这些tag, 那么对于这些prompt就八九不离十了.
当然也支持直接用描述性的语言来形容图片, 不过几乎没有什么人这样做就是了.
基础术式
包括咒语的正确开头, 咒语的正确重音, 以及必要的邪神防护咒语.
在开头添加: best quality, masterpiece, highres, original, extremely detailed wallpaper
在之后补充必要的邪神防护咒语(如果你是在本地使用而非使用其他人的服务的话很有必要):
补充在Negetive prompt这个位置.
简单版(以下我生成的都是这个):
NSFW, lowres,bad anatomy,bad hands, text, error, missing fingers,extra digit, fewer digits, cropped, worstquality, low quality, normal quality,jpegartifacts,signature, watermark, username,blurry,bad feet
经过尝试以后还是推荐简单版的, 简单就是好用! 如果多次出现多肢体, 可以尝试加上extra limbs. 下午po的复杂版本的不太行.
还有几种重音方式:
官方网站专用! 使用符号 {}. 你可以添加许多花括号来强调某个元素.
本地平台专用(AUTOMATIC1111) 使用符号() []. 类似上面.
| 本地AUTOMATIC1111专用 | 本地AUTOMATIC1111专用 | | (maid) | 提升对maid的注意力到1.1倍 | | ((maid)) | 提升对maid的注意力到1.21倍 (= 1.1 * 1.1) | | [maid] | 降低对maid的注意力到1/1.1倍 | | (maid:1.5) | 提升对maid的注意力到1.5倍 | | (maid:0.25) | 提升对maid的注意力到0.25倍 | | \(maid\) | 转义, 不当作重音符号而是不同括号来使用("\"不会被记录在内) |
添加detailed前缀来强调某个局部细节, 比如detailed face.
这是加上了重音符号以后的基础术式 {best quality}, {{masterpiece}}, {highres}, original, extremely detailed wallpaper, 1girl:
这张
看起来比较素, 但是其实这个底子是很好的. 我们可以加入一些风格咒语:
{an extremely delicate and beautiful}:
看起来还不错吧.
内容咒语
简单的说, 如果你要描述某一个知名的人物, 你直接输入它的名字比如{数据删除}, {数据删除}, {数据删除} (为了避免可能的纠纷这些数据已被删除). 如果这个角色具有多个同名但是不同模样的角色, 你需要在后面加上括号, 以数据库里的标签为准.
这里为了阅读连贯性, 同样使用了同样的风格咒语{an extremely delicate and beautiful}.
我不知道这是谁 我知道我很友善
我不知道这是谁, 她很友善, 我也很友善
我完全不知道这是谁, 不过四个人一个比一个友善
如果不幸你粉的角色是一个罕见的角色, 那么你就需要准确的描述出她的内容. 这其实和一些非特定的角色是一样的.
这个...比如说我要一个黑丝猫耳白发红瞳女仆!
{best quality}, {{masterpiece}}, {highres}, original, extremely detailed 8K wallpaper, 1girl, black tights, cat ears, white hair, red eyes, maid, {an extremely delicate and beautiful}
爱国
敬业
诚信
啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊啊
咳咳咳, 但是有一个问题. 我实际上生成了4张图, 有一张画崩了. 能救吗? 之后我们会通过进化术式来尝试解决这个问题!
风格咒语
这里就比较多样了. 以下主要参考了s1 @大江户战士 的内容, 还有其他出现在这个帖子里的楼层:
草图 线稿相关:
sketch可以让图片看起来像随手画的草稿
{{lineart}}可以让线条变得很粗
{{{posing sketch}}}, {{monochrome}} 黑白草图
{rough sketch} 上了颜色的草图
monochrome+lineart情况下一般只会让眼睛上色，强调发色后头发也可以上色
{{{monochrome}}}, {{{gray scale}}}, {{{pencil sketch lines}}}做出的铅笔速写的感觉
利用sketch，pastel color，lineart的tag模拟一张图的绘画过程 艺术风格:
chibi可以画出低头身比的效果(二头身, 三头身)
{{watercolor pencil}}可以生成彩铅画
{{faux traditional media}}可以做出签绘的风格
anime screeshot，可以让画面变成动画风格
{{{retro artstyle}}}赛璐璐风
{photorealistic}, {painting}, {realistic}, {sketch}, {oil painting} 厚涂
pastel color和sketch搭配会有速涂的质感
杂志 设定集风格:
official art 变得更加官方一点
three views from front, back and side和costume setup materials可以用来生成设定图
multiple views 会出现类似设定图
{character sheet}会出现设定图
magazine cover会把背景换成杂志封面, 配合office art更像真实杂志(虽然字没法看)
magazine scan类似杂志内页的风格
posing会强调有一个动作, 不至于出现混乱的动作(露出有六个手指头的手)
caustics 画面向主题聚焦, 类似海报 当然, 你也可以加入某个画师, 某个组织, 或者某个流派作为风格控制的关键词.比如XXgames. 当然为了避免纠纷, 我不会说这些画师或作品或组织的名字.
在stable-diffusion-webui/artists.csv里记录了3000个历史艺术家的名称。我尝试了几个我所知的非常有用。可以从这里挑选喜欢的画风！
比如 NGA@疋虫 大佬提到的Kandinsky:
(profile picture), (an extremely delicate and beautiful girl), (((kandinsky))), best quality, illustration, beautiful detailed eyes, 1girl, blue eyes, upper body 经过验证, "非常美丽的眼睛"和这张小半张脸是高度绑定的.
我也尝试了蒙德里安(抽象), 莫奈(印象), 维拉斯凯兹等人, 但是都没有这个风格这般惊艳. 尤其是莫奈让我第一次出现了密集恐惧症... 谨慎尝试哈.
(profile picture), (an extremely delicate and beautiful girl), (((Velazquez))), best quality, illustration, beautiful detailed eyes, 1girl, blue eyes, upper body 其实还是有风格存在的, 大概是在...服装和嘴唇上?
(profile picture), (((Piet Mondrian))), (an extremely delicate and beautiful girl), best quality, illustration, beautiful detailed eyes, 1girl, blue eyes, upper body. 真正的抽象艺术.
在午休的时候, 用内网尝试了以下, 突然想到我可以把它们融合起来啊, 于是...
无奖竞猜: 这是莫奈+谁?
大卫·霍克尼 David Hockney
大融合术：(Fra Angelico), (David Hockney), (Hiroshige)
以下来自于不可描述:
- an extremely delicate and beautiful girl
这个之前说过了. 之所以说它是风格因为它和下面的几个冲突.
2. detailed hd wallpaper,extremely detailed eyes,narmaya,detailed face,{hidden_hands},1 girl,long hair,side face,side profile,choker,hoodie,monochrome
侧脸的人像，黑白画
detailed, extremely detailed, 大家学会了吗?
3. {{masterpiece}}, best quality, illustration, 1 girl, red hair, beautiful detailed eyes,beautiful detailed sky, beautiful detailed water, cinematic lighting, dramatic angle,
其实我感觉这张是做崩了. 不过挺有意境的加上这个水的过渡非常自然, 还是参考一下吧.
detailed, beautiful detailed, 大家学会了吗?
4. {golden hand} {{photorealistic}}
仿真艺术, 用在人像上会有点恐怖谷. 结合之前说的其他形容词来组成厚涂效果挺好.
没有detailed就这?
佳作赏析
版权问题一团糟, 我自己都不知道"别人委托bot向ai发送命令然后ai生成然后生成的同时也自动发给了我的图"到底是谁的版权. 总之, 严禁牟利和收费行为.
在一周后看来, 这些画的质量很一般了. 但是还是具有一定的参考价值, 就不删除了.
1. extremely detailed, masterpiece, illustration, cg, wallpaper, extremely high quality, 1girl, 数据删除, 数据删除, 数据删除, very long light blue hair, ahoge, bang to the side, long bang, long light blue hair, military style, full body, long white shirt, small waist, small breasts, dark blue jacket, small jacket, crop military jacket, golden aiguillette, small skirt, dark blue military skirt, black garters, white stockings, military boots, high heels, women boots, blue round boots
选这张来示范一下角色怎么绘制. 一方面用上了角色原名,别名和作品名, 同时还附带了非常详细的描述
2. {{{masterpiece}}}, best quality, illustration,dark background, sunlight, beautiful detailed eyes, 1girl, expressionless, blue eyes, {{{white short hair}}}, {{wavy hair}},{{{dishevled hair}}}, messy hair, long bangs, hairs between eyes, {{{{white bloomers}}}},{{open clothes}}
同样是illustration就比上面的好看多了, 多太多了. 这就是我今天的老婆了!!! 什么猫耳女仆完全不认识
3. {profile picture},{an extremely delicate and beautiful girl}, cg 8k wallpaper, masterpiece, cold expression, handsome, upper body, looking at viewer, school uniform, sailor suit, insanity, white hair, messy long hair, red eyes, beautiful detailed eyes {{a black cross hairpin}}, handsome，Hair glows,dramatic angle
来解析一下:
表情构成: cold expression, insanity
半身照: profile picture, upper body. 这里和上一张侧脸照片不同, 通过加looking at viewer来保证能看向观众.
handsome, 两个handsome, 大家学会了吗?
4. an extremely delicate and beautiful girl, cold attitude, dark cyan pupils, long blue green hair, choker, hair ornament hair clip, she looks very relaxed, close-up, half-body drawing, fashion loose sweater with delicat(后面因为长度限制已经丢失了)
close-up 特写镜头
half-body drawing 半身绘画作品
5. extremely detailed 4k CG,Long lightblue hair,one small golden flower ornaments, blue eyes, royal sister, cold face and white shirt.
lightblue 浅蓝色. 注意刚才86那张拼写成"light blue"了.
one small golden flower ornaments 一朵小金花装饰物
royal sister 你就是想画数据删除对吧?! cold face是什么鬼?
6. 感谢评论区 @ZGMFX25A, 把生成的原图图片放在PNG Info就可以显示词条.
best quality, cold attitude, red eyes, short hair, white hair, white shirt, black jacket, bowtie, hair ornament hair clip, she looks very relaxed, side face, white atmosphere, high quality, masterpiece, flat color, 1girl, not looking at viewer, an extremely delicate and beautiful girl, full body portrait,holding gun, assault rifle, reflex sight , heads-up display ,gun , military
best quality, cold attitude, red eyes, short hair, white hair, white shirt, black jacket, bowtie, hair ornament hair clip, she looks very relaxed, side face, white atmosphere, high quality, masterpiece, flat color, 1girl, not looking at viewer, an extremely delicate and beautiful girl, full body portrait,holding gun, assault rifle, reflex sight , heads-up display ,gun , military, hidden hands
7. best quality, extremely detailed CG unity 8k wallpaper, girl, purple eyes, white hair, ponytail, long hair, light powder inner color hair, white trench coat, inner cyan coat, studio photography, masterpiece, cinematic highlight hair, Lift the hood by hand, looking at camera,
8. 来点东京帅哥
{{profile picture}},{{portrait}},{{{{white background}}}},{{front view}},{{facing viewer}}, standing,{an extremely delicate and beautiful boy}, masterpiece, black hair, {{messy short hair}}, Light Brown eyes, beautiful detailed eyes, {{a white shirt}}, {{solo}}
这张在beautiful eyes前加了Confused Eyes. 还在最后加了 round glasses
这张在最后加了{Apathy} 大家都是喜欢冷漠的人呢
这张就是初始版本
这张是yellow eyes
第三章眼镜部分有崩坏, 谁去修复一下...
9. an extremely delicate and beautiful girl, dark cyan pupils, long white hair, choker, hair ornament hair clip,cold and elegant, close-up, half-body drawing, noble lolita with delicate texture, white atmosphere, high quality, masterpiece, {{1girl}}, 数据删除, 数据删除,
pupils是瞳孔! lolita是风格!
实际上这张图既不是数据删除的画风也不是数据删除, 因此牢记如果你要画某个特定角色, 要把关键词写在前面.
10. 没有机器人, 但是放一个盔甲还是可以的
{{masterpiece}}, best quality,Silver Knight in Armor, Metal, 数据删除,extremely detailed HD wallpaper,realism, 8k,volume
左上角把水印也画出来了...感觉有点风险啊
进阶术式
具体的实验过程请移步专门的文章. 这里只放图和结论.
《参同真解》StableDiffusionWebUI 扩展功能研究(NovelAI)
首先是算法原理.
简单来说它有两个部分:
第一个部分是加噪声, 中二的说就是"破坏", 通过不断的添加高斯噪声到原图, 直到原图完全看上去就是纯随机的噪声为止. 程序会把这些高斯噪声的添加顺序和图片的标签关联起来.
第二部分是去噪声. 我们有了标签, 我们就可以大概知道需要去掉什么样的噪声. 通过按照顺序反向删除(去噪), 我们就可以重建一张妹子图片.
可以发现黑丝白丝上了一个非常明显的档次, 因为它们是非常简单的噪声, 而diffusion算法做的就是噪声.
通用配置参数一览:
| 所处位置 | 参数名称 | 影响程度 | NovelAI的官方配置版本 | 一个还不错的本地版本 | | text2img | sample | 结构相似, 内容连续变化 | 28 | 50 | | text2img | CFG scale | 结构相似, 内容连续变化 | 11 | 11 | | text2img | size | 内容完全不同 | 512*768 | 512*768 | | text2img | Seed | 内容完全不同 | -1 | -1 | | Setting | CLIP(位于页面底部中央) | 结构基本相似, 内容变化不连续 | 2 | 1 | | Setting | Eta noise seed(位于页面底部右下) | 结构非常相似, 微调画面. | 31337 | 0 |
右边那个配置有优势: CLIP是1, 可以应对"模型过分抄袭"的节奏.
Denoise length(img2img, inpaint专用):
它控制添加的噪声长度. 可以理解成对图的扰动程度.
我拉了500张来验证到底是怎么回事. 花了我4个小时... | img2img的修改能力 | | 0-0.1 | 用于超分辨率填充细节 | | 0.1-0.4 | 比较轻微的按图索骥. 缺乏想象力, 微调细节. | | 0.4-0.6 | 你和AI配合的阶段. 基本上跟你的涂抹结果挂钩, 你画的越好效果越好, 如果你涂的非常抽象那么AI这里尽力去救了, 如果你的涂抹存在非常大的边缘这里是救不了的. | | 0.6-0.9 | AI开始自我放飞. 会有非常大的概率出古神, 也会有相当的概率出你真正想要的图. 如果你直接把空白的图交给AI, AI凭空创造东西也是在这个范围里. | | 0.9-1 | 变化完成, 变成另一个人. 不会有古神, 质量稳定. |
其他参数解释:
CFG Scale:
它告诉模型应该遵循提示词到什么程度. 0: 放飞自我. 会出完全和提示词无关的图. 最大: 循规蹈矩, 即过拟合. 比如"一个带着帽子的蜥蜴人", ai会产出帽子把整个蜥蜴完全遮住的图片. 可以理解成: 乙方听甲方的话有多认真/多死板 进阶术式入门
摄影咒术 - 使用摄影镜头单词
包括以下名词: close-up 特写, close shot 近景, medium shot 中景, wide shot远景, panorama全景. 以及bokeh散景, caustics散焦.
还有我比较喜欢的斜角(荷兰角) Dutch angle. 让人物倾斜20% = 1:3.
另外, 推荐16:10的比例尺, 问就是黄金分割.
好啦 然后是:
然后是:
控制咒术 - 调整CLIP1和CLIP2
官方使用CLIP2, 本回答的部分图片使用CLIP1. 从效果来说, CLIP1具有一些非常特殊的风格, 这些风格和风格咒语存在一定程度的不兼容. CLIP2对一切都适应的很好, 只是如果你不手动选择一个风格, 会稍显朴素. 方法如下:
调整的位置在Setting标签页的中央最下部分.
将Stop At last layers of CLIP model调整到2.
然后重启程序.
之后生成的图片在PNG info里会多一句 "Clip skip: 2". 参数为: (((masterpiece))), best quality, illustration,((maid)),((white bloomers)), skirt lift, black tights, sunlight, beautiful detailed eyes, 1girl, expressionless, blue eyes, (((white short hair))), ((wavy hair)),(((dishevled hair))), messy hair, long bangs, hairs between eyes, ((open clothes))
太对了太对了 (clip 1)
CLIP 2, 比上面多了一个 flat color放在最开头.
奇怪的是, 我生成了快50张图片, 只有两张是黑丝, 其他都是白丝, 这...... 增长咒术 - 超分辨率
受到内存限制比较大. 建议用其他没有内存限制的ai. 方法如下:
使用相同的咒语, 调大分辨率, (过大的分辨率会爆内存.)
设置denoise非常小, sample数和CFG没有太大影响. 才发现好像Extra里内置了一个. 可以直接拿来用:
选择标签页Extra, 然后设置resize = 放大倍率就行了. 净化咒术 - 去除多余的附件或肢体, 使用原版img2img
效果不是非常好. 涂抹的效果会影响生成, 如果涂抹有明显分界(边缘), 该边缘也会被保留. 方法如下:
使用windows的画图进行简单涂抹.
使用相同的咒语,
调整denoise为0.25左右. 变换咒术 - 使用img2img生成相同姿势的另一个人
效果比其他都好了很多, 可以说是目前效果最好的. 方法如下:
使用相同的咒语,
调整denoise为1. 就这么简单.
已知p = 7*19*765773, 求p=? 再生咒术 - 使用inpaint
效果勉强. 受到涂抹和蒙版的双重限制, 如果花多点时间可以修复错误. 方法如下:
使用windows的画图进行比较细致涂抹.
选择下方Draw Mask, 涂上蒙版
设置Denoise参数, 参考最开始图表.
迭代一两次.
使用inpaint修复后
img2img生成的对比图
转换术式 - 尝试img2img使用风格迁移
效果勉勉强强, 和记忆中的风格迁移ai没法比, 建议使用其他的AI. 方法如下:
删除原有prompt, 只使用风格prompt
设置denoise在0.5左右, CFG = 17左右.
迭代一两次. 咒语为: {{{masterpiece}}}, best quality, illustration,maid, black tights, sunlight, beautiful detailed eyes, 1girl, expressionless, blue eyes, {{{white short hair}}}, {{wavy hair}},{{{dishevled hair}}}, messy hair, long bangs, hairs between eyes, {{{{white bloomers}}}},{{open clothes}}
以下是使用添加了新风格的咒语和原有咒语(略有修改), 在txt2img里生成的对比图:
咒语为: {{flat color}}}, {{monochrome}}, {{{lineart}}}, best quality, blue eyes, beautiful detailed eyes, maid, blue hair, {black tights}, she looks very relaxed, white atmosphere, high quality, masterpiece, 1girl, looking at viewer, an extremely delicate and beautiful girl, half-length portrait, {{{white short hair}}}, {{wavy hair}},{{{dishevled hair}}}, messy hair, long bangs, hairs between eyes, {{{{white bloomers}}}},{{open clothes}}
图像生成AI的过去与未来（利益相关：人工智能专业）
我还记得当年看到的第一个网站是make.girls.moe.那个时候还是简单的二次元头像。算法应该是非常古老的了（我忘了）。
大家好, 这是我赛博初恋:
以及其他翅膀们:
最大的问题是只有头部. 衣服部分几乎只有一点点. 风格也非常固定.
之后waifulab横空出世，可调整的姿态，颜色，以及甩不掉的水印。我没记错的话算法是gan。几个大学生弄出来的。我觉得交互体验上要比novelai强许多，当然效果还是不如。
大家好, 这是我赛博头婚对象:
(不给看, 因为她是我steam头像).
以及其他的翅膀们:
这是四张图, 是同一个妹子不同姿态构成的四张图拼在一起的. 头发的问题稍微好了, 装饰品也有模有样了. 但是衣服还是非常混沌.
怀抱着无限的热情，我的毕设选择了vae，尝试用vae来制作音乐。从结果来说非常糟糕，不过也没挂，总之很好玩！
应该是半年多前，我知道了diffusion。谁知道这么快就可以看到结果了啊啊啊啊。
很快乐，真的，很快乐。
快乐完了来说说局限性吧:
总的来说, 半身像基本上是可以达到中高端水平了. 稍微看一下刚才说的历史也不难发现, 毕竟这是一步一个脚印走过来的.
同样, 问题出现在半身像之外的地方: 手和腿的不自然. 包括多根手指, 多条手臂. 往好了说, 这其实是一种印象派的叠加态:
这张图就很明显了. 妹子的手可以是伸出去握住, 也可以是收回来. 从艺术的角度来说, 这可能暗示了观众可以参与之类什么什么的. 但是问题恰恰在这里: ai画出来这种叠加态, 不是ai具有一定的艺术审美故意搞出来的, 它就是菜, 训练集里两种都有, 但是它没法决定.
这个问题能解决吗? 其实已经解决了. waifulab的衣服就具有这样的叠加态, 但是我们在novelai上已经看不见了, 所以等下一个ai出来, 我估计就能解决这个问题了.
第二个问题是不连续.
注意看尾巴. 我们可以一眼看出来这个尾巴断了或者她非常奇怪的坐在尾巴上. 但是实际上ai无法识别, 因为这个姿势一定会挡住一部分尾巴, 而ai是不可能学到被挡住的部分是怎么进行的, 所以很难画出来正确的尾巴.
更加严重一点的就是混合了叠加态和不连续的图, 比如那张数据删除:
注意看双腿间的屏风部分. 因为双腿的分割, 导致ai学习的时候学会的叠加态得以出现: 既有背后有屏风, 也有背后没有屏风的图, ai无法决定使用哪个, 于是内部使用了空背景, 外部使用了屏风背景. 这也可以做不连续的解读: 因为双腿的遮挡, 导致ai学习的时候无法学习到屏风是连续的这个东西, 所以它画出了消失的屏风.
总之, 我很乐观. 毕竟从make.girl.moe到waifulab再到今天的NovelAI, 进步是显而易见的, 而且就算不进步, 那些nsfw的图也够用了 :)
利益相关：显卡消费者
一个月前嘲笑老黄。
一个月后A卡和10系列以下不得入内。
AMD? no no no，我这款可是4090, 你抽一张我抽10张，你出768我出4k，我的显卡超频到3.1GHz, 而你的显卡根本用不了只能用cpu, 我的waifu比你多还比你大，你拿什么跟我比？
这下不得不赎罪券了。
稍微体验了一下。
我用colab是20秒一张图（采样次数50）.
这意味着一个晚上10个小时，一个符合我xp的描述，能出2000张。
2000张中等水平的插图啊。
现实更加夸张。
据说A100可以达到2秒钟1张图.
我见识少,
但是如果新的4090能达到10秒一张,
这钱我掏定了! |
本帖子中包含更多资源
您需要 登录 才可以下载或查看，没有账号？立即注册
×
|
变色卡
