最近比较痴迷于AI绘画
在本地部署了前沿的 与 AI绘画模型
这几天用自己的显卡跑了这些模型并做了很多测试,AI出图的效果非常惊艳
但鉴于很多人对AI绘画不了解,甚至对其有误解,于是我写下了这篇非常详细的并且通俗易懂的关于现阶段AI绘画的文章
你想知道的有关AI绘画的前沿内容,以及我对AI绘画的伦理问题思考,均在↓
一.AI绘画的历程
AI绘画其实在很早以前就出现了,只不过那时候的效果不尽人意。
而在最近几年出现了一个名为‘’概率去噪扩散算法‘’,在这种算法的加持下,各种AI绘画模型才开始开始层出不穷,但是这些早期的AI绘画模型要么被大公司长久把持(例如公司,他们早在2021年就推出了Dall-E1AI绘画模型,并未开源),要么生成图画的效果不佳,还达不到破圈能力。
直到.ai公司于2022年8月份发布并开源了 AI 绘画模型,这才彻底让AI绘画热潮爆发!
– 免费、生成速度又快,每一次生成的效果图就像是开盲盒一样,需要不断尝试打磨,所以大家都疯狂似的开始玩耍,甚至连特斯拉的前人工智能和自动驾驶视觉总监 都沉迷于此
采用的底层算法与普通的扩散算法不同,它在其外面还套了一个VAE模型,因此达到了更快的画图速度和更高的画图质量
而到了2022年10月份,基于 的二次元AI绘画模型横空出世,强大的二次元插画绘图能力,使其一跃成为全球最好的动漫插画生成模型
总的来说,目前比较前沿的AI绘画模型有: ,Disco ,,DALL-E 2,。
前两者的模型是开源的,而后三者未开源
未开源意味着我们普通人要想使用这些AI模型绘画的话,必须要去他们的官网排队付费申请使用资格
最近引发很大争议的《太空歌剧院》就是由所作
太空歌剧院
国内的AI绘画小程序也是在最近8,9月份开始兴起的,他们使用的模型就是主要就是已开源的 和Disco ,大家可能也尝试过,但效果并不怎么好而且还收费,效果不好是很正常的,因为普通用户输入的没有经过专业训练,不规范,这个后文会详细说明
不过就在最近,发生了一件有趣的事,未开源的二次元AI绘画模型就在发布的那一天被一个黑客窃取,这个泄露的AI模型也就被公开在互联网上了,我也有幸在很早就拿到了这个模型并在本地部署,做了很多测试,后文会详细说明。
二.AI的简单原理
AI绘画原理(图片来源于网络)
鉴于很多人没有深入了解过人工智能,所以就简单的讲一讲人工智能中的神经网络,不讲AI绘画的具体原理,因为本人了解的也不是很深入,而且面对大量的英文文献和数学符号,估计你也没有那个耐心,也听不懂。
神经网络示意图
神经网络是很多人工智能最最最基本的架构,它模仿的就是我们人类大脑中的神经元,我们人类画师是如何学习绘画的?那可是通过长久的绘画练习,大量的临摹,日复一日,年复一年才训练出来到。而神经网络也类似,它也需要学习,程序员把数以千亿的人类历史上的画作输入给神经网络,让其自我学习,并从中寻找规律,从而形成AI自己的绘画模式,这需要极其庞大的算力,不是一般的设备可以做到的。
于是很多人就认为AI 作画是“对人类画作简单拼接,就是缝合怪,甚至可能称得上抄袭”。不过几十年前AI确实是这样干的,但现在的AI已经不可同日而语了
还有一种观点是“AI 很不擅长处理细节,比如手部、腿部、表情/发型/服装细节,AI 不能完美理解语义”,这一点是对的,这些问题长久以来都是 AI 绘图最大的局限性之一。但需要注意的是,随着训练集规模与模型规模的迅速增长,这些问题也在肉眼可见地被快速解决。
三.AI绘画教程AI绘画渠道
目前有三种渠道:
国内的AI绘画软件/小程序/app(效果鲜有达到水准的工具,但也有部分内置强大算法的工具)去那些前沿AI绘画模型发布的官网(因为都是外国公司,网站访问速度较慢,有些网站需要有测试邀请码,大都需付费)本地拉取上已开源AI绘画模型并本地部署(门槛较高,显卡要求较高)
各大官方网站如下:
这些网站无需翻墙
如果想要在自己电脑上面部署,还想有好的出图效果的话,显卡要求不低于,显存不低于6G,显卡越强,出图的效果也越好。而且现在网络上的AI绘画模型部署教学非常多,感兴趣的同学完全可以自己去尝试
如何查看自己电脑详细配置:按住win+R键唤出运行对话框,在其中输入“”回车即可
AI绘画教学
这些AI绘画最基本的两种玩法是text-to-image(以用户输入的文字生成图片)和image-to-image(以图生图)
先说text-to-image:用户需自己输入一段文字(通常称用户输入的内容为或tag),AI就会根据用户输入的文字来生成图画
这个可是非常有讲究的,举个例子,比如你要生成一个漂亮的女孩,你可不能只简简单单输入 ‘A girl’,这样生成的图片不会好看的,你想想看,你要AI画的女生是长发,短发,单马尾,还是散发?有发饰,眼镜吗?是全身照,还是某个部位特写?是正面,还是侧面,背面?是什么风格?速涂,草稿,线稿,油画,设计图,概念设计,速写,立绘还是厚涂?2D还是3D?光效是什么样的?是全局光照,柔和光照,边缘照明,体积照明还是电影照明?……
不难看出,要想熟练的使用AI绘画画出惊艳的画作,需要使用者有较高的美术素养
不过在这里要给大家提到一款最近我使用得最频繁的一款AI绘画工具——“一键AI绘画”,
这款软件可以说完全不需要绘画功底,而且输入的也不需要特别讲究~
以下为“一键AI绘画”生成的优秀画作以及对应的:
美丽的树枝,温和的仙雾,白红色的梅花,梅花,山谷,雪,花瓣清晰,花瓣上的雪,现实,真实,像爱的感觉,复杂的细节处理,高清,梦幻童话王国高清
中景镜头,富豪,舞,蛇瞳,脸色苍白,发光的头发,圈形耳环,实验室外套,闪亮袜子,机械角,绑在十字架上,公主抱,月亮,泡泡龙,摄影法
精美CG,高清,高画质,黄色背景围绕,金色荷花背景,五官精致,精美长发,雾霾灰色头发,光亮肤质,淡紫色的大眼睛,水嫩小嘴,面部聚焦,小雏菊花枝,浅黄色汉服,8k,丁达尔效应
当然,不要以为制作这样精美的图片很难,实际上操作非常简单;
打开软件后找到【特效工具】中的【AI绘画】功能,随后在文本框内输入想要的画面描述,选择画作模型和调整画布尺寸、数量等设置即可;
生成的效率和质量都非常不错,即便是输入同样的也能生成截然不同的画作~
image-to-image就是用户上传一张图片,然后AI根据用户上传的图片和用户输入的进行绘制,举个实用的例子,你可以只画一个线稿,然后让AI在你的线稿上的基础上继续作画,达到成品的效果
详细的教程可以参考以下网站(我也收集很多库,可以私聊我获取哦):
/////
以下为Disco 生成的优秀画作以及对应的:
{{}}, ,best ,,{},A field of at ,by greg and , on . color .
A , in the light of blue sky and white , the gaps in the on the , a lake in the , and foggy in the ,By
Port, , smoke,
以下为我最近用 生成的画作以及对应的:
A matte of of Eden, , , high , , , , epic wide shot, sharp focus,by , , wlop, greg
{{}}, ,best ,,,An old man with a straw hat and a was alone in a canoe on a cold lake. Snow was in the sky,by ,Greg ,oil
{{}}, ,best ,,,A snowy ,,sunny day, , Greg , ,,
,best ,,, of 1 girl with hair and , a small crown and blue , a bust,by ,Greg , Mucha,deco art,,garce,,wings,,line art, light,close-up, shot.
{{}}, ,best ,,,A huge ship was in the sea. The were thick in the sky. There were on the mast,oil
四.二次元AI绘画模型
的出现在二次元的产业应用上是一个非常强大的存在,生成的效果好于中流以下的画师,之前需要找画师去画的一些插图基本上都不需要了,这个不仅可以给一些轻小说做角色设计图,场景图,而且对于那些独立的游戏制作人来说也是可以大幅的降低成本
以下为我最近用生成的作品以及对应:
, ,best ,,,three views from front, cover, art,{ sheet},White hair, blue hair , armor, skirt armor
an and girl, wide view, cold , red , short hair, white hair, hair, black tie, hair hair clip, she looks very , side face, white , 1girl, {{{ink wash }}}, white , clean
CG unity 8k ,{{}},, , best , ,a girl with hair ,Long white hair,,hair eyes,red pupil, and white scarf,hold head with hands, sit by the , and look out of the , angle,muted ,{{}},{{{}}}
{{}},{best },{},solo, {city},a girl with eyes and ear by {many} {} {in tears},night with with many and moon in the sky,{a lot of },
solo focus,1 girl,, a basin of in both hands, a straw hat, hat, and long black hair,-on, angle, paint, at ,, face and eyes, in a sea of , the blue sky is full of , and birds are in the sky,hair ,,{{}}, ,{best },,,,, ,{{}},muted ,{{{}}}
a girl with hair ,high white hair,,hair eyes,red pupil, and white scarf,{{}},,,mole under eye, eyes,white ,,full body,{ }, art,{}, art, ,{ sheet}
{}, {best } , {{ face, focus on face, angle of }}, {{ 8k CG}}, {{ oil }}, Art, A boy with black and white hair,top hat, white , watch, and , light, , and blue ,,close-up,{{}}
因为我个人能力有限,就在网上找了几张大佬用做的图
B站up主:夜歩空
B站up主:夜歩空
B站up主:日式茶泡饭