Stable Diffusion

AI绘画工具

说到AI绘画工具,现在应该能找出很多,比较主流的有Midjourney(简称MJ),Stable Diffusion(简称SD),DallE,Leonardo.Ai等等。

Stable Diffusion PROMPT入门学习 

SD主流 UI: 

Stable Diffusion因为其开源特性,有着较高的受欢迎程度,并且基于SD的开源社区及教程、插件等,都是所有工具里最多的。基于SD,有不同的操作界面,可以理解为一个工具的不同客户端。目前主流的操作界面有 WebUI和ComfyUI。

ComfyUI 安装: 

点击:《Stable-Diffusion-ComfyUI保姆级教程》文章 ;《超自然的AI 任意换脸!保姆级教程》-(作者:跟着安琪学AI)

 

Stable Diffusion 3

作为最新版本的 AI 图像生成模型,Stable Diffusion 3 带着万众期待来了。

Stable diffusion 3 的本地搭建过程:点击《Stable Diffusion 3搭建教程及官方实例演示(作者:IT之家)

Stable Diffusion 3允许商业化

2024年7月6日凌晨,著名开源大模型平台Stability AI修改了社区许可协议,最新发布的文生图模型Stable Diffusion 3 Medium允许商业化(以下简称“SD3-M”)。

如果企业、个人开发者每年收入低于100万美元(大约726万元人民币),只需向Stability AI填写一份申请,就可以免费将SD3-M用于商业化,包括数据微调、开发生成式AI应用等。

这个消息对于个人开发者和初创企业来说是相当好的,可以免费商用目前最强的文生图片模型之一,可与闭源模型Midjourney、DALL·E 3相媲美,同时学术研究机构仍然不受限制地使用SD3-M那个协议不变。

SD3-M是Stability AI在今年6月12日开源的,当时的规定只能用于学术研究,想商业化只能加入他们的超级会员服务。SD、SD2、SDXL等免费开源和商业化全球下载量超过数千万,也为Stability AI带来超百万开发者。

根据最新修改的协议显示,这个100万美元收入是一个硬性指标,就是说无论你是通过SD3-M获取的100万美元收入还是公司其他业务。此外,Stability AI表示,为了提供更好的模型、架构和微调方法,未来几周内会发布一个更大版本的模型。并且会继续分享给社区的用户,言外意思就是说会继续开源。

Stability AI的技术:

根据之前Stability AI公开的技术报告显示, SD3-M模型拥有20亿参数,平均生成图片的时间约为2—10秒,推理效率极高,对硬件的要求相对较低,非常适合在PC、手机和平板等移动设备上使用。

SD3-M与前几代相比,在图片质量、文本语义还原、光影、色彩有了很大提升,尤其是文本嵌入方面改变很大,减少了字体识别不好、嵌入不正确等问题。

训练数据集方面,SD3-M使用了包含10亿张图片的公开和合成数据进行了预训练,同时针对特定艺术风格和领域,使用了3000万张图片进行了微调以及300万张偏好图片。

Stable Diffusion 3 Medium Demo (演示)

下载方式

开源地址: https://huggingface.co/stabilityai/stable-diffusion-3-medium

填写申请地址: https://stability.ai/community-license