目前三大 AI 繪畫平臺(tái):Stable Diffusion、Midjourney、DALL-E2。

以下是一些當(dāng)前最新的 AI 繪畫技術(shù)和應(yīng)用的具體例子：

1）Stable diffusion

簡單來說是一個(gè)文本到圖像的潛在擴(kuò)散模型，由、和的研究人員和工程師創(chuàng)建。它使用來自數(shù)據(jù)庫子集的圖像進(jìn)行訓(xùn)練。使用這個(gè)模型，可以生成包括人臉在內(nèi)的任何圖像，因?yàn)橛虚_源的預(yù)訓(xùn)練模型，所以我們也可以在自己的機(jī)器上運(yùn)行它。

從功能上來說主要包括兩方面：

其核心功能為僅根據(jù)文本提示作為輸入來生成的圖像（text2img）；

你也可以用它對(duì)圖像根據(jù)文字描述進(jìn)行修改（即輸入為文本+圖像）；

只是一個(gè)工具，它的后端需要訓(xùn)練模型來進(jìn)行 AI 圖片生成，目前主流三大模型：

a) : 一般簡稱 SD 模型，如我們 demo 里提供的 sd-v1-4，目前最新的是 stable-diffusion-v1-5，偏真人風(fēng)格；

b) : 一般簡稱 Waifu 或者 WD 模型，偏二次元，是 B 站大家用愛發(fā)電實(shí)現(xiàn)的；

c) ：一般簡稱 Naifu 模型，更偏二次元；

可在 Google 的免費(fèi) GPU 服務(wù)器上跑一個(gè):

畫手和改變姿勢(shì)一直是 AI 繪畫的弱勢(shì),如圖：

(來源：https://mp.weixin.qq.com/s/YivzVlALm7ClxqbCPEBY2A)

但隨著模型（ 的作者是一個(gè) 2021 年才本科畢業(yè)，目前正在斯坦福讀博的中國人）的引入，已經(jīng)攻克了，標(biāo)志 AI 繪畫又上一個(gè)臺(tái)階。

其主要通過添加額外條件來控制擴(kuò)散模型，改善了圖生圖效果，并能實(shí)現(xiàn)線稿轉(zhuǎn)全彩圖、指定生成人體姿勢(shì)，通過手部關(guān)鍵點(diǎn)還能優(yōu)化手部的生成。

(來源：https://mp.weixin.qq.com/s/YivzVlALm7ClxqbCPEBY2A)

比如手繪圖案輔助 prompt 描述：

此外去年年底 12 月，也發(fā)布了 2.0 版本，有許多重要更新，比如新的生成圖片會(huì)保持原來圖片的形狀和結(jié)構(gòu)、支持 768 * 768 高分辨率圖片等等。

2）Midjourney

在里面，需要翻墻；不用安裝，向機(jī)器人輸入關(guān)鍵詞，就給你生成圖片；允許每月免費(fèi)使用，有很大的時(shí)長或者次數(shù)限制，僅能看部分作品；每月大概需要付費(fèi) 30 美元，訂閱它的人非常多；簡單的平面廣告插畫，類似 ppt 里的 slide 的小圖片，可以批量生成，質(zhì)量很高，稍微改改就能商用。這部分的從業(yè)者更可能受到 AI 繪畫的沖擊。

其是托管在 服務(wù)器上的 AI 作畫工具，先講這個(gè)工具是因?yàn)樗鼘?duì)于初學(xué)者非常友好，使用上非常簡單，生成的圖片質(zhì)量高，速度快。對(duì)于想對(duì) AI 作畫入門的同學(xué)來說，我個(gè)人覺得應(yīng)該是首選了。目前我覺得它唯一的缺點(diǎn)就是需要付費(fèi)，不過前期作為實(shí)驗(yàn)，大概能免費(fèi)生成幾十張圖片，想玩一玩的朋友我覺得足夠了。

使用教程如下：

a)進(jìn)入官網(wǎng)

b）加入社區(qū)

加入社區(qū)。

進(jìn)入頻道，但太多人聊天了消息會(huì)被沖走，所以創(chuàng)建子區(qū)進(jìn)行聊天。

c) ai 繪畫

輸入,即可發(fā)送繪圖指令。

生成之后可以各種微調(diào)，如果你一開始不知道輸入什么關(guān)鍵詞才好，我建議你可以直接到 Midjourney 官網(wǎng)的案例專區(qū)參考關(guān)鍵詞：

或者在其他房間參考別人的關(guān)鍵詞，也可以利用谷歌翻譯把自己想說的按照下面的公式翻譯后出圖，關(guān)鍵詞盡量具體，AI出圖也會(huì)更加具體。

(來源：https://mp.weixin.qq.com/s/7TKnb9Ckb5VOIlBqnPme0g)

(來源：https://mp.weixin.qq.com/s/7TKnb9Ckb5VOIlBqnPme0g)

一般以下關(guān)鍵詞格式可以生成比較好的圖片：主體內(nèi)容+氣氛燈光色彩+構(gòu)圖+風(fēng)格參考。

(來源：https://mp.weixin.qq.com/s/7TKnb9Ckb5VOIlBqnPme0g)

但是生成手還是有點(diǎn)一言難盡。

3）DALL-E2

簡介

就是開發(fā)了的那家 OpenAI，免費(fèi)，科學(xué)上網(wǎng)，手機(jī)上能用，生成圖片很快；文字輸入生成圖片，內(nèi)容偏創(chuàng)意一點(diǎn)，AI 也挺能理解人話。

輸入格式為：某種行為、場(chǎng)景描述、事物、畫面風(fēng)格。

官網(wǎng)介紹如下：

有挺多繪畫風(fēng)格，油畫、印象派、水彩、蠟筆、梵高莫奈等等流派，這個(gè)繪畫軟件適合腦洞豐富的人。其有相關(guān) api 接口：

使用接口需要的 api key，就可以利用其 AI 繪畫接口與 chatGPT 相結(jié)合，生成素材創(chuàng)意腳本后繪圖，企微機(jī)器人+（模型）繪畫 api。

邏輯圖如下：

除了以上三大繪畫平臺(tái)外，還有（代碼開源，適合二次開發(fā)，搞 AI 作畫也就都是免費(fèi)的，但免費(fèi)的同時(shí)缺點(diǎn)也比較明顯，速度比較慢，第一次使用會(huì)有些門檻，需要配置一些參數(shù)）。以及國內(nèi)的剪映、一幀秒創(chuàng)、百度文心、意間等，簡單總結(jié)如下：