發(fā)布時間:2024-04-03 17:33:08 瀏覽量:241次
作者 | Ezequiel Lanza、Ruonan Wang
譯者 | 劉志勇
策劃 | Tina
本文最初發(fā)表于 Medium 博客,經(jīng)原作者授權(quán),InfoQ 翻譯并分享。
導(dǎo)讀:本文介紹了如何使用 Stable Diffusion 模型從文本生成圖像。作者詳細(xì)介紹了該模型的架構(gòu)概述以及學(xué)習(xí)過程,并指出該模型需要大量計算,但可以使用英特爾提供的優(yōu)化技術(shù)縮短運行時間。同時,文章還提供了文本到圖像的實現(xiàn)步驟,并鼓勵讀者在 GitHub 上跟隨實現(xiàn)。
如果說每種技術(shù)都有其季節(jié),那么人工智能已經(jīng)迎來了“夏天”。人工智能的一系列進(jìn)步引領(lǐng)了該學(xué)科目前的繁榮,并帶來了對未來的巨大期望。
計算機(jī)視覺就是一個典型例子。盡管對計算資源的需求很高,但在圖像生成(Huang 等,2018)領(lǐng)域已經(jīng)取得了巨大的進(jìn)展。圖像生成始于生成式對抗網(wǎng)絡(luò)(Generative Adversarial Network,GAN)范式,然后逐步發(fā)展到如今的擴(kuò)散模型。這種進(jìn)化為數(shù)據(jù)科學(xué)家提供了易于訓(xùn)練、快速收斂并能可靠生成高質(zhì)量圖像的模型。
這種技術(shù)在人工智能內(nèi)容生成(generative AI,AIGC)中發(fā)揮著重要作用,它能夠生成各種數(shù)據(jù),包括音頻、代碼、圖像、文本、模擬、3D 對象、視頻等等。它通過訓(xùn)練算法來基于以前的訓(xùn)練數(shù)據(jù)生成新的信息。AIGC 有許多用途包括文本生成(如 GPT,Bidirectional Encoder Representations from Transformer(BERT)或最近的 ChatGPT)、音頻生成、文本到圖像的創(chuàng)建(DALL-E 或 Stable Diffusion)等。
在本文中,我們將展示如何借助 BigDL( BigDL Nano 中的優(yōu)化)在 Intel 筆記本電腦上運行優(yōu)化后的 Stable Diffusion 模型,從而實現(xiàn)文本到圖像的生成。
使用 Stable Diffusion 生成圖像有兩種方式:無條件和有條件。
無條件圖像生成:可以從噪聲種生成新的圖像而不需要任何條件(例如提示文本或其他圖像)。模型在訓(xùn)練之后可以生成新的隨機(jī)圖片。相關(guān)詳細(xì)信息,請查看此使用蝴蝶圖像訓(xùn)練模型的示例。

訓(xùn)練集

生成的圖像
有條件圖像生成:該模型可以根據(jù)輸入條件生成新的圖像,而有條件圖像生成的具體應(yīng)用包括文本到圖像、圖像到圖像、語義、修補(bǔ)和補(bǔ)全等。讓我們來詳細(xì)看一下:
以下是一個輸入文本的示例:一只戴眼鏡的狗。

熱門資訊
1. 華為手機(jī)神奇“AI修圖”功能,一鍵消除衣服!原圖變身大V領(lǐng)深V!
最近華為手機(jī)Pura70推出的“AI修圖”功能引發(fā)熱議,通過簡單操作可以讓照片中的人物換裝。想了解更多這款神奇功能的使用方法嗎?點擊查看!
近年來,人工智能逐漸走入公眾視野,其中的AI圖像生成技術(shù)尤為引人注目。只需在特定軟件中輸入關(guān)鍵詞描述語以及上傳參考圖就能智能高效生成符合要求的...
想將照片變成漫畫效果?這篇文章分享了4個方法,包括Photoshop、聰明靈犀、VanceAI Toongineer、醒圖,簡單操作就能實現(xiàn),快來嘗試一下吧!
4. 一款免費無限制的AI視頻生成工具火了!國內(nèi)無障礙訪問!附教程
人人都可以動手制作AI視頻! 打開網(wǎng)址https://pixverse.ai/,用郵箱注冊后,點擊右上角Create,就可以開始創(chuàng)作了。 PixVerse目前有文案生成視頻,和圖片生...
5. 趕緊收藏好!這4個完全免費的AI視頻制作網(wǎng)站和工具
以下是一些免費的AI視頻制作網(wǎng)站或工具,幫助您制作各種類型的視頻。 1. Lumen5:Lumen5是一個基于AI的視頻制作工具,可將文本轉(zhuǎn)換為視頻。 用戶可以使...
6. 零基礎(chǔ)10分鐘生成漫畫,教大家如何用AI生成自己的漫畫
接下來,我將親自引導(dǎo)你,使用AI工具,創(chuàng)作一本既有趣又能帶來盈利的漫畫。我們將一起探索如何利用這個工具,發(fā)揮你的創(chuàng)意,制作出令人驚嘆的漫畫作品。讓...
就能快速生成一幅極具藝術(shù)效果的作品,讓現(xiàn)實中不懂繪畫的人也能參與其中創(chuàng)作!真的超贊噠~趣趣分享幾款超厲害的AI繪畫軟件,提供詳細(xì)操作!有需要的快來...
8. AI視頻制作神器Viggle:讓靜態(tài)人物動起來,創(chuàng)意無限!
Viggle AI是一款免費制作視頻的AI工具,能讓靜態(tài)人物圖片動起來,快來了解Viggle AI的功能和優(yōu)勢吧!
9. 10個建筑AI工具,從設(shè)計到施工全覆蓋!肯定有你從來沒聽過的
講述了建筑業(yè)比較著名的AI公司小庫科技做出的探索,在這兒就不多說了。今天,我們試著在規(guī)劃設(shè)計、建筑方案設(shè)計、住宅設(shè)計、管道設(shè)計、出渲染圖、3D掃...
10. Logo Diffusion——基于sd繪畫模型的AI LOGO 生成器
這下LOGO設(shè)計徹底不用求人了。接下來詳細(xì)演示一遍操作流程首先進(jìn)入Logo D... 想學(xué)習(xí)更多AI技能,比如說關(guān)于怎么樣利用AI來提高生產(chǎn)效率、還能做什么AI...
最新文章
同學(xué)您好!