GAN卷土重來(lái)：10億參數(shù)的GigaGAN效果堪比擴(kuò)散模型-環(huán)球觀點(diǎn)

程序員客棧 2023-04-16 07:56:22

(資料圖)

點(diǎn)藍(lán)色字關(guān)注“機(jī)器學(xué)習(xí)算法工程師”

設(shè)為星標(biāo)，干貨直達(dá)！

自從 DALL·E 2 之后，在圖像生成方面擴(kuò)散模型替代GAN成了主流方向，比如開(kāi)源的文生圖模型stable diffusion也是基于diffusion架構(gòu)的。近日， Adobe研究者在論文Scaling up GANs for Text-to-Image Synthesis提出了參數(shù)量為10億（1B）的GAN模型：GigaGAN，其在文生圖效果上接近擴(kuò)散模型效果，而且推理速度更快，生成512x512大小圖像只需要0.13s，生成16M像素圖像只需要 3.66s。同時(shí)GigaGAN也支持latent空間的編輯功能，比如latent插值，風(fēng)格混合，以及向量運(yùn)算等。

GigaGAN

改進(jìn)了StyleGAN架構(gòu)，采用兩階段訓(xùn)練策略：一個(gè)是64x64的圖像生成器和一個(gè)512x512的圖像超分2器，其圖像生成器架構(gòu)如下所示（這里也是采用CLIP text encoder來(lái)引入text condition）：

GigaGAN

在 LAION2B-en和 COYO-700M數(shù)據(jù)集上訓(xùn)練，其在COCO數(shù)據(jù)集上的FID達(dá)到9.09，超過(guò)stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：

GigaGAN

除了文生圖能力，還可以實(shí)現(xiàn)可控的合成，比如風(fēng)格混合，如下圖所示：

更多效果圖和技術(shù)細(xì)節(jié)見(jiàn)論文https://arxiv.org/abs/2303.05511和網(wǎng)站https://mingukkang.github.io/GigaGAN/

該作品系作者結(jié)合新聞時(shí)事、法律法規(guī)及互聯(lián)網(wǎng)相關(guān)知識(shí)整合，作品內(nèi)圖片源于網(wǎng)絡(luò)。僅供交流學(xué)習(xí)，若侵犯到您的權(quán)益，煩請(qǐng)聯(lián)系客服告知，我們核實(shí)后將立即刪除。標(biāo)簽：

最近更新

GAN卷土重來(lái)：10億參數(shù)的GigaGAN效果堪比擴(kuò)散模型-環(huán)球觀點(diǎn) 點(diǎn)藍(lán)色字關(guān)注“機(jī)器學(xué)習(xí)算法工程師”設(shè)為星標(biāo)，干貨直達(dá)！自從DALL...

世界簡(jiǎn)訊:房屋預(yù)告登記證明還能買(mǎi)賣(mài)嗎一、房屋預(yù)告登記證明是否可以買(mǎi)賣(mài)1、預(yù)告登記使債權(quán)通過(guò)登記的方式...

國(guó)防部：中國(guó)成功實(shí)施陸基中段反導(dǎo)攔截技術(shù)試驗(yàn) 2023年4月14日晚，中國(guó)在境內(nèi)進(jìn)行了一次陸基中段反導(dǎo)攔截技術(shù)試驗(yàn)，...

多花500很必要，榮耀MagicBook 14 2023登場(chǎng)，配i5處理器和高亮屏提起榮耀的MagicBook筆記本，其一直以來(lái)都具有鮮明的特點(diǎn)，就是連接...

2023年居然SSD自由了？這種驚喜來(lái)得太突然，長(zhǎng)江存儲(chǔ)YYDS 老黃的中端顯卡4070發(fā)布了，看了一下一些媒體的報(bào)道，有的說(shuō)它是新...

世界動(dòng)態(tài):二手房中介費(fèi)是什么,二手房中介費(fèi)能不能退二手房中介費(fèi)是什么?房屋中介是通過(guò)房屋中介機(jī)構(gòu)進(jìn)行二手房交易時(shí)支...

焦點(diǎn)簡(jiǎn)訊:住房補(bǔ)貼是什么意思住房補(bǔ)貼是什么意思1、住房補(bǔ)貼是國(guó)家為職工解決住房問(wèn)題而給予的補(bǔ)...

【獨(dú)家】共同犯罪中自首的認(rèn)定該怎么操作在共同犯罪當(dāng)中，根據(jù)各個(gè)罪犯的身份不同，那么此時(shí)作出的處罰也是...

注射室工作制度一注射室工作制度有哪些1 凡各種注射應(yīng)按處方和醫(yī)囑執(zhí)行。對(duì)過(guò)敏...

股權(quán)的含義及范圍具體是怎樣的股權(quán)的含義及范圍股權(quán)，即股東權(quán)，有廣、狹二義。廣義的股權(quán)是指股...

如何執(zhí)行剝奪政治權(quán)利的刑罰|世界看熱訊如何執(zhí)行剝奪政治權(quán)利的刑罰根據(jù)《刑法》的規(guī)定，執(zhí)行剝奪政治權(quán)利...

著作權(quán)法的主要原則都有哪些一、著作權(quán)法的主要原則都有哪些(1)作者利益與公眾利益協(xié)調(diào)一致的原...

熱點(diǎn)評(píng)！法律規(guī)定公職人員違紀(jì)如何處分一、法律規(guī)定公職人員違紀(jì)如何處分依據(jù)我國(guó)相關(guān)法律的規(guī)定，公職人...

要聞速遞：被上市公司收購(gòu)職工怎么安置當(dāng)公司被上市公司收購(gòu)后，就會(huì)成為上市公司的子公司，原公司的職工...

開(kāi)發(fā)商不辦理房產(chǎn)證怎么辦如果開(kāi)發(fā)商未在規(guī)定時(shí)間內(nèi)辦理房產(chǎn)證的話(huà)，購(gòu)房者可以發(fā)出出面催告...

今日熱訊：商標(biāo)權(quán)的取得原則是哪些商標(biāo)權(quán)的取得原則有使用原則、注冊(cè)原則、折衷原則（混合原則）這三...

著作權(quán)法定許可有哪些情況著作權(quán)法定許可，就是說(shuō)可以不經(jīng)作者或其他著作權(quán)人同意而使用其已...

著作權(quán)糾紛具體會(huì)有哪些著作權(quán)糾紛一般有著作權(quán)及其從屬權(quán)利的歸屬、侵權(quán)、違約的糾紛，著...

刑事逮捕最長(zhǎng)時(shí)間是多久簡(jiǎn)訊刑事逮捕最長(zhǎng)時(shí)間一般是7個(gè)月的時(shí)間，刑事逮捕的期限一般是不超過(guò)2...

世界信息:肇事罪與肇事逃逸罪的區(qū)別肇事罪與肇事逃逸罪的區(qū)別：交通肇事的犯罪的客體是交通運(yùn)輸?shù)恼?..

美國(guó)人質(zhì)被劫持殘殺, 美軍無(wú)能為力伊朗果斷出手, 西方最后這么說(shuō) 美國(guó)人質(zhì)被劫持殘殺,美軍無(wú)能為力伊朗果斷出手,西方最后這么說(shuō),

每日快報(bào)!切爾西對(duì)陣布萊頓賽前海報(bào)：倫敦的驕傲直播吧4月15日訊北京時(shí)間4月15日22:00，2022-23賽季英超聯(lián)賽第31輪...

焦點(diǎn)要聞：遇到價(jià)格欺詐該怎么維權(quán)？無(wú)論是線(xiàn)上購(gòu)物還是線(xiàn)下購(gòu)物，用合理的價(jià)格買(mǎi)到合格的產(chǎn)品是每一個(gè)...

長(zhǎng)期虛報(bào)工資一般如何處罰一、長(zhǎng)期虛報(bào)工資一般如何處罰公司在依法向有關(guān)主管部門(mén)提供的財(cái)務(wù)...

網(wǎng)絡(luò)詐騙多長(zhǎng)時(shí)間報(bào)警_世界速訊被網(wǎng)絡(luò)詐騙要立即報(bào)警。詐騙立案后不可以撤案，但是犯罪情節(jié)輕微不...

生活中租房糾紛可以報(bào)警嗎民警會(huì)告知租房糾紛屬于民事糾紛，建議租房糾紛當(dāng)事人根據(jù)租賃合同...

貸款還不了銀行起訴了怎么辦貸款還不了銀行起訴了是需要積極還錢(qián)的，否則是會(huì)存在個(gè)人的征信記...

前沿資訊!借條沒(méi)有擔(dān)保人法院生效嗎借條沒(méi)有擔(dān)保人法院生效，其并非借條生效要件之一。有擔(dān)保人的借條...

精選！拒收危重病人致死是不是醫(yī)療事故凡屬急、危、重病人，醫(yī)務(wù)人員借故推諉、拒絕收治，或未做任何檢查...

頂樓人家漏雨樓頂維修費(fèi)誰(shuí)出頂樓人家漏雨樓頂維修費(fèi)誰(shuí)出(《物權(quán)法》有效期限截止于2020年12月31...

15037178970

婚姻法

知識(shí)糾紛

律師最新回復(fù)

2022-08-30 09:48:22

律師回答區(qū)

高樓住宅玻璃炸裂應(yīng)該找誰(shuí)處理

回復(fù)：可以建議您先找一下物業(yè)，由物業(yè)處置
2022-11-14 09:48:30

律師回答區(qū)

退休職工漲工資最新消息退休人員漲工資注意事項(xiàng)有哪些？
2022-11-17 17:08:56

律師回答區(qū)

跳跳糖是毒品嗎？
2022-11-18 11:21:04

律師回答區(qū)

建筑勞務(wù)公司是什么意思
2022-11-18 12:16:14

律師回答區(qū)

民事權(quán)利包括哪些

狮王的巨大挺进体内h,扒开粉嫩细缝喷白浆sex,日产无码久久久久久精品,下乡供我的发泄村妇

GAN卷土重來(lái)：10億參數(shù)的GigaGAN效果堪比擴(kuò)散模型-環(huán)球觀點(diǎn)

最近更新

婚姻法

知識(shí)糾紛

律師最新回復(fù)

公司法