时讯：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型-海峡技术网

时讯：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

2023-04-21 07:51:48 | 来源：程序员客栈

【资料图】

点蓝色字关注“机器学习算法工程师”

设为星标，干货直达！

自从 DALL·E 2 之后，在图像生成方面扩散模型替代GAN成了主流方向，比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日， Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿（1B）的GAN模型：GigaGAN，其在文生图效果上接近扩散模型效果，而且推理速度更快，生成512x512大小图像只需要0.13s，生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能，比如latent插值，风格混合，以及向量运算等。

GigaGAN

改进了StyleGAN架构，采用两阶段训练策略：一个是64x64的图像生成器和一个512x512的图像超分2器，其图像生成器架构如下所示（这里也是采用CLIP text encoder来引入text condition）：

GigaGAN

在 LAION2B-en和 COYO-700M数据集上训练，其在COCO数据集上的FID达到9.09，超过stable diffusion 1.5，推理速度比stable diffusion快20倍多（2.9s vs 0.13s）：

GigaGAN

除了文生图能力，还可以实现可控的合成，比如风格混合，如下图所示：

更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

上一篇下一篇

相关新闻

时讯：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

谱尼打发攻略_谱尼打发|天天速看

氟化工概念股(佰仁医疗器械股票分析)

“五一”买到无座不要傻站着啦！高铁无座也是可以坐的

《浪姐4》开录半个月，朱珠身材暴瘦显憔悴，贾静雯体重不足90斤-焦点关注

每日快报!欧洲议会批准首个加密货币法规，将加密市场纳入受监管范围

身边的环境卫生面貌②｜石家庄市精细化推进背街小巷改造

外汇百晓生：短线黄金空单，小盈离场，明天再战世界热头条

天天通讯！AI主播河宝带你逛地标⑥丨打卡郑州龙湖金融岛

【全球播资讯】石家庄国际农产品批发交易中心5月1日投用

世界今头条！齐鲁康体公园全力建设中

每日观察!反复震荡和纠缠中！

中国工程院院士邬贺铨：移动通信进入5.5G周期为6G创新探路

播报：1234612！这是湖北的先行“密码”！

建滔集团(00148)拟回购公司股份天天时讯

最新新闻

时讯：GAN卷土重来：10亿参数的GigaGAN效果堪比扩散模型

谱尼打发攻略_谱尼打发|天天速看

氟化工概念股(佰仁医疗器械股票分析)

“五一”买到无座不要傻站着啦！高铁无座也是可以坐的

《浪姐4》开录半个月，朱珠身材暴瘦显憔悴，贾静雯体重不足90斤-焦点关注

每日快报!欧洲议会批准首个加密货币法规，将加密市场纳入受监管范围

身边的环境卫生面貌②｜石家庄市精细化推进背街小巷改造

外汇百晓生：短线黄金空单，小盈离场，明天再战世界热头条

天天通讯！AI主播河宝带你逛地标⑥丨打卡郑州龙湖金融岛

【全球播资讯】石家庄国际农产品批发交易中心5月1日投用

世界今头条！齐鲁康体公园全力建设中

每日观察!反复震荡和纠缠中！

中国工程院院士邬贺铨：移动通信进入5.5G周期为6G创新探路

播报：1234612！这是湖北的先行“密码”！

建滔集团(00148)拟回购公司股份天天时讯

Battle！这家上市公司实控人刚被解除留置又遭索赔11.55亿元_当前通讯

天津生态城消费券怎么领取？_世界今热点

华宝新能：公司Jackery电小二在抖音、天猫、京东等各大电商平台定期直播

冰淇淋只给外国人？宝马mini道歉基本信息讲解_世界热文

图解广生堂年报：第四季度单季净利润同比减289.50%_前沿热点

国创高新签署房产置换协议置入房产将用于打造研发中心

记者：如果不会得到更多时间，马兹拉维对夏窗离开拜仁非常开放

这是谁的部将？砍22分13板，打爆浓眉！恭喜他吧，要拿大合同了_天天要闻

全球速讯：港股异动 | 越秀地产(00123)复牌重挫逾16% 拟折让28.3%供股净筹约83亿港元

天天关注：株洲市特殊教育学校：锻造“美好教师” 打造“美好教育”

化学、化工板块震荡走低，亚星化学午后跌停，新疆天业、卫星化学跌超6%，华鲁恒升、远兴能源等跟跌世界动态

徐五笔打字怎么打

比5G好用10倍华为持续推动5.5G时代建设：万兆网速体验|全球热讯

最容易遭受勒索软件攻击的十大行业

联合国向美国就“泄密文件”事件表达关切