天天动态:GAN卷土重来:10亿参数的GigaGAN效果堪比扩散模型


【资料图】

点蓝色字关注“机器学习算法工程师”

设为星标,干货直达!

自从 DALL·E 2 之后,在图像生成方面扩散模型替代GAN成了主流方向,比如开源的文生图模型stable diffusion也是基于diffusion架构的。近日, Adobe研究者在论文Scaling up GANs for Text-to-Image Synthesis提出了参数量为10亿(1B)的GAN模型:GigaGAN,其在文生图效果上接近扩散模型效果,而且推理速度更快,生成512x512大小图像只需要0.13s,生成16M像素图像只需要 3.66s。同时GigaGAN也支持latent空间的编辑功能,比如latent插值,风格混合,以及向量运算等。

GigaGAN改进了StyleGAN架构,采用两阶段训练策略:一个是64x64的图像生成器和一个512x512的图像超分2器,其图像生成器架构如下所示(这里也是采用CLIP text encoder来引入text condition):GigaGAN在 LAION2B-en和 COYO-700M数据集上训练,其在COCO数据集上的FID达到9.09,超过stable diffusion 1.5,推理速度比stable diffusion快20倍多(2.9s vs 0.13s):GigaGAN除了文生图能力,还可以实现可控的合成,比如风格混合,如下图所示:更多效果图和技术细节见论文https://arxiv.org/abs/2303.05511和网站https://mingukkang.github.io/GigaGAN/

标签:

最近更新

天天动态:GAN卷土重来:10亿参数的GigaGAN效果堪比扩散模型
2023-04-07 05:59:02
公司倒闭赔钱怎么算的 公司倒闭赔偿金怎么算 全球关注
2023-04-07 01:04:43
不锈钢奥氏体和304哪个好_304不锈钢和奥氏体不锈钢的区别
2023-04-06 21:53:25
招财猫鱼怎么养才正确_招财猫鱼怎么养_世界看点
2023-04-06 20:45:06
每日观点:不足三年四次被罚,新生支付怎么了
2023-04-06 19:11:58
环球短讯!小米×徕卡影像战略合作的关键又一步,小米13 Ultra 4月全球首发
2023-04-06 18:26:38
今日播报!国际足联最新排名:国足亚洲第11位,世界排名降至81位
2023-04-06 17:20:40
快消息!买新车赠品有哪些 买新车赠品有什么
2023-04-06 16:41:10
世界聚焦:肉皮冻怎么做好吃又简单的做法_肉皮冻怎么做好吃
2023-04-06 15:51:34
京东奉上家居家装春季焕新福利 大牌爆品直降千元、限量免单
2023-04-06 14:49:38
世界速递!和讯个股快报:2023年04月06日 四方精创(300468)该股换手率大于8%
2023-04-06 13:43:01
祝贺!265项(人/组织)获2022年度河北省科学技术奖
2023-04-06 12:40:17
热资讯!眼弦赤烂
2023-04-06 11:51:25
稳外贸 福建从“新”出发_天天热资讯
2023-04-06 11:00:26
世界热门:黄陂“微度假”获央视关注
2023-04-06 10:14:40
推进药品集采 让优质医疗普惠可及_当前关注
2023-04-06 09:21:15
沙特阿美牵手我国石化企业 每日播报
2023-04-06 08:33:09
兵败如山倒!这波降价潮,揭开了三线合资品牌最后的“遮羞布”!
2023-04-06 07:15:16
张金麟院士追思会在中国船舶七一九所举行
2023-04-06 04:54:25
【全球速看料】油气勘探将与新能源融合发展,三桶油加大新能源投资
2023-04-05 23:25:40
碳酸锂跌破25万元/吨,江西宜春部分云母提锂企业已停产以挺价_今日关注
2023-04-05 21:10:56
奋笔疾书比喻什么(形容奋笔疾书的成语)
2023-04-05 19:33:40
环球速看:英雄之光丨缅怀英烈 铭记广州红色印记
2023-04-05 17:46:50
各部门统筹做好清明时节运输服务和安全管理工作
2023-04-05 16:23:43
当前讯息:菲律宾渡轮起火事故死亡人数上升至31人
2023-04-05 15:02:34
看看云南老字号如何品牌升级!是你喜欢的设计吗?
2023-04-05 13:13:20
搭上ChatGPT概念股价暴涨的万兴科技,又发布了AIGC出海营销工具
2023-04-05 11:39:28
北芯生命股权结构分散,超九成收入来自前五大客户 全球播资讯
2023-04-05 10:13:55
LOL中最为互补的下路组合,第一看到就怕_当前资讯
2023-04-05 08:57:48
2023经营力趋势指南-一站式科学经营_全周期递进增长(附下载) 全球新消息
2023-04-05 06:53:14