基于生成对抗网络的研究综述.docx

  1. 1、本文档共4页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

?

?

基于生成对抗网络的研究综述

?

?

葛生国范宝杰尹哲

摘要:近年来,随着人工智能的发展,生成对抗网络[(GenerativeAdversarialNetwork,GAN)]已成为生成型深度学习模型中最流行的模型之一,并且基于[GAN]繁衍了一些改进型的[GAN]模型,在各个领域进行了研究和应用。首先对[GAN]及其衍生网络进行阐述和对比,然后对[GAN]的应用场景进行介绍,最后对[GAN]做了总结和展。

关键词:?人工智能;生成对抗网络;深度学习

:TP391.4????:A

:1009-3044(2019)25-0197-02

Abstract:Inrecentyears,withthedevelopmentofartificialintelligence,TheGenerativeAdversarialNetworksisoneofthemostpopularmodelsinthegenerativedeeplearningmodel.Firstly,GANanditsderivativenetworkareelaboratedandcompared.Then,applicationscenariosofGANareintroduced.Finally,Finally,asummaryanddevelopmentofGANaremade.

Keywords:artificialintelligence;generativeadversarialnetworks;deeplearning

1引言

近年來随着深度学习的火热,大量的神经网络被提出,而生成对抗网络是目前最为流行的生成型神经网络,2019年图灵奖获得者深度学习之父[YannLeCun]称之为过去十年间,机器学习领域最让人激动的点子。[GAN]模型提出后立即被应用到许多深度学习的领域当中去,并且针对[GAN]所存在的一些问题如训练不稳定等提出了一些改进型的[GAN]模型。

本文章节安排如下,在第2节中介绍了[GAN]及其改进模型,在第3节中介绍了[GAN]的主要应用,在第4节中做了总结和展望。

2[GAN]及其改进模型

2.1[GAN]模型

2014年由[Goodfellow]等人[1]提出了[GAN]模型。[GAN]主要有生成网络G和判别网络D组成。其工作原理如图1所示,首先判别器D学习真实样本y,当D对真实样本y有了一定的了解之后用D来观察通过加入随机噪声x生成的样本G(x),然后判断生成样本G(x)是否为真实样本y。生成模型G通过判别模型D的判别真假不断提高自己生成接近真实样本G(x)的能力,而判别模型D通过不断学习真实样本y而不断提高自己判别生成样本G(x)真伪的能力,两个网络通过相互博弈使得各自性能不断提高,直到生成模型和判别模型别无法提升自己,这样生成模型就会成为一个比较完美的模型。

虽然[GAN]的生成效果很好但也存在一些缺陷如训练不稳定、梯度消失、模式崩溃等问题。因此针对[GAN]的这些缺陷又提出了一些改进的[GAN]模型。

2.2[GAN]的改进模型

(1)[DCGAN]模型[2]。[DCGAN]的原理和[GAN]的原理一样,不过[DCGAN]网络将[GAN]网络的[G]和[D]换成了两个卷积神经网络,通过对两个卷积神经网络做一些特定的限定使得[DCGAN]网络训练起来更加稳定,并且使用得到的特征表示来进行图像分类,得到比较好的效果来验证生成的图像特征表示的表达能力。

(2)[WGAN]模型[3]。[Arjovsky]等人提出了[WGAN]。[WGAN]指出[GAN]使用交叉熵不适合衡量具有不相交部分的分布之间的距离从而导致训练不稳定,因此[WGAN]使用[wassertein]距离去衡量生成数据分布和真实数据分布之间的距离。

(3)[WGAN-GP]模型[4]。鉴于[WGAN]将更新后的权重强制截断到一定范围内导致大多数权值有可能聚集在两个数上,导致梯度消失或梯度爆炸。提出了基于改进[WGAN]的[WGAN-GP]网络。[WGAN-GP]使用梯度惩罚解决了训练梯度消和失梯度爆炸的问题。

(4)[LSGAN]模型[5]。[LSGAN]指出使用JS散度并不能拉近真实分布和生成分布之间的距离,使用最小二乘可以将图像的分布尽可能的接近决策边界,因此[LSGAN]使用了最小二乘损失函数代替了GAN的损失函数。

(5)[BEGAN]模型[6]。[BEGAN]提出了一种新的判别生成样本真伪的方法,用判别器判别生成样本分布和真实样本分布之间的误差距离,当误差距离较小即生成样本分布与真实样本分布相似时,

文档评论(0)

139****3710 + 关注
实名认证
内容提供者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档