论文摘要

生成多种类型的文本是一项具有挑战性的任务,越来越受到人们的关注。由于生成性对抗网(GANs)在一般文本生成上表现出了竞争性的结果,在以往的一些研究中,它们被扩展到了类别文本生成上。然而,复杂的模型结构和学习策略限制了它们的性能,加剧了训练的不稳定性。本文提出了一种类别感知GAN(CatGAN),它由一个有效的类别感知文本生成模型和一个层次进化学习算法组成。类别感知模型直接测量真实样本和每个类别上生成的样本之间的差距,减少这种差距将引导模型生成高质量的类别样本。Gumbel-Softmax松弛进一步使我们的模型从复杂的学习策略中解放出来,用于在离散数据上更新CatGAN。此外,只关注样本质量通常会导致模式崩溃问题,因此在训练CatGAN时引入了一种分层进化学习算法来稳定训练过程,并在质量和多样性之间取得平衡。实验结果表明,CasGaN优于现有的最先进的方法。

论文作者

Zhiyue Liu, Jiahai Wang,∗ Zhiwei Liang,中山大学数据与计算机学院。

成为VIP会员查看完整内容
20

相关内容

[ICML2020]层次间消息传递的分子图学习
专知会员服务
33+阅读 · 2020年6月27日
【ICML 2020 】小样本学习即领域迁移
专知会员服务
77+阅读 · 2020年6月26日
【CVPR2020-北京大学】自适应间隔损失的提升小样本学习
专知会员服务
83+阅读 · 2020年6月9日
专知会员服务
107+阅读 · 2020年5月21日
KDD 2019论文解读:异构信息网络上的对抗生成学习
云栖社区
22+阅读 · 2019年8月21日
多模态多任务学习新论文
专知
46+阅读 · 2019年2月9日
生成对抗网络的最新研究进展
AI科技评论
5+阅读 · 2019年2月6日
CMU论文解读:基于GAN和VAE的跨模态图像生成
PaperWeekly
9+阅读 · 2018年8月20日
镜头间的风格转换行人重识别
统计学习与视觉计算组
13+阅读 · 2018年8月16日
【学界】生成式对抗网络:从生成数据到创造智能
GAN生成式对抗网络
6+阅读 · 2018年6月14日
Arxiv
8+阅读 · 2018年4月12日
Arxiv
5+阅读 · 2017年11月13日
Arxiv
4+阅读 · 2017年7月25日
VIP会员
相关资讯
KDD 2019论文解读:异构信息网络上的对抗生成学习
云栖社区
22+阅读 · 2019年8月21日
多模态多任务学习新论文
专知
46+阅读 · 2019年2月9日
生成对抗网络的最新研究进展
AI科技评论
5+阅读 · 2019年2月6日
CMU论文解读:基于GAN和VAE的跨模态图像生成
PaperWeekly
9+阅读 · 2018年8月20日
镜头间的风格转换行人重识别
统计学习与视觉计算组
13+阅读 · 2018年8月16日
【学界】生成式对抗网络:从生成数据到创造智能
GAN生成式对抗网络
6+阅读 · 2018年6月14日
微信扫码咨询专知VIP会员