项目名称: 基于生成模型的迁移学习算法研究及其应用

项目编号: No.61203297

项目类型: 青年科学基金项目

立项/批准年度: 2013

项目学科: 自动化学科

项目作者: 庄福振

作者单位: 中国科学院计算技术研究所

项目金额: 24万元

中文摘要: 本项目从生成模型的角度,对迁移学习算法进行研究。通过分析源领域与目标领域之间的共性,研究基于生成模型的深度挖掘源领域与目标领域中共享主题的迁移学习方法;针对不同学习任务之间的分类知识共享与相互促进,研究基于生成模型的分类与聚类任务统一学习的迁移学习框架。在探索迁移学习算法的工作机理方面,通过引入狄利克雷模型对数据分布的描述,研究基于狄利克雷模型的源领域与目标领域数据分布不一致性度量,并分析该度量与迁移学习算法性能之间的关系。研究基于MapReduce的并行迁移学习算法用于处理海量社交网络数据中的社区划分和链接预测等方面,并研究分布式环境下只传递中间统计变量的迁移学习算法进行隐私保护。预期在SCI 或EI 收录的国际期刊及重要学术会议上发表论文15 篇。

中文关键词: 生成模型;狄利克雷过程;矩阵分解;并行算法;社交网络

英文摘要: In this project, we first study the transfer learning algorithms from the perspective of generative models. Through the analysis of commonality between the source and target domains, we study the transfer learning algorithm sharing the common topics based on generative model. And for the Scenario different tasks can benefit from each other when learning simultaneously, we study the uniform transfer learning framework for classification and clustering tasks. Second, to analyze how the transfer learning algorithms work, we introduce the Dirichlet model to study the measures of distribution differences between the source and target domains, and investigate the relationship between distribution measures and algorithmic performance. Third, we study the MapReduce based transfer learning algorithms to handle large-scale data in social network, e.g., social community partition and link prediction, and propose the distributed transfer learning algorithms to alleviate privacy-concerning when the data are distributed. We expect to publish fifteen papers in the international journals or important academic conferences, which are indexed by SCI or EI.

英文关键词: Generative Model;Dirichlet Process;Matrix Factorization;Parallel Algorithm;Social Network

成为VIP会员查看完整内容
0

相关内容

在机器学习中,生成模型可以用来直接对数据建模(例如根据某个变量的概率密度函数进行数据采样),也可以用来建立变量间的条件概率分布。条件概率分布可以由生成模型根据贝叶斯定理形成。
【博士论文】机器学习中的标记增强理论 与应用研究
专知会员服务
28+阅读 · 2021年12月3日
专知会员服务
69+阅读 · 2021年5月21日
专知会员服务
94+阅读 · 2021年2月6日
【NeurIPS 2020】近似推断进展,272页ppt
专知会员服务
32+阅读 · 2020年12月11日
专知会员服务
75+阅读 · 2020年12月6日
【清华大学龙明盛副教授】迁移学习理论与算法,59页ppt
专知会员服务
80+阅读 · 2020年11月27日
基于深度神经网络的少样本学习综述
专知会员服务
166+阅读 · 2020年4月22日
【教程】自然语言处理中的迁移学习原理,41 页PPT
专知会员服务
94+阅读 · 2020年2月8日
《迁移学习简明手册》,93页pdf
专知会员服务
131+阅读 · 2019年12月9日
【KDD2021】基于生成对抗图网络的不平衡网络嵌入
领域自适应研究综述
专知
6+阅读 · 2021年5月5日
一文了解迁移学习经典算法
AI100
11+阅读 · 2018年8月4日
【迁移学习】简述迁移学习在深度学习中的应用
产业智能官
15+阅读 · 2018年1月9日
迁移学习在深度学习中的应用
专知
23+阅读 · 2017年12月24日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
7+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
Detecting Deepfakes with Self-Blended Images
Arxiv
2+阅读 · 2022年4月18日
Arxiv
13+阅读 · 2022年1月20日
Arxiv
12+阅读 · 2021年6月29日
Arxiv
14+阅读 · 2019年9月11日
Arxiv
23+阅读 · 2018年10月24日
Arxiv
15+阅读 · 2018年4月5日
小贴士
相关VIP内容
【博士论文】机器学习中的标记增强理论 与应用研究
专知会员服务
28+阅读 · 2021年12月3日
专知会员服务
69+阅读 · 2021年5月21日
专知会员服务
94+阅读 · 2021年2月6日
【NeurIPS 2020】近似推断进展,272页ppt
专知会员服务
32+阅读 · 2020年12月11日
专知会员服务
75+阅读 · 2020年12月6日
【清华大学龙明盛副教授】迁移学习理论与算法,59页ppt
专知会员服务
80+阅读 · 2020年11月27日
基于深度神经网络的少样本学习综述
专知会员服务
166+阅读 · 2020年4月22日
【教程】自然语言处理中的迁移学习原理,41 页PPT
专知会员服务
94+阅读 · 2020年2月8日
《迁移学习简明手册》,93页pdf
专知会员服务
131+阅读 · 2019年12月9日
相关资讯
【KDD2021】基于生成对抗图网络的不平衡网络嵌入
领域自适应研究综述
专知
6+阅读 · 2021年5月5日
一文了解迁移学习经典算法
AI100
11+阅读 · 2018年8月4日
【迁移学习】简述迁移学习在深度学习中的应用
产业智能官
15+阅读 · 2018年1月9日
迁移学习在深度学习中的应用
专知
23+阅读 · 2017年12月24日
相关基金
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
7+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
1+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
国家自然科学基金
1+阅读 · 2008年12月31日
微信扫码咨询专知VIP会员