In this paper we study the problem of social learning under multiple true hypotheses and self-interested agents which exchange information over a graph. In this setup, each agent receives data that might be generated from a different hypothesis (or state) than the data other agents receive. In contrast to the related literature in social learning, which focuses on showing that the network achieves consensus, here we study the case where every agent is self-interested and wants to find the hypothesis that generates its own observations. However, agents do not know which ones of their peers wants to find the same state with them and as a result they do not know which agents they should cooperate with. To this end, we propose a scheme with adaptive combination weights and study the consistency of the agents' learning process. The scheme allows each agent to identify and collaborate with neighbors that observe the same hypothesis, while excluding others, thus resulting in improved performance compared to both non-cooperative learning and cooperative social learning solutions. We analyze the asymptotic behavior of agents' beliefs under the proposed social learning algorithm and provide sufficient conditions that enable all agents to correctly identify their true hypotheses. The theoretical analysis is corroborated by numerical simulations.


翻译:在本文中,我们研究了在多个真实假设和以图表交换信息的自我感兴趣的代理人下进行社会学习的问题。在这个设置中,每个代理人接收的数据可能来自与其他代理人收到的数据不同的假设(或状态),而社会学习的相关文献侧重于显示网络能够达成共识,我们在此研究每个代理人都是自我感兴趣的案例,希望找到产生自己观察结果的假设。然而,代理人不知道他们的同龄人希望与他们找到同样的状态,因此不知道他们应该与哪个代理人合作。为此,我们提出了一个具有适应性组合权重和研究代理人学习过程一致性的计划。这个计划允许每个代理人与遵守同一假设的邻居进行识别与合作,同时排除其他人,从而与不合作性学习和合作性社会学习解决方案相比,提高了业绩。我们分析了在拟议的社会学习算法下代理人信仰的无谓行为,并提供了充分的条件,使所有代理人能够正确识别其真实的假说。理论分析得到数字模拟的证实。

0
下载
关闭预览

相关内容

专知会员服务
51+阅读 · 2021年6月30日
【图与几何深度学习】Graph and geometric deep learning,49页ppt
因果图,Causal Graphs,52页ppt
专知会员服务
246+阅读 · 2020年4月19日
【2020新书】图机器学习,Graph-Powered Machine Learning
专知会员服务
341+阅读 · 2020年1月27日
强化学习最新教程,17页pdf
专知会员服务
174+阅读 · 2019年10月11日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
28+阅读 · 2019年5月18日
LibRec 精选:近期15篇推荐系统论文
LibRec智能推荐
5+阅读 · 2019年3月5日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
17+阅读 · 2018年12月24日
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
【论文】图上的表示学习综述
机器学习研究会
14+阅读 · 2017年9月24日
Arxiv
1+阅读 · 2021年12月23日
Heterogeneous Deep Graph Infomax
Arxiv
12+阅读 · 2019年11月19日
Arxiv
8+阅读 · 2018年5月15日
VIP会员
Top
微信扫码咨询专知VIP会员