神经时态点过程(TPPs)是用于模拟连续时间事件序列的主要范式,例如网上的用户活动和金融交易。在实际应用中,事件数据通常以流方式接收,其中模式的分布可能会随时间改变。此外,在实际场景中常常观察到隐私和内存约束,进一步加剧了挑战。因此,连续监控TPP以学习流事件序列是一个重要但鲜为人知的问题。我们的工作论文通过采用连续学习(CL)来解决这一挑战,使模型能够在现实约束下连续学习一系列任务,而不会发生灾难性遗忘。相应地,我们提出了一个简单而有效的框架,PromptTPP1,通过将基础TPP与连续时间检索提示池集成。这些提示,即小的可学习参数,存储在内存空间中,并与基础TPP共同优化,确保模型可以顺序学习事件流,而无需缓冲过去的示例或任务特定属性。我们为模拟事件流提供了一个新颖且现实的实验设置,在其中,PromptTPP在三个真实用户行为数据集上始终实现了最先进的性能。

成为VIP会员查看完整内容
16

相关内容

【NeurIPS2023】半监督端到端对比学习用于时间序列分类
专知会员服务
36+阅读 · 2023年10月17日
【ICML2023】特征和标签偏移下时间序列的域适应
专知会员服务
26+阅读 · 2023年4月26日
【AAAI2023】对比掩码自动编码器的自监督视频哈希
专知会员服务
15+阅读 · 2022年11月25日
【KDD2022】基于对抗性知识蒸馏的深度图神经网络压缩
专知会员服务
24+阅读 · 2022年6月10日
【CVPR2022】多视图聚合的大规模三维语义分割
专知会员服务
21+阅读 · 2022年4月20日
专知会员服务
19+阅读 · 2021年9月6日
专知会员服务
38+阅读 · 2021年5月28日
【WWW2021】自监督学习上下文嵌入的异构网络链接预测
专知会员服务
40+阅读 · 2021年2月10日
专知会员服务
30+阅读 · 2020年9月18日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
如何使用自然语言工具包(NLTK)在Python3中执行情感分析
Python程序员
21+阅读 · 2019年10月28日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
A Survey of Large Language Models
Arxiv
465+阅读 · 2023年3月31日
VIP会员
相关VIP内容
【NeurIPS2023】半监督端到端对比学习用于时间序列分类
专知会员服务
36+阅读 · 2023年10月17日
【ICML2023】特征和标签偏移下时间序列的域适应
专知会员服务
26+阅读 · 2023年4月26日
【AAAI2023】对比掩码自动编码器的自监督视频哈希
专知会员服务
15+阅读 · 2022年11月25日
【KDD2022】基于对抗性知识蒸馏的深度图神经网络压缩
专知会员服务
24+阅读 · 2022年6月10日
【CVPR2022】多视图聚合的大规模三维语义分割
专知会员服务
21+阅读 · 2022年4月20日
专知会员服务
19+阅读 · 2021年9月6日
专知会员服务
38+阅读 · 2021年5月28日
【WWW2021】自监督学习上下文嵌入的异构网络链接预测
专知会员服务
40+阅读 · 2021年2月10日
专知会员服务
30+阅读 · 2020年9月18日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
8+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员