Opinion prediction is an emerging research area with diverse real-world applications, such as market research and situational awareness. We identify two lines of approaches to the problem of opinion prediction. One uses topic-based sentiment analysis with time-series modeling, while the other uses static embedding of text. The latter approaches seek user-specific solutions by generating user fingerprints. Such approaches are useful in predicting user's reactions to unseen content. In this work, we propose a novel dynamic fingerprinting method that leverages contextual embedding of user's comments conditioned on relevant user's reading history. We integrate BERT variants with a recurrent neural network to generate predictions. The results show up to 13\% improvement in micro F1-score compared to previous approaches. Experimental results show novel insights that were previously unknown such as better predictions for an increase in dynamic history length, the impact of the nature of the article on performance, thereby laying the foundation for further research.


翻译:意见预测是一个新兴的研究领域,具有多种现实应用,例如市场研究和情景意识。我们确定了两种观点预测问题的方法。一种是使用时间序列模型进行基于主题的情绪分析,另一种是使用静态嵌入文本。后者通过生成用户指纹寻求针对用户的解决方案。这种方法有助于预测用户对无形内容的反应。在这项工作中,我们提出了一个新的动态指纹鉴别方法,利用以相关用户阅读历史为条件的用户评论背景嵌入。我们将BERT变量与经常性神经网络结合,以产生预测。结果显示,与以往方法相比,微F1核心的改进达到13 ⁇ 。实验结果显示,以前从未见过的新的洞见,例如,对动态历史长度增加的更好预测,文章的性质对业绩的影响,从而为进一步研究打下基础。

0
下载
关闭预览

相关内容

专知会员服务
49+阅读 · 2021年7月31日
专知会员服务
56+阅读 · 2021年3月15日
【干货书】真实机器学习,264页pdf,Real-World Machine Learning
Stabilizing Transformers for Reinforcement Learning
专知会员服务
58+阅读 · 2019年10月17日
【新书】Python编程基础,669页pdf
专知会员服务
194+阅读 · 2019年10月10日
机器学习入门的经验与建议
专知会员服务
92+阅读 · 2019年10月10日
Link prediction | 三篇SEAL相关工作小结
AINLP
47+阅读 · 2020年11月17日
计算机 | 中低难度国际会议信息8条
Call4Papers
9+阅读 · 2019年6月19日
计算机 | EMNLP 2019等国际会议信息6条
Call4Papers
18+阅读 · 2019年4月26日
人工智能 | NIPS 2019等国际会议信息8条
Call4Papers
7+阅读 · 2019年3月21日
人工智能 | SCI期刊专刊信息3条
Call4Papers
5+阅读 · 2019年1月10日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
人工智能 | 国际会议信息10条
Call4Papers
5+阅读 · 2018年12月18日
【SIGIR2018】五篇对抗训练文章
专知
12+阅读 · 2018年7月9日
【计算机类】期刊专刊/国际会议截稿信息6条
Call4Papers
3+阅读 · 2017年10月13日
Arxiv
0+阅读 · 2021年10月27日
Arxiv
23+阅读 · 2018年8月3日
Arxiv
4+阅读 · 2018年4月11日
Arxiv
5+阅读 · 2015年9月14日
VIP会员
相关VIP内容
相关资讯
Link prediction | 三篇SEAL相关工作小结
AINLP
47+阅读 · 2020年11月17日
计算机 | 中低难度国际会议信息8条
Call4Papers
9+阅读 · 2019年6月19日
计算机 | EMNLP 2019等国际会议信息6条
Call4Papers
18+阅读 · 2019年4月26日
人工智能 | NIPS 2019等国际会议信息8条
Call4Papers
7+阅读 · 2019年3月21日
人工智能 | SCI期刊专刊信息3条
Call4Papers
5+阅读 · 2019年1月10日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
人工智能 | 国际会议信息10条
Call4Papers
5+阅读 · 2018年12月18日
【SIGIR2018】五篇对抗训练文章
专知
12+阅读 · 2018年7月9日
【计算机类】期刊专刊/国际会议截稿信息6条
Call4Papers
3+阅读 · 2017年10月13日
相关论文
Arxiv
0+阅读 · 2021年10月27日
Arxiv
23+阅读 · 2018年8月3日
Arxiv
4+阅读 · 2018年4月11日
Arxiv
5+阅读 · 2015年9月14日
Top
微信扫码咨询专知VIP会员