基于外卖评论的舆情风控

2019 年 12 月 13 日 凡人机器学习

业务背景

目前许多商家都有线上留言或者评论反馈平台,消费者可以在这些平台上通过留言表达自己对于消费商品的反馈。消费者的反馈包括表扬性的正向反馈,也有一些批评性质的负向反馈。商家需要掌握消费者对于产品的整体舆论取向来判断自己的产品质量是否符合消费者需求,同时了解评论内容可以方便商家分析舆论导向,指导下一步产品研发工作。

业务痛点

目前许多酒店、餐饮、零售的留言平台每天都有大量的留言产生,传统的舆论情绪收集方案是通过人工统计的方式,但是这种方式较为低效,很难针对大规模的舆论做出精确统计。需要自动化的手段收集并判断留言平台的舆论走向。

解决方案

PAI平台提供了一套基于文本向量化以及分类的算法,可以基于历史标记的正负留言内容生成分类模型,自动对平台上的新增留言进行预测。该服务的整体框架已经基于PAI-Studio开发完成,基于真实的打标后的11987条外卖平台评论数据,实现了自动化的正反面舆论风控,准确性达到75%左右。

1.人力要求:需要具备基础的NLP及分类算法知识用于模型调试

2.开发周期:1-2天

3.数据要求:最好有超过千条的打标数据,数据越多效果越好

数据说明


参数名称参数描述label标签,1是正向评论,0为负面评论review实际评论数据

流程说明

进入PAI-Studio产品:https://pai.data.aliyun.com/console

将数据导入,搭建如下算法架构:


1.数据源

上文提到的评论数据

2.停用词

过滤一些助动词以及标点符号,需要自己上传停用词表


3.文本向量化

利用Doc2vector算法把每个评论变成语意向量,每行是一个向量,每个向量代表一个评论的含义


4.生成分类模型

将向量化后的文本通过拆分算法拆分为训练集以及测试集,训练集通过逻辑回归算法训练生成二分类模型,该模型可以实现对于评论是正向评论或者负向评论的判断。

5.模型效果验证

通过混淆矩阵算法验证模型的实际效果,


总结

本文提到的基于留言评论的舆情风控方案可以用PAI组件在1-2天时间内非常快速的实现,实现后可以批量的对于平台上面的留言舆论进行智能化分析,并且随着数据的累计,模型的准确性会逐渐增强。该方案适用用各种基于文本场景的分析,比如垃圾邮件分类、新闻正反情绪分类等。


登录查看更多
6

相关内容

这是个辛苦活。
【ACL2020】基于图神经网络的文本分类新方法
专知会员服务
68+阅读 · 2020年7月12日
面向司法案件的案情知识图谱自动构建
专知会员服务
125+阅读 · 2020年4月17日
【中国人民大学】机器学习的隐私保护研究综述
专知会员服务
131+阅读 · 2020年3月25日
【WWW2020-UIUC】为新闻故事生成具有代表性的标题
专知会员服务
26+阅读 · 2020年3月18日
【哈工大】基于抽取的高考作文生成
专知会员服务
36+阅读 · 2020年3月10日
【阿里巴巴】 AI编译器,AI Compiler @ Alibaba,21页ppt
专知会员服务
44+阅读 · 2019年12月22日
[综述]基于深度学习的开放领域对话系统研究综述
专知会员服务
78+阅读 · 2019年10月12日
关系图谱在贝壳找房风控体系的应用与实践
DataFunTalk
49+阅读 · 2020年2月12日
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
【实战分享】电影推荐系统项目实战应用
七月在线实验室
34+阅读 · 2019年3月7日
金融风控背后的技术综述
七月在线实验室
45+阅读 · 2019年2月28日
机器学习在热门微博推荐系统的应用
人工智能头条
6+阅读 · 2018年1月25日
Arxiv
15+阅读 · 2020年2月6日
Arxiv
20+阅读 · 2019年11月23日
Arxiv
8+阅读 · 2018年5月17日
VIP会员
相关VIP内容
【ACL2020】基于图神经网络的文本分类新方法
专知会员服务
68+阅读 · 2020年7月12日
面向司法案件的案情知识图谱自动构建
专知会员服务
125+阅读 · 2020年4月17日
【中国人民大学】机器学习的隐私保护研究综述
专知会员服务
131+阅读 · 2020年3月25日
【WWW2020-UIUC】为新闻故事生成具有代表性的标题
专知会员服务
26+阅读 · 2020年3月18日
【哈工大】基于抽取的高考作文生成
专知会员服务
36+阅读 · 2020年3月10日
【阿里巴巴】 AI编译器,AI Compiler @ Alibaba,21页ppt
专知会员服务
44+阅读 · 2019年12月22日
[综述]基于深度学习的开放领域对话系统研究综述
专知会员服务
78+阅读 · 2019年10月12日
相关资讯
关系图谱在贝壳找房风控体系的应用与实践
DataFunTalk
49+阅读 · 2020年2月12日
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
【实战分享】电影推荐系统项目实战应用
七月在线实验室
34+阅读 · 2019年3月7日
金融风控背后的技术综述
七月在线实验室
45+阅读 · 2019年2月28日
机器学习在热门微博推荐系统的应用
人工智能头条
6+阅读 · 2018年1月25日
Top
微信扫码咨询专知VIP会员