头条的算法推荐,并不神秘!

2019 年 4 月 18 日 腾讯课堂产品学院

作者丨人人都是产品经理年度作家  李星

公众号丨靠谱的阿星(ID: qq1598145405)

大数据时代,用户对于个人隐私无处安放表现出极度的不安全感,近年来315曝光的一些用户隐私泄露、甚至公民信息被非法贩卖的事件,可谓触目惊心!


而每年两会采纳的相应用户隐私保护提案,也正逐渐完善相应的法律保护边界。


内容推荐引擎、个性化定制千人千面自从今日头条大放光彩之后,开始被很多知名APP所采纳。


不过,用户与信息流平台之间的关系有些微妙,一些用户既享受到了App通过数据收集带来的便利,也担心过于精准化的推荐所带来的“烦恼”。


3月下旬,网上出现一些对饿了么、美团外卖等餐饮O2O平台通过录音权限窃听用户隐私的质疑,饿了么、美团官方均予以否认,并认为利用录音提取关键词进行本地商品服务推荐是一种“无端的猜测”,况且相应的技术条件还达不到。


几乎在同时,今日头条在类似的质疑和谣言中并未幸免,大致的描述通常是这样的,“我和我朋友昨天在谈论xx,第二天头条就向我推荐了xxx”;“我在某某App刚看过xxx,第二天头条就向我推荐了xxx”等等,一些用户也带入到是否头条也通过录音窃听用户隐私的“自证预言”之中。


尽管头条官方辟谣,由于今日头条在内容兴趣推荐精准度方面逐渐提升,类似用户的“猜测”并没有释然。


本质上是很多用户对算法不了解,从不了解到恐惧,甚至产生了一种“迷信”态度,误以为内容推荐引擎是一种“读心术”,可以知晓人很多隐私。事实上,从头条、快手的崛起可以看出,兴趣引擎(机器主动精准推荐)已经开始逐渐取代搜索引擎(人发起需求精准找),成为新的底层技术架构,在未来二者之间的融合也会成为信息分发平台的主流,这也是目前百度App、今日头条从不同擅长领域进取的方向。如果懂得人不讲,不懂的人瞎说,以讹传讹只会加深了对新技术的误解。



1


对用户隐私的获取边界,是算法的权限

推荐引擎与搜索引擎的区别在于前者是系统给用户推荐,而后者是用户主动发起寻求;所以,推荐引擎在启动期时候需要放在内容池中测试用户的兴趣,再基于用户上网的行为数据进行定制化推荐,显然更依赖用户上网所产生的数据。


关于这一点,今日头条在《隐私政策》中并没有否认:


第(1)条即为“为了保障产品的正常运行,实现个性化推荐、发布信息、互动交流、搜索查询等核心功能以及其他功能,我们会收集你的部分必要信息。


第(2)条中提到了收集的是用户的哪些信息,“在你进行注册认证、发布信息、互动交流或使用基于地理位置的服务时,基于法律要求或实现功能所必需,我们可能会收集姓名、联络方式、通讯录、图文、音视频文件、地理位置等个人信息。


根据网络评论实名制的要求,上述条款在如何一款资讯类App之中几乎都是一样,而所收集的“音视频文件”与“图文”是已发布的信息,并且是基于法律要求或实现功能所必需才进行收集,在第(5)条又重申“我们将努力采用合理的安全措施来保护你的个人信息。特别的,我们讲采用行业内通行的方式以尽最大的商业努力来保护你个人敏感信息的安全。”



(图片来自头条隐私政策)



如果把头条的推荐引擎比作一台人工智能(AI)机器,人工智能的特点“比你更懂你自己,帮你干活还不累”。


应用在信息分发领域,要实现智能推荐,须有足够丰富的用户大数据作为算法的训练场景,这些数据的源头活水即用户“关注、收藏、搜索、浏览偏好等”等上网使用行为数据,作为个性化推荐的“燃料”;并且AI还能根据“反馈、发布、点赞、评论等用户主动发起的行为以及明确授权同意开启的地理位置信息”来动态调整算法推荐。


因而说到底,算法的推荐也是“后置的”分析处理,并没有“先知”窥探能力。


对于通过“录音窃听用户隐私”的担忧,笔者发现条款里是这样写的,“你使用上传图片、发布音视频功能时,我们会请求你授权相机、照片、麦克风等敏感权限”;就跟使用微信不开启麦克风无法发送语音消息、使用滴滴没有授权用户地理位置无法打车是一个道理,开启麦克风这一“敏感权限”只会在上传音视频时才会主动由用户开启,而所谓的“窃听”则是在用户不知情的情况下后台开启并用于不正当用途。


(图片来自头条隐私政策)


至于App开启用户麦克风进行录音窃听,需要远程操控用户手机,一般是黑客在用户手机先放病毒安装包,市面上的手机系统和病毒软件把这样的安全漏洞也早就被解决了。


即使是App通过麦克风录音要综合考虑语速大小、音量大小、环境音大小、语音清晰度以及地域口音等因素,其语音识别准确率非常有限、商业用户价值不大,远远不如通过用户上网行为数据进行推荐来得直接有效。


算法推荐除了用户个性化资讯push外,还应用在广告精准推送和营销上,这构成了目前信息流产品的主要商业模式。


2


从微头条、抖音推荐内容中管窥社交在算法机制中作用


头条系产品的形态不一样,但是底层技术是一致的,尤其是基于用户上网行为分析出兴趣图谱推荐潜在感兴趣或有用信息的引擎是一样的。


头条产品在2017年4月份上线微头条之后,头条系统推荐内容的确更加精准化了,此前很多媒体人骂头条内容low,现在基本上是听不到了。


主要原因一方面,头条的流量上涨吸引了很多优质原创作者,导致其内容生态整体质量上有提升;另一方面是引入微头条等社交关系链之后,系统在启动期不需要释放不同类型、关键字领域的内容来测试读者的兴趣点,而是会参考互动频次最高的网友,已筛选或相关领域的内容推送给关系链上的用户,通过社交紧密程度辅助内容个性化推荐的准确率。


如果用户有两台手机分别不同的头条账户就会发现,“在微头条中互动的频次比较高,并且会直接影响到系统内容推荐,而系统推荐的一些大V,往往也是好友所关注的,这加速了一些大V吸粉的效率。”一位关注阿星微头条、并且经常互动的好友向我反馈,“头条不只是完全的信息‘流’,很注重粉丝的留存。”


(第一张图和第二张图是新手机头条账户;第三张图是我经常使用头条号页面,相关度很高)


社交关系链的引入对头条内容进化来说是一次“蝶变”,以往头条的推荐只需要根据用户本身上网数据进行兴趣推荐;引入到社交因素之后,除了根据机器默认用户兴趣偏好以外,还会把好友已经看过的西瓜视频、小视频、悟空问答等推荐给新用户,从而大大产品的使用粘性。


类似的作用机制与微信公众号中好友通过点赞“在看”筛选优质内容如出一辙,不过,以社交推荐内容的方式在头条相对隐蔽,也更为数据化。


同样的机制也会出现在抖音的流量推荐之中,第一步是机器测试、积累数据后识别用户的兴趣爱好;第二步开始引入互动高频的抖音好友播放、点赞、评论的内容,从而让用户在刷抖音时获得沉浸式体验。


在第一阶段的抖音,机器会更换美女、帅哥、美景、搞笑、萌娃、宠物、才艺、技能、情感、干货等不同类型进行测试,在兴趣标签相对宽泛时,信息流推荐容易出现审美疲劳,并导致火爆的视频创意演变为套路化的程式。


而在引入社交相关度个性化推荐之后,用户刷到的下一个短视频,推荐权重最高的是,很多概率会是抖音上互关的好友点赞过短视频,会做优先呈现;如果你关注的好友很少,这种体会将更加明显,机器默认为好友感兴趣的视频你也会喜欢。这一点上看,抖音进行流量推荐也并非神秘莫测。


「假如你有两个抖音账户,你会发现抖音推荐的小秘密 ,那就是会直接推荐关系链上(互关的、互动高频的朋友)看过的视频,比如在另一个手机上点的视频,会推荐到另一账户之上,要是找不到此前看过短视频,只要在另一台手机上一直往下刷,一定可以刷到!另外,西瓜视频的推荐也是如此,这让我找到了自己喜欢刷西瓜视频的原因,因为机器默认我的朋友大体上和我的欣赏趣味是一致的,所有看起来厉害的算法推荐,其实也是有社交的。


我曾把这个微头条征求其他好友确认,发现这并非个别情况:


(同时两台不同手机登陆不同的账户刷抖音,重合率非常高并非偶然现象)


在微头条、抖音之中都有一个特点是,每一条更新内容的流量与粉丝量的大小并无强关联,头条的算法推荐摆脱了自媒体对私域流量的依赖,只要是优质的、并且有高强度的互动率内容,都有可能“爆”,这表明,社交因素在其中既起到了甄别内容质量作用,也引导着账户间互动。


3


理解算法机制,信息流平台“懂用户”是靠技术


算法型驱动产品不仅在信息分发中逐渐成为主流,还大量应用在电商以及O2O交易平台之中,这也是为什么现在淘宝强调内容电商、拼多多强调“去中心化的商品兴趣推荐”的原因。头条用户、市场人常文平认为,“算法推荐虽然方便,应用在电商平台,系统会结合用户此前的搜索数据结果显示推荐,一些已购买的商品重复推荐,会白白浪费一些流量位置。


这意味着,在内容领域“筛选”已消耗的优质内容的逻辑是否能真正在电商领域跑通,依然在摸索之中。


信息流平台的推荐算法引擎被认为容易导致用户获取其他视角或领域的内容受到局限;一些盲目的、无意识的点击都会在后续带来大量并不会真正想看到的内容,在新用户启动期时容易出现。


解决此类问题的办法是用户有意识的训练手机的应用里的机器,才能得到高效、适合自己的个性化页面;与此同时,算法产品会越来越重视“好友圈”,通过人群亲密程度与共同话题来更新用户的兴趣圈层。


当然,如果以后信息流平台能够设置到“特别关注”好友,把好友认可的内容分享给关注对象,或许能有助于优质内容获取到更多的流量。


头条用户称呼“太准了”以致于出现对用户隐私利用的猜疑,背后也反映出今日头条产品在“个性化推荐”上的确愈发成熟化。根据笔者的观察,今日头条之所以能够达到这种境界,与其他信息流平台有两个不同的特点:


一是,头条产品的流量是复合利用的。头条为了实现人机互动的高频,不断在今日头条App接入新的功能,从自媒体资讯、西瓜视频、火山直播、小视频、微头条、悟空问答、电商、付费专栏、圈子、小游戏......用户使用产品功能越多,平台识别用户的画像体系越清晰,系统推荐就越个性化。


二是,头条系众多产品把技术力量和流量资源的“复用”发挥到极致、边际成本降低,而其他很多公司如果不看到这一点,盲目去做多个App就会陷入到兵力分散、人才浪费的困境之中。


结合头条算法结合兴趣社区与社交因素的推测可以看出,头条做社交特点并不是表现在及时沟通上,而是通过内容作为共同连接点,拉近粉丝与自媒体、用户与用户之间的联系。


如果说微信的内容是为了社交粘性服务的,那么头条的社交如微头条、多闪等并非突出聊天,更是为了内容推荐更精准、用户粘性更高,从而实现推荐“场景化”,以致于“懂用户”信息流平台被误会有“用户隐私”的不安全感。

结语


用户隐私保护在全球范围内都是一个永恒话题,去年Facebook因为泄露用户隐私负面事件导致市值大跌;国内用户对于用户隐私的焦虑和关切也与日俱增,隔一段时间国内就出现一些滥用用户隐私的质疑,这需要引起平台型企业的重视,坚持把用户利益放在首位。


通过机器记忆的办法来进行自发推荐,是信息分发更加智能化的表现,也使得用户隐私保护自然成为更为敏感环节,用户敏感隐私与网友所产生的数据本身是有区别的,前者属于法律范畴,后者是技术范畴,个性化推荐意味着平台对相应的隐私保护的升级,这事关信息流平台生存的根本;没有用户数据资源为基础,信息流平台的个性化推荐和商业化也是空中楼阁。


对头条算法上述解读不难发现,内容推荐算法既离不开用户上网行为数据化,也离不开用户所关注的人,是“信息找人”与“人找信息”相辅相成;算法由人创造,也可以服务于人,其边界和权限也可以由人来控制的,无需进行妖魔化或者神秘化。



--


精彩回顾:

怎么画产品架构图?

初级产品画原型,高级产品做……

为什么“996加班”成为互联网企业的主流选择?






登录查看更多
1

相关内容

推荐引擎,是主动发现用户当前或潜在需求的定律,并主动推送信息给用户的信息网络。挖掘用户的喜好和需求,主动向用户推荐其感兴趣或者需要的对象。
斯坦福2020硬课《分布式算法与优化》
专知会员服务
118+阅读 · 2020年5月6日
【WWW2020-微软】理解用户行为用于文档推荐
专知会员服务
35+阅读 · 2020年4月5日
【资源】100+本免费数据科学书
专知会员服务
107+阅读 · 2020年3月17日
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
今日头条推荐算法详解(PDF下载)
机器学习算法与Python学习
17+阅读 · 2018年2月27日
百度的广告和今日头条的广告
keso怎么看
8+阅读 · 2018年2月9日
今日头条推荐算法原理全文详解
架构文摘
7+阅读 · 2018年1月30日
AI算法起家的今日头条为何败给了色情?
大数据技术
4+阅读 · 2018年1月5日
羞羞的AI,如何改变色情产业?
虎嗅网
9+阅读 · 2017年11月24日
推荐系统杂谈
架构文摘
28+阅读 · 2017年9月15日
你以为自己真的了解用户画像?其实猫腻可多了
THU数据派
8+阅读 · 2017年7月12日
QuAC : Question Answering in Context
Arxiv
4+阅读 · 2018年8月21日
Arxiv
6+阅读 · 2018年5月18日
VIP会员
相关资讯
今日头条技术架构分析
互联网架构师
11+阅读 · 2019年8月19日
今日头条推荐算法详解(PDF下载)
机器学习算法与Python学习
17+阅读 · 2018年2月27日
百度的广告和今日头条的广告
keso怎么看
8+阅读 · 2018年2月9日
今日头条推荐算法原理全文详解
架构文摘
7+阅读 · 2018年1月30日
AI算法起家的今日头条为何败给了色情?
大数据技术
4+阅读 · 2018年1月5日
羞羞的AI,如何改变色情产业?
虎嗅网
9+阅读 · 2017年11月24日
推荐系统杂谈
架构文摘
28+阅读 · 2017年9月15日
你以为自己真的了解用户画像?其实猫腻可多了
THU数据派
8+阅读 · 2017年7月12日
Top
微信扫码咨询专知VIP会员