【UC伯克利Shreya Shankar】机器学习产品化

2021 年 11 月 27 日 专知


机器学习和大数据的进步正在颠覆每个行业。然而,即使公司部署到生产中,他们也面临着巨大的挑战,随着时间的推移,性能会明显低于离线基准,这是一种被称为性能漂移的现象。由于数据分布的变化,在很长一段时间内部署的模型常常会经历性能漂移。


在这次演讲中,我们讨论了减轻性能漂移影响的方法,并举例说明了我们的方法在一个样本预测任务。利用我们在初创公司部署和监控生产级ML管道以进行预测性维护的经验,我们还解决了机器学习的几个方面,这些方面在学术界经常被忽视,比如整合非技术合作伙伴,以及将机器学习集成到敏捷框架中。这次演讲的内容包括:


  • 使用Python、Dask和开源数据集演示一个在离线设置中训练和验证模型的示例,该模型在部署后会出现性能下降。

  • 使用MLFlow、Prometheus和Grafana来展示如何构建工具来监视生产管道,并使不同涉众的团队能够使用正确的度量标准快速识别性能下降。

  • 就何时在生产中对机器学习模型进行再训练提出一份标准清单。

  • 这次演讲将是一个幻灯片演示,并附带一个Python笔记本演示。它的目标是在生产中部署和调试模型的工程师,但可能对构建基于机器学习的产品的人有更广泛的兴趣,并要求熟悉机器学习基础知识(训练/测试集,决策树)。



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“MLPU” 就可以获取【UC伯克利Shreya Shankar】机器学习产品化》专知下载链接

专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!


欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
0

相关内容

专知会员服务
14+阅读 · 2021年9月25日
【2020新书】构建机器学习应用:从想法到产品,42页pdf
专知会员服务
98+阅读 · 2020年12月1日
【干货书】高维统计学,572页pdf
专知
15+阅读 · 2021年12月3日
【如何做研究】How to research ,22页ppt
专知
0+阅读 · 2021年4月17日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
A Comprehensive Survey on Transfer Learning
Arxiv
121+阅读 · 2019年11月7日
VIP会员
相关VIP内容
专知会员服务
14+阅读 · 2021年9月25日
【2020新书】构建机器学习应用:从想法到产品,42页pdf
专知会员服务
98+阅读 · 2020年12月1日
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员