论文题目

Model Cards for Model Reporting

论文摘要

训练有素的机器学习模式越来越多地用于执行执法、医学、教育和就业等领域的高影响力任务。为了澄清机器学习模型的预期用例,并尽量减少它们在不太适合的上下文中的使用,我们建议发布的模型附带详细说明其性能特征的文档。在本文中,我们提出了一个框架,我们称之为模型卡,以鼓励这种透明的模型报告。模型卡是经过培训的机器学习模型附带的简短文档,在各种条件下提供基准评估,例如跨不同文化、人口或表型群体(例如种族、地理位置、性别、Fitzpatrick皮肤类型)和跨部门群体(例如年龄和种族,或者性别和菲茨帕特里克皮肤类型)与预期应用领域相关。模型卡还披露了模型的使用环境、性能评估程序的细节以及其他相关信息。虽然我们主要关注以人为中心的机器学习模型在计算机视觉和自然语言处理领域的应用,但是这个框架可以用来记录任何经过训练的机器学习模型。为了巩固这一概念,我们为两种监督模式提供卡片:一种是训练来检测图像中的笑脸,另一种是训练来检测文本中的有毒评论。我们建议将模型卡作为机器学习和相关人工智能技术负责任民主化的一个步骤,提高人工智能技术如何工作的透明度。我们希望这项工作能够鼓励那些发布经过培训的机器学习模型的人在发布模型时附带类似的详细评估数字和其他相关文档。

论文作者

玛格丽特·米切尔、西蒙妮·吴、安德鲁·扎尔迪瓦尔、帕克·巴恩斯、露西·瓦瑟曼、本·哈钦森、埃琳娜·斯皮策、伊诺鲁瓦·德博拉·拉吉、蒂姆尼·格布鲁,来自google人工智能团队。

成为VIP会员查看完整内容
15

相关内容

人工智能的风险:该领域主要研究人工智能如果具备了智慧或者在某些重要领域超过了人类,是否出现AI反人类情况,多半是对未来人工智能的担忧。
最新《深度半监督学习》综述论文,43页pdf
专知会员服务
152+阅读 · 2020年6月12日
【哈佛大学】机器学习的黑盒解释性,52页ppt
专知会员服务
166+阅读 · 2020年5月27日
专知会员服务
98+阅读 · 2020年3月19日
《可解释的机器学习-interpretable-ml》238页pdf
专知会员服务
194+阅读 · 2020年2月24日
IBM《人工智能白皮书》(2019版),12页PDF,IBM编
专知会员服务
19+阅读 · 2019年11月8日
可解释推荐:综述与新视角
专知会员服务
108+阅读 · 2019年10月13日
年度必读:2018最具突破性人工智能论文Top 10
机器学习算法与Python学习
11+阅读 · 2018年12月2日
2018年的人工智能和深度学习将会如何发展? | 分析
网易智能菌
3+阅读 · 2017年12月30日
Arxiv
7+阅读 · 2018年1月31日
VIP会员
相关VIP内容
微信扫码咨询专知VIP会员