重磅！106页《情感计算白皮书》发布！之江实验室、德勤中国等机构联合编写

12月9日，由之江实验室发起，德勤中国、上海科学技术出版社、中国科学院文献情报中心和英国工程技术学会共同参加编写的《情感计算白皮书》（以下简称《白皮书》）面向全球正式发布。

情感计算（Affective Computing）是一个快速兴起的交叉前沿学科，近年来更是成为理论研究的一个热点。情感计算旨在创建一种能感知、识别和理解人的情感，并能针对人的情感做出智慧、灵敏、自然反应的计算系统。情感计算是实现自然化、拟人化、人格化人机交互的基础性技术和重要前提，为人工智能决策提供了优化路径。

《白皮书》以产、学、研相结合的交叉视角，秉承概念、理论、技术、应用“四位一体”的知识架构，对1997-2022年间的2万余篇论文进行数据分析，描绘了情感计算学科全景及合作生态，对情感计算技术进行了全面介绍，并针对该领域学术成果、应用情况进行了定量分析和案例研究。

《白皮书》指出，多模态情感计算是当下人工智能领域最热门的话题之一，中国科学院发布的《2021年研究前沿热度指数》报告显示，以“多模态情感计算”为核心的相关研究热点指数位列前10名。据《白皮书》介绍，人的情感通常以多种模态的方式呈现，大脑在整合多感官信息时存在多阶段融合的现象。相比于文本、语音、视觉、生理信号等单模态情感计算，多模态情感分析能够有效利用不同模态信息的协同互补来增强情感理解与表达能力。引入多模态情感计算是提高模型鲁棒性以及优越性的关键。

基于数据及文本分析结果，《白皮书》提出了情感计算下一阶段技术走向趋势预测。高质量、大规模数据集的构建、零/少样本学习或无监督学习方法、多模态融合技术创新、多模型推理、认知神经科学启发的情感计算、跨文化情感识别、数据与知识驱动的技术革新，这六大方向将是下一阶段技术发展的趋势。

可以预见的是，未来，情感计算技术除了在日常的教育培训、生命健康、商业服务、工业制造、科技传媒以及社会治理等方面的影响不断增加之外，还将涉及智慧服务、虚拟现实、科艺融合等前沿领域。越来越多的机构、企业及媒体将利用此技术解决现实问题以更好地服务大众。

《白皮书》受到了业内专家学者的广泛关注和认可。全球顶尖的情感计算专家、欧盟科学院及日本科学院任福继院士，中国工程院戴琼海院士、李德毅院士，中国科学院杨雄里院士、褚君浩院士，国际欧亚科学院马庆国院士以及中国科学院心理研究所所长傅小兰研究员、上海交通大学计算机科学与工程系吕宝粮教授等都对该白皮书给予了高度肯定。

“白皮书的发布，旨在回应中国乃至全球学术界和产业界对了解和掌握情感计算最新发展动向的需求，给科学研究人员和行业实践人员提供较为完整的技术发展蓝图和应用趋势洞察，以助推情感计算的发展和转化。”任福继表示。

除此之外，《白皮书》的发布也收获了产业界的瞩目。作为云计算的开创者和引领者，亚马逊云科技对以情感计算为代表的先进人工智能技术表示了充分期许，并将协同德勤中国提前部署，通过云和数据科技为情感计算技术发挥效用提供充足的应用保障。

之江实验室多模态情感计算研究组作为此次《白皮书》编写的主导方，致力于构建具备“情感智能”的类人智能，通过布局跨模态联合表征与推理、跨模态内容生成等核心研究方向，并以情感认知为特色，在人机共情交互领域已取得了一系列研究成果，其中发表相关高水平论文30余篇，授权专利20余项，并获得浙江省科学技术进步奖二等奖。之江实验室多模态情感计算研究组期待更广泛的学术科研和产业转化生态伙伴的加入，携手共促情感计算学科的进步，推动新一代人工智能的发展。

引言

情感计算（Affective Computing）是一个涉及 计算机科学（含智能科学）、脑与心理科学（含心 理学、神经科学）、社会科学（含社会学、经济学、 管理学）、医学等的交叉学科领域，并逐步成为全 球学术和工程热点。中国科学院科技战略咨询研 究院发布的《2021 年研究前沿热度指数》报告显 示，以“多模态情感计算”为核心的相关研究热 度指数位列前 10 名。根据英国工程技术学会（The Institution of Engineering and Technology，IET）提供 的文献进行计量分析显示，情感计算领域的发文 量呈现高速增长态势，中国和美国的学者成为该 领域最具代表性的研究力量。《自然》（Nature）旗 下刊物发表的综述论文表明，2016— 2020 年来自 中国的研究力量迅速崛起，论文总数已超过美国， 越来越多的科研机构和高科技企业正投身于情感 计算的研究和实践。 为了响应中国乃至全球学术界和产业界对了 解和掌握情感计算最新发展动向的需求，向科学研 究人员和行业实践人员提供较为完整的技术发展蓝 图和应用趋势，以助推情感计算的发展与转化。由 之江实验室人工智能研究院跨媒体智能研究中心发 起，德勤科学加速中心、上海科学技术出版社、中 国科学院文献情报中心和英国工程技术学会共同 组成联合项目组，推动了《情感计算白皮书》（以 下简称“白皮书”）的发布。由行业领袖和国内外 知名学者组成的顾问委员会和专家委员会为白皮 书的编制给予了专业性审查和指导。 在人机共生的时代背景下，随着人类对情感内 涵理解的不断深化，智能机器“双商（智商 + 情 商）”理念的进一步普及，情感智能的迭代升级以 及在数字经济驱动下的产业变革，多要素共同作用 成为推动情感计算的学科发展、技术演化和行业进 步的重要创新动力。在白皮书的编写过程中，项目 组充分调研了情感计算及其关联学科的技术发展和 迁移进程，在学术界和产业界专家的共同努力下， 白皮书最终形成“集大成”和“思全局”的框架， 以期使研究者和实践者能够对情感计算的最新发展 有一个全面的认识，并以更广阔、更长远的视角思 考情感计算的未来走向。

第一章　理论概述

情感计算是一个多学科交叉的研究领域，涉及 计算机科学、脑与心理科学、社会科学等学科。计 算机科学与机电科学侧重于提供各类信息技术手段 和工程化能力，能够对情感的感知、识别、理解、 反馈等实施数字化重构和计算实现，从而使机器能 够拥有类人情感心智功能。脑与心理科学的心理及 意识领域侧重于提供关于人类情感的基础定义、相 关要素结构存在的意义等方面的理论，这为情感理 论建模构筑了基石；脑与心理科学的另一分支—— 认知神经科学则侧重于研究人类大脑对情感加工 的机理以及建立与情感相关的心理要素功能网络， 这为开发情感计算模型提供了关键的启发和策略 的指导。社会科学和医学为情感计算的应用提供 了充分的“用武之地”，是该类技术应用场景设计 的策源地。 由此可见，情感计算是一个多学科共建的领 域，也是一个由行业实际需求推动技术进步和迭代 的领域。

第二章　技术综述

随着计算机科学的不断发展，以及社会对个性 化人机交互需求的不断增强，情感计算在人机交互 中的重要性日益凸显，基于情感理解与表达的人机 交互研究也受到了各领域的广泛关注。情感计算对 人的感知、推理、决策、规划、创造、社会互动等 许多活动起着不可或缺的作用。基于情感计算的研 究在行为分析科学中具有重要意义。情感计算大致 可分为单模态情感计算和多模态情感计算，本章将 按照图 2-1 所示，对情感计算展开介绍。

**来源：**https://www.zhejianglab.com/