MMRC实验室博士生李祥、研究生朱世宇在心理疏导与三维数字人领域的研究成果近日被情感计算领域权威期刊IEEE情感计算汇刊（Transactions on Affective Computing，中科院一区TOP，IF=11.3）录用。

论文名称：3D Embodied Agent-Mediated Affective Art Interaction for Emotion Externalization and Regulation

论文作者：李祥；孟雷*；朱世宇；杨宗一；张亚冲；魏方圆；李春波；孟祥旭

Paper链接：https://github.com/ly001bhml/soullink-demo/

Code链接：https://github.com/ly001bhml/soullink-demo/

论文简介：情绪体验常常含混、私密，难以完全用语言表达。现有智能情感艺术交互系统主要依赖文本或语音引导，较难利用创作过程中的非语言线索，也缺少具有社会临场感的具身反馈。针对这一问题，论文提出三维具身智能体介导的情感艺术交互系统，并以“情感艺术构图游戏”为核心，让用户通过颜色、形状、布局和编辑过程把内部感受转化为可观察、可调整的视觉表达。系统把画布状态与操作历史作为情境线索，而不是固定的心理标签。系统包含四个模块：构图游戏支持创作、重构和反思；语义引导的视频情绪感知模块从面部视频中提取局部语义线索并建模表情的时间变化；三维虚拟人定制与结构感知绑定模块生成个性化虚拟人并改善骨骼定位和蒙皮；状态感知响应模块综合语音和文本、面部视频及创作状态，协调语言、语音、虚拟人动作和游戏引导。技术实验显示，视频情绪感知模块在MAFW基准上达到44.45%的UAR和58.67%的WAR，虚拟人绑定模块在标准与姿态增强评测条件下降低了关节定位和蒙皮误差。25名参与者完成了为期四天的2×2被试内实验。结果表明，增强情感感知主要提高共情评价，改进虚拟人绑定主要提高社会临场感与亲和感，两项能力同时增强时取得最高的任务体验评分和最明显的即时自报情感变化。

图1：三维具身智能体介导的情感艺术交互系统总览

IEEE Transactions on Affective Computing（IEEE TAC）是IEEE计算机学会（IEEE Computer Society）主办的国际高水平学术期刊，创刊于2010年，主要面向情感计算、人工智能与人机交互等交叉研究领域。该刊为中国计算机学会（CCF）推荐B类期刊（人工智能方向），属于JCR Q1区，最新中科院期刊分区中位列计算机科学大类一区Top期刊，是情感计算领域具有重要国际影响力的代表性期刊。期刊聚焦情感识别与理解、多模态情感分析、面部表情与肢体行为分析、语音与文本情感分析、生理信号情感识别、计算情感模型、情感生成与人机交互等前沿方向，同时涵盖心理学、行为科学、机器学习、计算机视觉、自然语言处理和智能交互等交叉研究。该刊主要发表原创研究论文及具有新视角的综述论文，强调能够识别、理解、解释和模拟人类情感及相关情感现象的智能计算方法与系统，实行严格同行评审，在情感计算、多模态智能、人机交互及情感人工智能领域具有较高的学术影响力，是该领域重要的高水平学术交流平台。