2023年12月24日,“结合微表情的虚假意图识别建模与分析”2023年项目研讨会在江苏省南京市约翰花园大酒店成功举行。本次研讨会由东南大学儿童发展与学习科学教育部重点实验室主办,新疆大学计算机科学与技术学院和中国人民公安大学侦察与反恐怖学院协办。论坛由东南大学郑文明教授和东南大学赵力教授担任共同主持人。此次论坛邀请到了五位业内知名教授专家——东南大学郑文明教授、新疆大学艾斯卡尔教授、中国人民公安大学庄东哲副教授、东南大学梁宗保副教授、东南大学宗源副教授,以及数位东南大学研究生。各位专家与学生就项目总体情况、项目关键技术进展等方面进行了深入研讨,干货满满,精彩纷呈。会议现场座无虚席。
图 1 会议现场
图 2 东南大学郑文明教授主持会议
图 3 东南大学赵力教授主持会议
首先,东南大学郑文明教授介绍了项目总体情况。郑教授总结了当前项目所面临的微表情与虚假行为意图的关联机制、复杂场景下的单模态行为精准识别、虚假行为意图识别中的多模态融合等主要科学挑战。为解决上述挑战,郑教授课题组在虚假行为意图的微表情数据库构建、单线索虚假行为意图建模与分析、多线索融合的虚假行为意图建模等方面展开了深度探索与研究,全面促进了对虚假行为意图的准确识别建模与分析。
图 4 东南大学郑文明教授作现场报告
其次,东南大学梁宗保副教授分享了其课题组关于虚假行为意图的心理学实验研究。梁教授介绍了其课题组与郑文明教授课题组合作建立的欺骗检测中文数据库,其中记录了在模拟犯罪场景下采集的中国志愿者的多模态信号数据。统计分析结果揭示了虚假行为意图发生过程中的多种心理学特征,为识别与建模提供了新思路。
图 5 东南大学梁宗保副教授作现场报告
再次,东南大学宗源副教授分享了关于对虚假行为中微表情精准识别方面的研究。宗教授从微表情强度低、持续时间短导致识别效果受限的难点出发,介绍了课题组在宏表情知识引导微表情识别方面的研究成果,在其中吸收并借鉴了宏表情强度分布知识,研发了自适应显示放大、情感表征隐式放大等关键科学技术来有效提升微表情特征学习与识别,构成了虚假行为意图识别中重要的一环。
图 6 东南大学宗源副教授作现场报告
接着,东南大学的赵焱博士、连海伦博士和江浩林硕士分别就语音情感识别、多模态信号欺骗谎言识别、微动作识别三个方面进行了进展汇报,并各自分享了取得高准确率识别效果的研究成果,为进一步建模虚假行为意图者共性的语音、表情、动作等多模态信号特征提供了坚实的基础。
图 7 东南大学赵焱博士作现场报告
图 8 东南大学连海伦博士作现场报告
图 9 东南大学江浩林硕士作现场报告
从次,新疆大学艾斯卡尔教授分享了其课题组在对话情绪识别方面的研究。艾斯卡尔教授课题组针对实际对话场景中上下文信息复杂、单一语句音频特征不可靠等关键问题,介绍了引入语境信息和对话氛围作为对话级情绪识别参考的有效解决方案,突破了在长时间对话审讯场景下的情感识别技术。
图 10 新疆大学艾斯卡尔教授作现场报告
接着,中国人民公安大学庄东哲副教授分享了其课题组建立的真实场景下的虚假行为意图数据库,其由真实审讯情境中采集所得的表情视频、皮电与心率等数据所构建,无比贴合实际刑侦环境中虚假行为意图者的真实生理状况,并通过统计分析得出了高压环境下犯罪者基本情绪显著减少、肢体动作显著增多等重要结论。
图 11 中国人民公安大学庄东哲副教授作现场报告
最后,各专家与学生们在自由讨论环节中积极交流,各自阐述了对当前项目丰富研究成果的认可,同时也提出了宝贵的建议,期望未来能增多各项目小组之间的交流频次,合力推进项目的落地应用与产品化,响应国家在刑侦等场景中对虚假行为意图的识别建模与分析的实际需求。
图 12 项目自由讨论环节
图 13 项目研讨会成员合影
本次研讨会的活动现场学术氛围浓厚,报告内容充实丰富,清晰得梳理交流了项目总体情况与详细进展,明确了未来将项目落地于实际应用、解决现实问题的研究目标。
图:黎扬
编辑:王非凡