光明实验室黄惠教授团队:大规模具有丰富属性标注的视觉情感数据集
  • 发布时间:2023-08-02
  • 作者:光明实验室
  • 浏览:2728次

光明实验室黄惠教授团队的研究工作EmoSet: A Large-scale Visual Emotion Dataset with Rich Attributes(一个大规模具有丰富属性标注的视觉情感数据集)已发表在计算机视觉顶级会议IEEE International Conference on Computer Vision (ICCV) 2023上,同时获得中国发明专利授权。



光明实验室黄惠教授团队的研究工作EmoSet: A Large-scale Visual Emotion Dataset with Rich Attributes(一个大规模具有丰富属性标注的视觉情感数据集)已发表在计算机视觉顶级会议IEEE International Conference on Computer Vision (ICCV) 2023上,同时获得中国发明专利授权。第一作者为深圳大学可视计算研究中心助理教授杨景媛。


该工作提出了一个大规模视觉情感数据集,并首次引入了丰富的情感属性标注,在四个维度超越了现有数据集:数据规模、标注丰富度、数据多样性和数据平衡度。该数据集包含3.3M张图片,其中118K张图片是经过机器和人工双重标注的。除愉悦、敬畏、满足、激动、愤怒、厌恶、恐惧和悲伤八分类情感标注外,该数据集还包含:亮度、颜色、场景、物体、人脸表情和人体动作六种情感属性标注,以上属性是基于心理学相关的研究提出的。此外,该数据集包含来自社交媒体和艺术作品的图片,且在八分类情感上分布较为均衡。通过对情感与各属性进行关联分析,该工作揭示了属性对于情感分析的相关性和有效性。此外,该工作还设计了一种属性模块,利用情感属性帮助提升识别任务上的性能,实验结果和可视化实验进一步验证了属性在情感识别和理解任务上的巨大潜能。


现有图像情感计算主要集中在图像情感识别,这极大的限制了该领域的发展和深入,情感属性的提出,一方面使情感从抽象走向具体,另一方面从“是什么”走向“为什么”。研究团队希望该数据集的提出,可以给图像情感计算领域的研究者提供好的数据基础,启发新的研究思路,鼓励研究者们在可解释图像情感计算上进行深入探索。


项目主页

https://vcc.tech/EmoSet

供 稿 丨 杨景媛

编 辑 丨 李沛昱