陈海丰
- 作品数:5 被引量:0H指数:0
- 供职机构:陕西科技大学更多>>
- 相关领域:自动化与计算机技术更多>>
- 基于感知重采样和多模态融合的连续情感识别
- 2023年
- 情感识别在人机交互中发挥着重要的作用,连续情感识别因其能检测到更广泛更细微的情感而备受关注。在多模态连续情感识别中,针对现有方法获取的时序信息包含较多冗余以及多模态交互信息捕捉不全面的问题,提出基于感知重采样和多模态融合的连续情感识别方法。首先感知重采样模块通过非对称交叉注意力机制去除模态冗余信息,将包含时序关系的关键特征压缩到隐藏向量中,降低后期融合的计算复杂度。其次多模态融合模块通过交叉注意力机制捕捉模态间的互补信息,并利用自注意力机制获取模态内的隐藏信息,使特征信息更丰富全面。在Ulm-TSST和Aff-Wild2数据集上唤醒度和愉悦度的CCC均值分别为63.62%和50.09%,证明了该模型的有效性。
- 李健张倩陈海丰李晶王丽燕裴二成
- 关键词:情感识别多模态融合
- 基于视觉显著性的水果表面缺陷检测方法
- 一种基于视觉显著性的水果表面缺陷检测方法,首先,通过CCD相机获得被测水果的原始图像;其次,对图像进行预处理,以消除细小的纹理细节以及噪音和编码失真;然后,将预处理后的图像进行下采样得到两幅图片,进行上采样得到两幅图片,...
- 党宏社郭楚佳陈海丰王刚张颖张娜
- 文献传递
- 显著目标检测方法及其应用研究
- 生活中,人类不断地接收新的信息以感知环境,这些信息中约80%来自于视觉,如果计算机能够像人类一样有效的处理视觉信息,则会为计算机视觉领域带来新的变革。显著目标检测方法正是从这样的想法中提炼出来的,它能够快速准确地找到图像...
- 陈海丰
- 关键词:图像熵频率调谐自适应分割
- 基于视觉显著性的水果表面缺陷检测方法
- 一种基于视觉显著性的水果表面缺陷检测方法,首先,通过CCD相机获得被测水果的原始图像;其次,对图像进行预处理,以消除细小的纹理细节以及噪音和编码失真;然后,将预处理后的图像进行下采样得到两幅图片,进行上采样得到两幅图片,...
- 党宏社郭楚佳陈海丰王刚张颖张娜
- 文献传递
- 基于关键区域遮挡与重建的人脸表情识别
- 2024年
- 为了解决自然场景下人脸表情识别任务中的无用信息干扰和遮挡对识别性能的影响问题,提出一种基于关键区域遮挡与重建的人脸表情识别模型。利用多尺度特征提取网络,提取人脸图像的全局特征。根据68个人脸关键点划分出68个关键区域,并通过插值法提取68个关键区域的特征,同时采用注意力机制学习关键区域特征之间的先验关系。设计自监督的遮挡与重建模块,对关键区域特征进行随机遮挡,并利用已知区域信息来预测和重建被遮挡区域的特征,从而提高模型在自然场景下的表情识别性能。设计多个实验验证了该模型的泛化能力,并通过消融实验验证了模型中每个模块的有效性。实验结果表明,该模型在真实世界的情感面孔数据集(RAF-DB)和Occlusion-RAF-DB数据集上分别达到了88.44%和86.09%的识别准确率,相比于视觉Transformer(Vi T)等模型有效地提升了自然场景下人脸表情识别的性能。
- 李晶李健陈海丰张倩王丽燕裴二成
- 关键词:人脸表情识别