一种双通道信息融合的情感识别方法

Emotion recognition method with information of two channels fused

Abstract

本发明提出的一种双通道信息融合的情感识别方法,属于自动情感识别领域。其基本思想是:从情感视频数据中提取脸部表情和语音特征数据;然后使用脸部表情特征数据初始化Boltzmann拉链中慢链的可见节点的状态值;使用语音特征数据初始化Boltzmann拉链中快链的可见节点的状态值,对BOLTZMANN拉链进行训练;使用训练好的BOLTZMANN拉链识别情感视频的情感类别。本发明使用Boltzmann拉链来融合紧密耦合的语音-视觉模态,有效利用了两个通道的内在关联,解决了两个通道数据不同的时间尺度问题,并在训练过程中避免了局部能量极小,实验结果证明了该方法的高准确率和有效性。

Claims

Description

Topics

Download Full PDF Version (Non-Commercial Use)

Patent Citations (0)

    Publication numberPublication dateAssigneeTitle

NO-Patent Citations (0)

    Title

Cited By (0)

    Publication numberPublication dateAssigneeTitle