面向语音与面部表情信号的多模式情感识别技术研究【2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载】

面向语音与面部表情信号的多模式情感识别技术研究PDF格式电子书版下载

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

第1章 绪论1

1.1情感识别研究背景概述1

1.2情感的定义1

1.3情感的分类2

1.4情感计算3

1.5情感识别国内外研究现状5

1.6情感识别的研究意义及应用6

1.7情感识别研究中的难点8

1.8章节安排9

第2章 情感语音信号预处理技术15

2.1概述15

2.2语音生成系统和语音感知系统15

2.2.1语音生成系统15

2.2.2语音感知系统17

2.3语音信号的产生模型20

2.4语音信号的时域波形22

2.5音素与音节25

2.6基音与四声25

2.7语音信号的采样和量化26

2.8语音信号的预加重27

2.9语音信号的分帧和加窗处理28

2.10端点检测29

2.10.1几种常用的端点检测算法30

2.10.2 4种端点检测方法比较总结34

2.10.3基于短时能零积和鉴别信息的语音端点检测算法34

2.11本章小结42

第3章 面部表情信号预处理技术46

3.1视觉认知心理46

3.2人脸面部结构48

3.3面部肌肉结构48

3.4面部动作编码系统50

3.5面部表情图像预处理在系统中的重要作用52

3.6表情图像的光照补偿52

3.6.1线性变换法53

3.6.2对数变换法53

3.6.3指数变换法53

3.6.4直方图均衡化法54

3.7表情图像的尺寸归一化56

3.7.1眼睛定位算法56

3.7.2尺寸、角度归一化60

3.8本章小结61

第4章 语音情感特征参数提取64

4.1语音情感表达概述64

4.2时域特征67

4.2.1短时能量67

4.2.2短时平均幅度67

4.2.3 短时过零率68

4.2.4短时自相关函数68

4.2.5短时平均幅度差函数69

4.3倒谱特征69

4.3.1基于线性预测的倒谱参数LPCC69

4.3.2基于Mel频率的倒谱参数MFCC70

4.4感知线性预测参数72

4.5共振峰特征参数73

4.6基因特征参数75

4.7谐振强度特征参数78

4.8基于边际谱的长时特征参数80

4.9语音序列的相空间重构特征参数82

4.10自适应语音情感动态特征参数83

4.11本章小结90

第5章 面部表情特征参数提取97

5.1概述97

5.2 NMF面部表情特征98

5.3 Gabor小波特征100

5.4基于光流法的动态表情提取102

5.4.1时空梯度法102

5.4.2匹配法103

5.4.3基于能量的方法104

5.4.4基于相位的方法105

5.5基于时序模板的动态特征提取106

5.6基于分数阶傅里叶变换的表情特征提取109

5.6.1一维分数阶傅里叶变换的定义和相关性质109

5.6.2一维分数阶傅里叶变换的离散算法111

5.6.3二维分数阶傅里叶变换114

5.6.4二维分数阶傅里叶变换性质115

5.6.5分数阶傅里叶变换提取表情信息116

5.7基于HOG的表情特征提取120

5.8基于主动外观模型的表情特征提取122

5.8.1特征点检测方法122

5.8.2建立形状模型123

5.8.3建立外观模型125

5.8.4联合形状和外观建立模型126

5.8.5面部特征点检测126

5.8.6面部动画参数提取127

5.9基于差值模板和PCA的面部表情特征提取129

5.10本章小结130

第6章 特征参数融合与识别137

6.1概述137

6.2基于遗传小波神经网络的语音情感识别138

6.2.1小波神经网络的设计138

6.2.2优化方法140

6.2.3实验结果与分析142

6.3基于局部保持投影和主元分析的语音情感识别144

6.3.1 PCA和LPP算法分析145

6.3.2算法描述145

6.3.3仿真实验及结果分析148

6.4基于模糊核聚类的多模式情感识别算法151

6.4.1参数提取151

6.4.2算法描述153

6.4.3仿真实验及结果分析155

6.5基于FASPC的多模式情感信息融合方法157

6.5.1系统结构框架157

6.5.2常用算法介绍157

6.5.3融合识别算法具体步骤165

6.5.4仿真实验及结果分析166

6.6本章小结168

第7章 总结与展望178

7.1主要工作及创新点178

7.2进一步研究的展望180