-
自动语音识别课程项目的CS-753版本
资源介绍
CS-753项目摘要
标题:听力障碍人士的手势语讲话(带有情感)
项目摘要
为了将语音转换为针对听障人士的手语,我们首先将语音转换为文本,然后再将文本转换为手语。 除此之外,我们还希望提取语音信号传达的情感并将其显示给他们,因为用手的手语本身并不传达任何形式的情感。 为此,我们首先尝试训练两个不同的网络。 这两个网络将训练语音数据,其中一个网络将语音信号转换为文本,另一个网络检测情感。 然后,根据检测到的文本,我们输出相应的手语以及伴随其传达的情感。
数据集
对于情感检测网络:
对于文本网络语音:
参考