基于汉字语音映射的脑电信号直译方法研究

摘要

目的 探讨基于汉字语音映射的脑电信号(EEG)直译方法，从而开发一种人机交互的新手段。方法 基于对汉字语音朗读时产生的EEG采集，利用Mel倒频谱系数对语音信号进行特征提取，将EEG特征与语音特征映射生成数据库，基于数据库利用循环神经网络进行EEG识别。采用共空间模式(CSP)联合支持向量机(SVM)对EEG进行特征提取和分类识别作为对照试验。结果CSP+SVM识别方式下，平均分类准确率为(36.53±3.17)%;在基于汉字语音映射的EEG直译方式下，平均分类准确率为(69.93±3.07)%,经重复数据集训练后的识别准确率可达75%以上。结论基于语音映射的直译方法可以获得更稳定的EEG,将EEG与语音信号形成映射，可以准确且快速地用EEG重建汉字语音信息，为未来用EEG实现人机通信提供有效依据，从而实现用汉字语音映射的EEG直译方法开发一种人机交互的新手段。

关键词

脑电信号 / 语音映射 / 神经网络 / 脑机接口 / 机器翻译