面向瘫痪失语者的脑机字符与语音交互系统

摘要

为解决瘫痪失语者语言交流的困难,研究一种基于单通道柔性干电极脑电采集模块的脑机字符与语音交互系统.首先,将时序脑电信号绘制成二维图像并着色处理,利用卷积神经网络识别出含有眨眼特征的图像;然后,根据含有眨眼特征图像的连续帧数,实现短眨眼、中眨眼、长眨眼特征的细分;最后,结合脑电信号中解析的注意力特征,在虚拟交互系统输出字符与语音.实验结果表明:该系统的交互准确率达96.4％.