课题组长期致力于面向二语习得者的可视化语音教学、面向言语障碍儿童的AI言语语音评估与康复以及面向人机交互的语音识别与合成技术,开展实验语音学、言语病理学、心理语言学、认知神经科学、人工智能等学科的前沿交叉研究。目前正在开展的研究项目主要有:
1. 听障儿童的言语语言评估及康复研究。建构听障儿童言语语言发展口语库,采用语料库分析工具、自然语言处理技术、行为实验和问卷调查等多种数据挖掘方法,对听障儿童的言语现状及发展作全面的考察与分析,并在此基础上开发具备远程动态追踪的的人工智能平台,辅助临床诊断及康复治疗。
2. 音乐与语言的跨域互动研究。通过开展音乐与语言各个平面的互动研究,探究两者在结构组织、认知加工及认知神经机制之间的内在关联,考察音乐及言语之间的互动跨域影响,寻求提升语言习得者及言语障碍者口语能力之有效途径。
3. 二语习得者的口语语篇韵律模式及语音评测研究。通过考察在不同口语任务条件下,母语者与二语者语篇—韵律模式上的差异,深入分析口语任务、习得水平、母语方言及流利标记对二语者语篇韵律习得的影响,运用深度学习算法,建立起融合多维韵律特征指标的二语者口语语音评测模型。
本课题组长期与各大医院听力中心、康复机构、聋校、听力技术公司等多家企事业单位合作,开展联合研究,共同推进听力科技与语言教育领域的科研成果转化。并依托“同济大学益语儿童语言服务志愿团队”,通过爱心服务、爱心科普、爱心陪伴等方式,服务言语障碍儿童的语言健康问题。