研究揭示语言理解中的语音预测

作者: 李兴珊研究组

来源: 中国科学院心理研究所

发布日期: 2023-06-29 08:01:05

中国科学院心理研究所的研究发现,在语言理解中,大脑能够进行语音预测,并揭示了这一过程的时空表征机制。

6月14日,中国科学院心理研究所青年特聘研究员屈青青等在《大脑皮层》(Cerebral Cortex)上,发表了题为Predicting phonological information in language comprehension: evidence from ERP representational similarity analysis and Chinese idioms的研究论文。

该研究聚焦于大脑在语言理解中如何进行预测加工,采用脑电神经表征相似性分析,揭示了语言理解中的语音预测(phonological prediction)及其时空表征机制。

当前,关于语言预测的关键问题是预测加工的表征内容,即人们通常预测哪些语言表征信息。已有研究表明,在语言理解中,人们对即将出现的句法、语义信息进行预测。而关于较低层级的语音特征能否被预测,研究较少且争议较大。如果存在语音预测,那么,语音预测的时间与神经表征是怎样的?

为了回答上述问题,研究使用具有汉语特色且高限定性的汉语成语作为实验材料,通过ERP表征相似度分析(RSA)方法对神经活动的时间及空间表征模式进行分析,考察语言理解中语音预测的时间与神经表征。该研究通过操纵汉语四字成语对之间第三个字的读音,使其在成语对之间共享同一个音节(within-pair),例如,声东击(ji)西、面黄肌(ji)瘦,或不共享同一个音节(between-pair)。

实验中,成语的前半部分(“声东”)与后半部分(“击西”)分屏呈现,并实时记录被试的脑电信号。基于组内的第三个字共享相同的语音特征(图B),研究预期within-pair组(如“声东击ji西”“面黄肌ji瘦”)引发的神经活动模式相似度将高于between-pair组(如“声东击ji西”“年事已yi高”)。

通过分析空间神经活动相似度验证了上述研究预期,表现为与between-pair组相比,共享语音的within-pair成语对之间的空间神经活动相似度更高。更重要的是,这种神经表征相似性效应在相同语音(即成语后半部分)呈现之前已开始出现(约200ms,图C),为语音预测及其时间进程提供了神经证据。此外,研究进一步分析了上述语音预测效应在不同脑区的表征模式。

研究发现,在两种条件下,最大的神经表征相似度均出现在后部脑区,语音预测的神经表征相似效应出现在左侧中后部脑区(图D)。

研究表明,在语言理解中,大脑根据当前情境和上文信息,对将要出现的信息进行主动的预测;在高限定的语境下可以预测到未来词汇的语音信息。在汉语成语的理解加工中,语音预测发生在高预测词汇呈现之前的数百毫秒,集中在大脑左侧中后部。该研究为语音预测加工提供了证据,并初步揭示了语音预测的时空表征,这加深了对语言预测的认知。此外,该工作为语言预测加工提供了研究思路与技术路线新视角。

UUID: e9954bdb-d622-4efd-a015-fd8e6bf66729

原始文件名: /home/andie/dev/tudou/annot/AI语料库-20240917-V2/AI语料库/中科院之声公众号-pdf2txt/2023/中科院之声_2023-06-29_「转」研究揭示语言理解中的语音预测.txt

是否为广告: 否

处理费用: 0.0032 元