语言理解,比语言产出更容易?
1
周五中午,在罗切斯特大学语言学系的小教室里,Colin 教授与计算语言学的博士生、研究生们共进午餐。
在此之前的 30 分钟,我们坐在休息室的小沙发上,一对一地交谈。他的一条大长腿交叠着另一条黑西裤,整个人立在灰粉色的毛衣衬衫里,慵懒又挺拔。
Colin 教授是谁?
35 年前,他还是牛津大学中世纪德国文学的一名大三学生。有一天,他在校园里闲逛。
忽然有个人冒出来,“嘿!我们提供去罗切斯特大学交换一年的全额奖学金,你去吗?”他回答,“罗切斯特是什么鬼地方。”
那个时候,还没有谷歌地图。回家之前,他去书店翻了翻美国地图,发现罗切斯特就在纽约边上,也许这是个不错的计划。
在到罗切斯特之前,他对语言学知之甚少,从未听说过“语言科学”。1990 年 9 月,仅仅几周的经历,就改变了他的学术方向。
他被“如何把语言学分析嵌入认知科学”的可能性深深吸引,并一直在追寻这一问题的不同版本。一年后,他继续在 MIT 学习语言学、心理学、认知神经科学和计算机科学。
在 MIT,他曾经是乔姆斯基(现代语言学之父)的助教。
与许多语言学家一样,Colin 教授对人类语言丰富的结构特性印象深刻。
他对同一语言使用者对其语言中许多他们自身未曾意识到的抽象而细致的事实印象深刻,对全球 7000 种语言之间差异的广度和深度也印象深刻。
他的总体研究目标很直接:
我想理解——丰富的语言表征是如何在神经组织中被编码和操作的?
我还想理解——为什么儿童在学习这些表征时会如此成功?
我的研究主要是出于好奇心驱动。
我相信,如果我们能够理解人类语言在最佳状态下的运作方式——即在自幼习得语言的说话者大脑中——那么我们将更有能力解决教育、技术和健康领域与语言相关的问题。
2
午饭闲聊时,Colin 教授回忆道,35 年前,罗切斯特大学还没有语言学部门,语言学系只是寄生于外语学院的一个小团体。
在下午的学术讲座上,他展示了一张,我曾经很好奇的照片。那是一张,樱花树前,绿草地上,年轻学者们的合影,中间穿插着一位亚裔女性和两位亚裔男性的面孔。
这张照片一直挂在语言学系的休息室里,下方没有标注名字。我问过在这里已经第六年的博士,她也对此一无所知。
Colin 教授介绍道,他很惊讶这张照片竟然一直挂在那里。他在午饭后,临时把这张照片加进了他的演示文稿。
这些人是罗切斯特大学最早一批学习语言学的学生,现在他们都已经是爷爷奶奶了。去年,他还拜访过其中一些老朋友。
35 年前,Colin 教授在这里,第一次接触语言学;35 年后,我也在这里,第一次系统地学习语言学。
看着台上两鬓发白的教授兴奋地介绍他近期的研究发现,我仿佛看见 30 多年前,乔姆斯基给他的学生们讲课的样子。
人类对语言的美妙探索,就这样一代一代地传承下去。
Colin 教授在学术讲座上,问了这样一个问题:
3
语言理解,比语言产出更容易?
认知科学中的一个基本问题是知觉与行动之间的关系。尽管运动系统和视觉系统在功能上是独立的,但越来越多的证据显示它们之间存在密切互动,这在具身认知、镜像神经元、以及感觉运动一体化的研究中都有体现。
然而,语言,尤其有趣,因为它同时包含了知觉成分(理解)和行动成分(产出)。研究这两种过程在多大程度上共享底层机制,仍然是一个开放且重要的问题。
Colin 教授的研究聚焦于一个在「论元角色加工」领域中观察到的显著对比。
论元角色加工(argument role processing)就是人在听或读一句话时,如何理解“谁对谁做了什么?”
例如:服务员服务顾客。服务员是“动作的发出者”,顾客是“动作的承受者”。当我们处理这句话时,大脑要迅速识别动作的参与者及其角色,这就是论元角色加工。
在语言理解中,一个广为人知的现象是:随着句子展开,人们对即将出现词语的预测并不总是立即受到论元角色信息的约束(例如,在论元角色颠倒的语境中,动词后的初始反应相似)。
语境 1:餐馆老板忘了是哪位顾客被那位服务员服务过。 语境 2:餐馆老板忘了是哪位服务员被顾客服务过。
实验发现,在语境 2 读到动词“服务”的那一瞬间,大脑的初始反应(如 N400 脑电波幅)和语境 1 差不多。也就是说,大脑并没有立刻利用角色信息来判断句子是否合理。
相反,在语言产出中,研究发现:当人们自己去生成句子续写时,他们会非常快地依赖论元角色信息,几乎不会犯角色颠倒的错误。
语境 1:餐馆老板忘了是哪位顾客被那位服务员……过。 语境 2:餐馆老板忘了是哪位服务员被顾客……过。
实验发现,在语境 1,大多数被试会立刻补全“服务”。在语境 2,参与者很少会说出“服务”,而是补充其他动词“辱骂”或“赞美”等。
这种对比展示了一个情境:即便在使用相同材料、匹配的时间进程下,理解与产出似乎呈现出不同的模式。
因此,这为探讨“理解”与“产出”的关系提供了一个宝贵的测试案例。
4
研究团队设计了一个混合任务:在同一实验里,受试者有时需要补全句子(产出任务),有时需要判断句子合理性(理解任务),两类试次交错、随机出现。这样可以保证参与者在处理语境时没有提前区分“这是理解还是产出”。
结果:
- 在产出试次中,参与者快速利用论元角色信息,生成与角色匹配的动词,几乎不会犯“顾客服务服务员”这种错误。
- 在理解试次中,EEG 数据显示:当目标动词与论元角色匹配时,引发的 N400 显著小于角色颠倒条件,说明此时人们已经在实时利用论元角色进行预测。
研究团队再次使用相同的混合设计,但重点转向了验证理解中的角色敏感性。这一次,实验者更精确地控制了句子材料,并确保参与者在两种任务下接触到相同的语境。
结果:
- 在理解任务中,角色匹配条件的动词依旧引发显著更小的 N400,证明了即时的角色敏感性。
- 在产出任务中,反应时间更快、正确动词比例更高,也进一步确认了产出对角色的快速利用。
5
研究总结:
理解语言和产出语言,其实都需要快速判断“谁对谁做了什么”。
以前的研究以为:人脑在理解时不太会马上用到这些信息,而在说的时候才会。
但新的实验设计告诉我们:并不是人脑在理解时“不敏感”,而是过去的实验方法没有测对。
当用同样的任务去测,人类在理解和产出时,都能立即利用论元角色信息来预测和生成合适的词语。
换句话说,语言理解如同语言产出。它们并不是两条完全不同的路线,而是有着相同的底层机制。
研究意义:
- 认知语言学:大脑在“听懂别人说话”和“自己说话”时,可能调用的是同一套预测机制。
- 语言教育:如果理解和产出机制紧密相连,训练说话(比如外语口语)也能反过来帮助理解(外语)。
- 医疗康复:如果理解和产出是相连的,那么在失语症等病症康复中,训练其中一项(如理解)也可能帮助另一项(如表达)。
- 人工智能:如果理解和生成模型共享核心机制,那么我们可以设计出统一的语言处理系统,从而帮助构建更自然的对话式 AI,让“听”和“说”结合得更像人类。
6
在休息室的沙发上,我问道:
Colin 教授,您曾经在牛津大学学习德国文学,在罗切斯特大学学习一年语言学,然后在 MIT 继续研究心理学、认知神经科学、和计算机科学。研究把您带向了许多意料之外的方向。请问您如何在一步一步交叉学科的探索中,找到您的研究立足点?
他回答:
最初,我在语言学找到了一个品味; 然后,我不断深挖,挖着挖着,那些意料之外的方向就接踵而至; 我赶紧抓住它们,接着,就越抓越多,越抓越多。