为促进语言认知研究与实验方法交流,大连海事大学外国语学院语言实验中心、语言与认知研究团队拟举办系列学术讲座。首次讲座将围绕“眼动追踪在同声传译研究中的应用”与“多模态EEG联采与语言认知研究”两个主题展开,邀请外国语学院杨双双博士、上海外国语大学傅杨博士作专题报告。欢迎广大师生参加。
时间:2026年10月29日(星期四)15:30—17:00
地点:大连海事大学外语楼4楼悦享书屋
报告一:How Do Interpreters Adapt to ASR Latency? Empirical Evidence from Global Eye-Movement Measures
报告人:杨双双博士(大连海事大学外国语学院)
内容提要:Eye tracking provides a powerful method for examining how simultaneous interpreters visually process dynamically unfolding information. This presentation uses a study of ASR latency in simultaneous interpreting as a case study to demonstrate how eye-movement data can be operationalized, analyzed, and interpreted. The study compares synchronized and latency ASR conditions among professional interpreters and trainees and examines six global eye-movement measures: average fixation duration, fixation count, regression rate, progressive saccade length, fixation-order linearity (Kendall’s τ), and global skipping rate. Eye-voice span and ear-voice span are also introduced to illustrate temporal coordination between visual processing and speech production. Using empirical data, the presentation demonstrates how research questions are translated into eye-tracking measures, how appropriate statistical models are selected, and how results are interpreted. The case study highlights both stable and condition-sensitive eye-movement patterns, providing a practical introduction to analyzing eye-tracking data in interpreting research.
报告二:多模态EEG联采与语言认知研究
报告人:傅杨博士(上海外国语大学语言科学研究院)
内容提要:语言习得涉及感知编码、动作产出和社会互动等多个层面的神经加工过程。传统单一模态EEG研究较难捕捉自然情境下语言处理的动态特征。基于LSL(Lab Streaming Layer)的多模态同步采集技术,使EEG能够与眼动仪、运动学记录设备及另一套EEG系统实现高精度时间对齐,为语言习得神经机制研究提供了新的方法路径。
本报告将介绍三项相关研究:第一项在自然阅读中同步采集眼动与64导联EEG数据,通过注视相关电位(FRP)考察双语学习者二语新词习得中的眼动与神经响应;第二项同步记录64导联EEG与Wacom图形手写板数据,利用运动相关电位(KRP)分析手写新词习得中正字法编码与运动执行的协调机制;第三项在自然教学场景中采用双64导联EEG超扫描,同步采集师生音视频,并结合WhisperX语音分离、面部表情与身体运动识别,以及传递熵(TE)等方法,量化师生互动中的脑间因果信息流。报告还将讨论多模态EEG联采在语言认知研究中的应用前景与方法学局限。
报告人简介:傅杨,上海外国语大学语言科学研究院助理研究员,曾任浙江大学语言学及应用语言学博士后、Instituto Universitario de Neurociencia(IUNE)岗位博士,获西班牙“Ayudas Margarita Salas Para La Formación de Jóvenes Doctores”项目资助。研究方向为心理语言学、神经语言学、超扫描与EEG联采等。曾在 Cortex、Brain and Language、Studies in Second Language Acquisition、Bilingualism: Language and Cognition 等刊物发表论文,主持国家社科基金青年项目、西班牙科技部创新项目、上海市白玉兰浦江人才项目及中国博士后科学基金项目等。
大连海事大学外国语学院语言实验中心
语言与认知研究团队