从图像和词语到通道无关的语义表征：它们何时何地出现
From Images and Words to Modality-Independent Semantic Representations: When and Where They Emerge
预印本 · 尚未经过同行评审
以往关于通道无关语义表征的证据多来自明确要求语义加工的任务，尚不清楚当语义类别和刺激通道都与任务无关时这类表征是否仍会出现。研究用脑磁图记录 32 名被试观看含六个语义类别样例的六项序列并报告探测项序位，解码显示两种通道的类别信息从约 70 毫秒起高于机会水平，泛化在约 520 至 530 毫秒达到峰值，源空间定位到双侧前颞叶、外侧裂周皮层、右侧视觉皮层和双侧眶额皮层。该结果来自预印本，尚未经同行评审。
概念知识可以通过不同模态获取，例如观看图像或阅读书面文字。尽管此前的神经影像学研究提示前颞叶皮层参与模态无关的语义表征，但由图像和文字诱发的表征何时以及如何汇聚为模态无关的编码仍不清楚。此外，模态无关的类别表征证据主要来自明确要求语义加工的任务，这使得当语义类别和刺激模态与任务无关时这类表征是否会出现仍悬而未决。我们采用脑磁图（MEG）来确定当被试（n = 32）编码包含六个语义类别各一个样例、且在位置上进行了平衡的六项序列，并报告所探测项目的序数位置时，模态无关的语义类别表征在图像和文字之间何时、何处出现。从相对于项目呈现约70 ms起，每种模态下所有类别的解码表现均高于机会水平。两种模态的泛化在相近的潜伏期达到峰值（约520-530 ms），此时图像和文字分类器的系数最为相似。在两个迁移方向上，图像诱发的活动主要泛化到文字诱发的较晚活动，且图像反应的某一时段与文字反应的较长时段共享其类别编码。围绕泛化峰值的源空间解码在两个迁移方向上识别出相同的区域：左右前颞叶、岛周皮层（左半球更广泛）、右侧视觉皮层以及双侧眶额皮层，表明存在一个分布在全脑皮层的模态无关类别编码。
中文由 AI 翻译，仅供参考，以原文为准。
来源：bioRxiv · Neuroscience · biorxiv.org