IT / 文献库

PAPER 070 / CLOSE READING

Human face perception using electroencephalography and magnetoencephalography

语义审核:needs_revision · 图表审核:pass

本文目录 (Table of Contents)
  1. 研究背景
  2. 研究思路
  3. 方法
  4. 主要结果
  5. 图注解读
    1. 图 1 · 三种刺激下右侧半球的 MEG 波形
    2. 图 2 · 示意图式脸四种条件下的 MEG 波形
    3. 图 3 · 四种条件下的峰值潜伏期与偶极矩柱状图
    4. 图 4 · 三种视线条件下颞区 N190 的 ERP 波形
    5. 图 5 · 半场刺激下正立/倒置脸与蝴蝶的 MEG 成分
    6. 图 6 · U&U/U&I/I&I 三条件下左右半球的 MEG 波形
    7. 图 7 · 三条件下的峰值潜伏期与偶极矩柱状图
    8. 图 8 · RDB 呈现下四条件的全群平均 ERP
  6. 讨论
  7. 一句话总结

这篇综述总结了作者团队二十余年间开展的 5 组脑电(electroencephalography,EEG)与脑磁图(magnetoencephalography,MEG)人脸知觉实验,梳理人脸信息在大脑中加工的时间进程与解剖定位。各实验通过单变量操纵(包括外轮廓、眼睛朝向、倒置方式及刺激亮度),将 170–250 ms 时段的若干神经电生理成分逐步归因于下颞区(inferior temporal area,IT)与上颞沟(superior temporal sulcus,STS)。

研究背景

人脸知觉研究关注大脑如何从面孔图像中迅速提取身份、表情和视线等不同维度的信息。早期认知模型已将面孔知觉分解为多个相对独立的加工环节,随后的神经成像与电生理研究为其提供了多尺度证据:梭状回面孔区(FFA)的发现表明腹侧颞叶存在面孔敏感区域,而脑电中的 N170 成分揭示面孔与非面孔刺激在早期时段即可引发差异性神经响应。然而,仅确定脑区对面孔敏感尚不足以说明其具体的时序分工;头皮记录的负波成分也难以单凭电极位置直接推断其神经发生源。建立加工时序、候选脑区与具体视觉特征之间的对应关系,是连接这两类研究的关键环节。

这种对应关系受到刺激构成的直接影响。完整面孔同时包含外轮廓、内部五官(眼、嘴)及其空间相对配置,且静态照片呈现往往伴随瞬态亮度变化;若仅粗略比较面孔与普通物体,所观察到的电生理成分差异容易混淆初级视网膜输入响应、形状轮廓检测与高阶构型整合。作者团队 1999 年的脑磁研究表明,孤立呈现的眼睛诱发的相关成分潜伏期长于完整面孔,这提出了局部特征为何比较完整构型加工更慢的实证问题。同样,视线偏转是否主要影响检测还是社会性信息编码,倒置效应源于局部特征方向还是轮廓与特征的不匹配,均无法由单一的面孔特异性假说完全概括,左右半球在这些加工维度的侧重也需在严格控制参数的实验中加以辨析。

本文系统梳理了团队针对上述问题开展的系列脑电与脑磁实验,通过设置有无轮廓、整脸与孤立眼、视线方向以及轮廓和内部特征分别倒置等对照条件,追踪特定事件相关成分的潜伏期与振幅,并结合等效电流偶极子模型推测皮层发生源。此外,实验采用随机点闪烁呈现消除图形显现时的瞬态亮度变化,检验晚期面孔特异性响应能否与早期枕叶初级活动有效解耦。文章从刺激操纵的角度细化了面孔加工的时间动态过程。需要指出的是,相关证据主要基于该团队的小样本研究,源定位受限于偶极子模型假设,各成分归因于 IT 或 STS 以及半球分工的推论应结合具体实验证据审慎评估。

研究思路

综述的实证逻辑按问题递进展开:首先利用半视野刺激确立下颞区(IT)诱发的 2M 成分对应于面孔检测过程(Watanabe 1999a, b),随后探讨整脸检测快于孤立眼睛的机制,并将关键变量锁定于外轮廓(Miki 2007);接着检验面孔检测完成后的社会性视线朝向信息加工,将事件相关电位(ERP)中的眼偏效应归因于 STS(Watanabe 2002);进而探讨面孔方向敏感性的机制,利用轮廓与内部特征分别倒置的范式分离左右半球的功能侧重(右半球主要受特征朝向支配,左半球主要受轮廓与特征朝向的匹配关系支配;Watanabe 2003;Miki 2011);最后在方法学上,针对刺激显现伴随的亮度变化可能掩盖高阶 IT 信号的问题,引入随机点闪烁(random dots blinking,RDB)的恒定亮度呈现范式,将纯粹由形状构型驱动的 IT 面孔响应分离出来(Miki 2009)。

方法

各实验被试均为视力或矫正视力正常的健康成人,样本量为 10–14 人。MEG 实验主要采用 306 通道全头型生物磁强计(包含 204 个平面梯度计),在双侧颞-枕区传感器覆盖下,通过左右半视野刺激分别考察对侧大脑半球的响应;源定位分析采用单等效电流偶极子(equivalent current dipole,ECD)模型,以偶极矩达到最大的时间点定义为峰值潜伏期,以最大偶极矩作为响应强度指标,多源建模时评估不同偶极子数量模型的适配优度。ERP 实验采用国际 10–20 扩展系统,记录电极置于颞区(T5′/T6′ 位于标准 T5/T6 下方 2 cm,RDB 实验使用标准 T5/T6),测量负成分的峰值潜伏期与最大振幅。

刺激材料设置:实验一采用真实人脸照片(睁眼、闭眼、孤立眼睛);实验二采用示意图人脸(圆形轮廓、点状双眼、线段嘴巴),包含 CDL(轮廓+点+线)、CD(轮廓+点)、DL(点+线)、D(仅有点)四种条件;实验三采用正视、左偏与右偏三种视线;实验四和实验五采用正立面孔、倒置面孔及非面孔物体(蝴蝶),并进一步设计了轮廓与特征分别倒置的 U&U(正立轮廓+正立特征)、U&I(正立轮廓+倒置特征)和 I&I(倒置轮廓+倒置特征)条件;RDB 实验采用黑底白点伪随机明暗翻转呈现图形(构成目标轮廓的点保持相对稳定,背景点随机翻转),使被试在无总体平均亮度改变的条件下感知图形,条件包含正立脸、倒置脸、打乱脸(轮廓与内部特征空间配置被破坏但保持对称)以及非面孔对照(星形,要求被试计数以控制注意)。

主要结果

  1. IT 区 2M 成分反映面孔检测,整脸检测快于孤立眼睛(图 1)。真实面孔(睁眼或闭眼)诱发出约 132 ms 的 1M 成分(源于枕叶初级视区,受亮度驱动)与约 179 ms 的 2M 成分(源于 IT/FFA 附近);2M 成分在右半球的检出率为 10/12,左半球为 5/12,睁眼与闭眼条件的潜伏期无显著差异;而单独呈现眼睛时,2M 潜伏期在双侧半球均显著长于完整面孔。
  2. 轮廓是加速面孔检测的关键结构特征(图 2、图 3)。示意图面孔实验(13 人,11/13 人双侧 IT 均成功拟合 ECD)显示,包含外轮廓的条件(CDL、CD)其峰值潜伏期在双侧半球均显著短于缺失外轮廓的条件(DL、D);CDL 条件的最大偶极矩数值上最高,但受个体间变异影响未达统计显著。结果表明外轮廓的存在显著缩短了面孔检测所需的神经潜伏期。
  3. 视线偏转增大颞区 N190 振幅,发生源更符合 STS 特征(图 4、表 1)。在 14 人的 ERP 实验中,刺激后约 190–200 ms 在 T5′/T6′ 电极记录到清晰的负成分 N190;三种视线条件的潜伏期无显著差异,但右偏视线的 N190 振幅在右颞 T6′ 显著大于正视条件(−3.8 vs −3.1 µV,p<0.01),左右偏转平均值在 T6′ 同样显著大于正视(−3.6 vs −3.1 µV,p<0.01),T5′ 仅见数值增大。结合 IT 神经活动不受内部眼嘴朝向明显调制的既往数据,作者将该视线偏转敏感性归因于 STS 的社会性注意表征。
  4. 面孔倒置效应展现半球功能侧重(图 5、图 6、图 7、表 2、表 3)。在半视野刺激实验(10 人)中,2M 为主导成分:倒置导致右半球 2M/3M 潜伏期延长(如 2M 由 161.6 ms 增至 164.3 ms),左半球则呈现缩短趋势(155.1 ms 降至 153.8 ms,组间未达显著);蝴蝶刺激未改变潜伏期,但左半球 3M 振幅显著低于面孔条件;多源建模表明包含 IT 与外侧颞区的三偶极子模型仅适配面孔刺激。在轮廓/特征分离倒置实验(10 人,ECD 定位于 IT/FFA)中:右半球 U&I 与 I&I 的峰值潜伏期均显著长于 U&U;左半球仅有破坏了相对匹配关系的 U&I 条件其潜伏期显著长于 U&U 与 I&I。结果提示右侧 IT 主要受内部特征绝对朝向支配,左侧 IT 则主要对轮廓与特征朝向的相对一致性敏感。
  5. 随机点闪烁范式成功在恒定亮度下分离 IT 面孔响应(图 8、表 4)。在 10 人的 RDB 实验中,早期依赖亮度突变的 P1 成分(约 100 ms)消失,代之以约 250 ms 处的负成分 N-ERP250(双侧 T5/T6);正立面孔的潜伏期最短(246.7/247.8 ms),显著短于倒置(258.3/258.5 ms)与打乱条件(261.0/259.4 ms);在右颞 T6 电极上,正立、倒置与打乱面孔的振幅均显著大于非面孔星形刺激。源分析显示该成分定位于 IT/FFA。相较于颅内记录中腹侧颞叶约 200 ms 的起始响应,N-ERP250 出现相对偏晚,推测与无亮度瞬态下视觉信号经较慢通路传递有关。

图注解读

图 1 · 三种刺激下右侧半球的 MEG 波形

原文图注:FIGURE 1 | The MEG waveforms of a representative subject in response to the presentation of stimuli, face with opened eyes, face with closed eyes, and eyes recorded from the right hemisphere. The MEG waveforms recorded from 37 channels are superimposed [adopted from Watanabe et al. (1999b)]. MEG, magnetoencephalography.

该图展示了一名代表性被试右侧半球 37 通道的 MEG 叠加波形,比较了睁眼面孔、闭眼面孔与孤立眼睛三类刺激诱发的响应。波形显示约 179 ms 处的 2M 波峰在各条件下均存在,但孤立眼睛刺激诱发的 2M 峰值出现明显晚于完整面孔条件,为“眼睛诱发的 2M 潜伏期显著长于完整面孔”提供了波形证据,对应主要结果第 1 条。

Figure 1

图 2 · 示意图式脸四种条件下的 MEG 波形

原文图注:FIGURE 2 | MEG waveforms (upper) of a representative subject following the stimulus onset in the CDL condition. MEG waveforms (lower) at sensors A and B in the upper image show a clear component recorded for CDL, CD, DL, and D in the right and left hemispheres. (A) Representative waveforms at sensor A in the right hemisphere of the upper image. (B) Representative waveforms at sensor B in the left hemisphere of the upper image. Black arrows show the stimulus onset and white arrows show the response selected for further analysis [adopted from Miki et al. (2007)]. MEG, magnetoencephalography; CDL, contour, dots, and line; CD, contour and dots; DL, dots and line; D, dots only.

图幅上方为代表性被试在 CDL 条件下的全头磁场波形分布,下方展示了右半球(A)与左半球(B)关键传感器处四种条件(CDL、CD、DL、D)的响应重叠。黑色箭头指示刺激呈现起始点,白色箭头指示用于量化分析的目标成分。波形显示包含外轮廓的条件(CDL、CD)相比无轮廓条件(DL、D)其目标成分的出现时间更为提前,对应主要结果第 2 条。

Figure 2

图 3 · 四种条件下的峰值潜伏期与偶极矩柱状图

原文图注:FIGURE 3 | Bar graphs of peak latency (upper) and the maximum amplitude of dipole moment (lower) for all conditions after stimulus onset in the right and left hemispheres. Error bar shows the SD [adopted from Miki et al. (2007)]. ∗p < 0.05 and ∗∗p < 0.01. SD, standard deviation.

上图展示双侧半球在四种条件下的峰值潜伏期,下图展示最大偶极矩振幅,误差棒代表标准差。统计结果显示:潜伏期在双侧半球均表现为缺乏轮廓的 DL 和 D 条件显著长于含轮廓的 CDL 和 CD 条件;最大偶极矩虽然在 CDL 条件下平均值偏高,但在各条件间差异未达统计显著,表明轮廓主要调节加工潜伏期而非偶极子强度,对应主要结果第 2 条。

Figure 3

图 4 · 三种视线条件下颞区 N190 的 ERP 波形

原文图注:FIGURE 4 | ERP waveforms in two representative subjects for straight eyes, left averted, and right averted conditions at T5′ and T6′ electrodes in the left and right temporal areas, respectively. A negative component, N190, was clearly identified for all stimuli [adopted from Watanabe et al. (2002)]. ERP, event-related potentials.

该图展示两名代表性被试在左颞 T5′ 与右颞 T6′ 记录到的正视、左偏与右偏视线诱发的 ERP 波形。刺激后约 190–200 ms 处均出现清晰的负成分 N190;在右侧 T6′ 电极上,右偏视线诱发的 N190 振幅明显大于正视条件(表 1:−3.8 vs −3.1 µV),且各条件间潜伏期无显著变化,表明视线方向主要调节响应幅度,对应主要结果第 3 条。

Figure 4

图 5 · 半场刺激下正立/倒置脸与蝴蝶的 MEG 成分

原文图注:FIGURE 5 | The MEG waveforms for LHF and RHF stimulation in two representative subjects. MEG components (1M, 2M, and 3M) were clearly recorded in the right (LHF stimulation) and left hemispheres (RHF stimulation) in upright (upright face), inverted (inverted face), and objects (butterfly) conditions. The vertical gray and brown arrows indicate the peaks of 2M and 3M, respectively. In addition, the vertical gray and brown dotted lines indicate the peak latencies of 2M and 3M, respectively. 2M and 3M latencies for objects were not significantly different from those for faces (upright and inverted) [adopted from Watanabe et al. (2003)]. MEG, magnetoencephalography; LHF, left hemifield; RHF, right hemifield.

图示两名被试在左半视野(LHF,投射至右半球)与右半视野(RHF,投射至左半球)刺激下诱发的 1M、2M 及 3M 成分,比较了正立面孔、倒置面孔与非面孔物体(蝴蝶)。2M 表现为主导反应;在右半球倒置面孔导致峰潜伏期延长,在左半球呈现缩短趋势;非面孔物体未改变潜伏期,但在左半球 3M 振幅显著降低,对应主要结果第 4 条。

Figure 5

图 6 · U&U/U&I/I&I 三条件下左右半球的 MEG 波形

原文图注:FIGURE 6 | MEG waveforms (upper) of a representative subject following stimulus onset in the U&U condition. MEG waveforms (lower) at sensors A and B in the upper image show a clear component recorded for U&U, U&I, and I&I conditions in the left and right hemispheres. (A) Representative waveforms at sensor A in the left hemisphere of the upper image. (B) Representative waveforms at sensor B in the right hemisphere of the upper image. Black arrows show the stimulus onset and white arrows show the response selected for further analysis. Responses after the stimulus onset were longer in latency for U&I and I&I than for U&U in the right hemisphere, but longer in latency for U&I than for U&U and I&I in the left hemisphere in this subject [adopted from Miki et al. (2011)]. MEG, magnetoencephalography; U&U, upright contours and upright features; U&I, upright contours and inverted features; I&I, inverted contours and inverted features.

图示代表性被试在 U&U(正立轮廓+正立特征)、U&I(正立轮廓+倒置特征)与 I&I(倒置轮廓+倒置特征)条件下的波形。传感器响应显示:右半球中 U&I 与 I&I 条件诱发的潜伏期均长于 U&U 条件;左半球中仅有破坏了轮廓与特征方向一致性的 U&I 条件出现潜伏期显著延长,对应主要结果第 4 条中的半球差异证据。

Figure 6

图 7 · 三条件下的峰值潜伏期与偶极矩柱状图

原文图注:FIGURE 7 | Bar graph of peak latency (upper) and the maximum amplitude of dipole moment (lower) for all conditions after stimulus onset in the right and left hemispheres. Error bar shows the SD [adopted from Miki et al. (2011)]. ∗p < 0.05 and ∗∗p < 0.01. SD, standard deviation.

上图比较三组倒置条件在双侧半球的峰值潜伏期,下图比较最大偶极矩。潜伏期数据显示明显的条件与半球交互作用:右半球 U&I 与 I&I 显著长于 U&U,左半球 U&I 显著长于 U&U 与 I&I;偶极矩各条件间未达统计显著差异。该结果支持了左、右侧下颞叶在处理特征方向与构型匹配时的功能分工,对应主要结果第 4 条。

Figure 7

图 8 · RDB 呈现下四条件的全群平均 ERP

原文图注:FIGURE 8 | The grand-averaged waveforms from all ten subjects of ERP for upright (schematic face), inverted (the upright stimulus inverted), scrambled (the same contours and features as in upright but with the spatial relation distorted), and star (a star shape whose occurrence was enumerated and then reported after sessions by the subjects) conditions at the T5 and T6 electrodes in the left and right temporal areas, respectively [adopted from Miki et al. (2009)]. ERP, event-related potential.

图示 10 名被试在双侧颞区电极(T5、T6)记录到的总平均 ERP 波形,涵盖正立脸、倒置脸、打乱脸与非面孔星形四种 RDB 条件。波形中约 100 ms 的 P1 成分缺失,表明恒定亮度的 RDB 呈现有效抑制了枕区初级瞬态反应;约 250 ms 处记录到 N-ERP250 成分,正立面孔潜伏期最短,且各面孔条件在右颞 T6 电极上的振幅均显著大于非面孔对照,对应主要结果第 5 条。

Figure 8

讨论

综述将主要发现归纳为四个方面:第一,下颞叶(IT/FFA)事件相关成分在面孔呈现后被特异性激活,整脸检测潜伏期短于孤立眼睛,表明视觉系统具有对完整面孔优先检测的特性,其中外部轮廓在缩短加工时间中发挥了关键作用。第二,STS 相关电生理成分在偏转视线下的振幅大于正视条件,表明视线方向(尤其是非注视视线)可自动调节注意表征;该效应主要定位在 STS 而非 IT,与 IT 神经元放电通常不受局部五官形态微小改变影响的发现一致。第三,左右半球在面孔方向加工中存在分工:右半球主要追踪内部特征的朝向,正立朝向加工更迅速;左半球则主要检测轮廓与内部特征朝向的匹配度。第四,RDB 范式在无宏观亮度变化下呈现图形,规避了早期枕叶视知觉强信号对高阶成分的淹没,测得 IT 区对正立面孔的响应潜伏期短于倒置与非面孔刺激。在局限性方面,各实验被试样本量相对有限(10–14 人),源定位主要依赖等效电流偶极子拟合假设,且偶极矩强度指标受个体差异影响较大;此外,RDB 范式下诱发的 N-ERP250 潜伏期相对偏晚,其确切的传导通路机制仍需进一步研究。

一句话总结

综述通过单变量视觉操纵与脑电/脑磁图记录,细化了人脸检测的时序过程与解剖定位,揭示了外轮廓对下颞叶检测潜伏期的缩短作用、视线偏转对上颞沟响应幅度的调制,以及两半球在特征朝向与构型匹配上的功能侧重。

审校与证据追溯

当前来源未附审校评注。请参照上方登记状态。