动作捕捉与眼动追踪的联合使用，为理解人体运动与视觉注意之间的关系提供了新的视角。人在完成动作时，视线往往先行指向目标区域，眼动信息能够反映注意力分配与动作规划的过程，而动作捕捉数据则记录肢体执行的具体情况。
将两类数据同步采集并融合分析，可以更完整地呈现从感知到行动的全过程，在康复训练、运动技能学习与平衡控制等研究中具有重要的应用价值。
实现两类数据的联动采集，关键在于建立统一的时间基准与空间参照。穿戴式眼动仪记录受试者头部运动与视线方向，无标记动作捕捉系统记录身体各节段的位置与姿态，两类数据只有在对齐的时间与空间框架下，才能进行有意义的联合分析。
本文将从系统构成、同步方法、采集流程与数据处理等方面，说明联动采集的具体实施路径。
（一）穿戴式眼动仪的数据内容
穿戴式眼动仪佩戴于受试者头部，通过朝向眼睛的摄像头与场景摄像头，记录眼球运动与视线在场景中的落点。
系统输出的数据包括瞳孔位置、注视点坐标、视线方向以及头部运动信息，能够反映受试者在任务过程中注视何处、注视时长以及视线移动的路径。眼动数据为理解视觉注意与动作规划提供直接证据。
（二）无标记动作捕捉的数据内容
无标记动作捕捉系统通过多台摄像头识别人体姿态，重建身体各节段的二维与三维位置。
系统输出的数据包括各关节位置、关节角度、节段速度与身体重心等运动学参数，能够反映肢体在任务过程中的空间位置与运动特征。动作数据为描述动作执行过程与运动质量提供量化基础。
（三）两类数据联合的价值
眼动数据与动作数据的联合，可以建立视觉注意与动作执行之间的对应关系。
在康复场景中，联合分析有助于了解患者在执行功能动作时是否注视正确目标、视线引导是否及时、动作失误是否与视觉注意偏差相关；在运动研究中，则有助于揭示专家与新手在注视策略与动作模式上的差异。两类数据的互补性，为行为机制研究提供了更完整的分析维度。
（一）系统的物理连接方式
联动采集需要两类系统协同工作。穿戴式眼动仪通常由头部设备与记录单元组成，记录单元与电脑连接；无标记动作捕捉系统由摄像头与处理服务器组成。
联动采集时，两台或多台电脑分别运行各自系统的软件，通过同步信号或时间协议建立数据采集的对应关系，使两类数据在时间上相互对齐。
（二）时间同步的基本方法
时间同步是联动采集的核心问题。常用的方法包括硬件触发同步与软件时间戳同步。
硬件触发通过同步线缆向两类系统发送统一的触发信号，使采集同时开始，时间对齐精度较高；软件时间戳则依赖各系统记录的统一时钟或时间戳信息，在数据后处理时进行对齐。选择同步方式时，应结合设备接口条件与所需时间精度综合确定。
（三）空间对齐的总体思路
除时间同步外，空间对齐也是联动分析的前提。眼动仪输出的视线数据通常以其自身坐标系为参照，动作捕捉数据则以世界坐标系为参照。
空间对齐的目标，是建立视线方向与身体位置在统一空间框架下的对应关系，使视线落点能够与肢体位置、动作范围相互关联，从而进行有意义的联合分析。
（一）设备校准与佩戴
采集开始前，需要对穿戴式眼动仪进行校准。校准过程通常要求受试者注视若干已知位置的点，使系统建立瞳孔位置与视线方向的对应关系；校准质量直接影响视线数据的准确性。
眼动仪佩戴应稳固舒适，避免测试过程中移位；无标记动作捕捉系统则应提前完成摄像头标定，确认姿态识别效果满足要求。
（二）任务设计与场景布置
联合实验的任务设计需要同时考虑两类数据的采集需求。动作任务应保证受试者处于动作捕捉的有效采集范围内，同时任务场景中应设置可供注视的视觉目标，使眼动数据具有分析意义。
场景布置应兼顾两类系统的要求，包括光照条件、背景环境、视觉目标位置与动作活动范围，使两类数据都能在良好条件下采集。
（三）同步连接与预测试
在正式采集前，应完成同步连接并进行预测试。预测试用于确认两类系统能够同时启动与记录、同步信号工作正常、数据输出格式符合预期。
预测试还应在真实任务条件下进行，检查动作过程中眼动仪佩戴是否稳定、动作捕捉是否受遮挡影响，发现问题及时调整，避免正式采集时出现数据缺失。
（一）受试者准备与基线记录
正式采集前，应完成受试者的各项准备，包括眼动仪佩戴与校准、动作捕捉所需着装确认以及任务说明与练习。
基线记录用于建立受试者的初始状态，包括安静状态下的眼动与姿态数据，便于后续分析中对照。基线记录的时长与条件应与正式任务保持一致，保证数据可比。
（二）同步触发与任务执行
任务执行时，操作人员通过统一触发方式启动两类系统的采集。受试者按任务要求完成规定动作，眼动仪记录全程的视线信息，动作捕捉系统同步记录身体运动。
任务过程中，操作人员应监控两类数据的采集状态，发现异常及时处理；任务完成后，应确认两类数据均完整记录并保存。
（三）多次试验与数据保存
联合实验通常需要多次重复试验，以获取稳定的数据并支持统计分析。每次试验之间，应注意保持受试者状态与采集条件的稳定，避免疲劳与设备状态变化影响数据质量。
试验数据应按统一规则命名与保存，保留原始记录与同步信息，为后续数据处理与分析提供完整的数据基础。
（一）时间戳对齐与数据同步
数据后处理的首要环节，是将两类数据在时间上对齐。对于硬件同步采集的数据，可通过同步触发时刻确定对应关系；对于时间戳同步的数据，则需根据各系统的时钟信息进行对齐。时间对齐后，应检查两类数据在关键事件时刻的一致性，确认同步质量满足分析要求。
（二）视线数据与身体数据的关联
时间对齐后，可将视线信息与身体运动信息进行关联分析。
根据头部位置与视线方向，计算视线在空间中的落点，并与身体各关节位置、动作范围进行比较，判断注视目标与动作执行之间的关系。关联分析的精度，取决于时间同步质量与空间对齐的准确性，分析过程中应结合原始数据核查结果。
（三）联合指标的计算与呈现
联合分析可计算多种整合指标，如注视开始与动作启动之间的时间间隔、注视目标与动作终点的对应关系、动作过程中视线转移的次数与路径等。
这些指标将视觉注意与动作执行联系起来，为理解行为过程提供量化依据。联合指标的呈现，可采用时间对齐的曲线叠加、注视轨迹与运动轨迹的空间叠加等方式，直观展示两类数据的对应关系。
（一）研究问题与指标选择
联合实验的设计应从研究问题出发，明确需要回答的行为问题以及相应的分析指标。研究问题的清晰界定，决定了任务设计、数据采集范围与分析方法的选择；指标选择则应兼顾眼动与动作两类数据的代表性，使联合指标能够反映视觉与运动的对应关系。
（二）任务难度与受试者群体的考虑
任务难度应与研究目的和受试者能力相适应。难度适中的任务有利于观察到视觉注意与动作执行的自然关系；难度过高或过低，可能使注视策略或动作模式出现偏态表现。
受试者群体的特征，如年龄、疾病类型与功能水平，也会影响数据的特征与解释，设计时应予以考虑。
（三）条件控制与对照安排
联合实验应重视条件控制，保持光照、背景、任务指令与设备设置的一致性，减少无关因素对两类数据的影响。
合理的对照安排，如不同任务条件、不同受试者组之间的比较，有助于突出研究因素的作用，提高结论的可靠性。条件控制与对照设计的质量，直接影响联合实验结果的解释力。
（一）眼动数据的质量问题
眼动数据可能出现注视丢失、瞳孔检测失败或校准漂移等问题，常见原因包括眼动仪佩戴移位、眨眼频繁、镜片反光与环境光变化。
采集过程中应关注眼动数据的实时质量，必要时重新校准或调整佩戴；后处理时应识别并标记质量欠佳的时段，评估其对分析结果的影响。
（二）动作捕捉数据的质量问题
动作捕捉数据同样可能出现关节识别偏差、数据缺失或遮挡问题，常见原因包括衣着条件、动作遮挡与标定状态变化。采集前应确认着装与标定条件，采集后应检验数据的完整性与合理性。两类数据质量的检验应同步进行，避免单类数据问题影响联合分析的结论。
（三）同步偏差的排查
同步偏差会使两类数据在时间上错位，导致联合指标失真。排查同步偏差，可利用动作或事件中的明显时间特征，如视线落到目标的时刻与肢体接近目标的时刻，核对两类数据的时间对应关系。
发现偏差后，应检查同步设置与时间戳信息，必要时重新同步或调整对齐参数。
（一）康复训练中的视觉引导研究
在康复训练中，联合采集可用于研究视觉引导对动作执行的影响。通过分析受试者训练动作中的注视位置与肢体运动，可以了解其是否依赖视觉反馈、注视策略是否合理，进而设计更有效的训练任务与反馈方式。
联合数据也为评估训练前后视觉-动作协调能力的改善提供了量化手段。
（二）平衡与跌倒风险研究
平衡控制与视觉注意密切相关，联合采集可用于分析平衡任务中的视线策略与身体姿态调整。
受试者在维持平衡时的注视位置、视线转移与身体重心运动之间的关系，可以为理解平衡控制机制提供线索；对跌倒风险较高的群体，联合分析也有助于识别视觉注意相关的风险因素。
（三）运动技能学习与动作控制研究
在运动技能学习研究中，联合采集能够揭示注视与动作在学习过程中的协同变化。初学者与熟练者在注视策略、视线先动与动作执行上的差异，可以为技能训练提供理论依据；动作任务中的视觉预测与动作调整过程，也可以通过联合数据分析得到更深入的认识。
（一）坐标系与单位的一致性
联动分析要求两类数据在坐标系与单位上保持一致。动作捕捉数据通常以米为单位的世界坐标表示，眼动数据中的视线方向与注视点则需要转换到统一坐标系。
处理时，应明确各系统的坐标定义，通过标定与换算建立对应关系，避免因坐标系不一致造成的分析错误。单位与坐标的处理过程应有完整记录，便于核查与复现。
（二）采样频率的匹配
两类系统的采样频率可能存在差异，需要在进行联合分析前统一时间轴。常用的处理方式包括以较高频率系统的数据为基准进行重采样，或将两类数据插值到共同的时间网格。
重采样与插值方法的选择，应根据数据特征与分析需求确定，避免引入虚假的时间关系或平滑过度。
（三）数据缺失时段的处理
联动采集中，两类数据可能出现不同步的缺失时段，如眼动数据因眨眼丢失视线信息，动作数据因遮挡丢失关节位置。
处理缺失时段时，应先判断缺失是否影响关键分析区间，再决定采用插值、标记剔除或分段分析等策略。对缺失情况的处理应在结果中说明，保证分析结论的透明度。
（一）光照条件的协调
联合实验的光照条件需要兼顾眼动仪与动作捕捉系统的要求。
眼动仪对场景光照较为敏感，过强或过暗的光照会影响瞳孔检测与场景画面质量；动作捕捉系统则需要均匀充足的照明以保证画面清晰。布置时应寻找两类系统都能接受的折中方案，必要时通过辅助照明与遮光措施进行调整。
（二）视觉目标与动作区域的设计
任务中的视觉目标位置应与动作区域协调设计。视觉目标应处于受试者自然注视的范围内，同时位于动作捕捉视野覆盖的区域之内，使注视与动作的空间关系清晰可辨。
视觉目标的大小、颜色与背景对比，应根据任务需要合理设置，保证眼动数据能够准确反映注视行为。
（三）设备走线与固定
联合实验中设备较多，走线与固定需要提前规划。眼动仪的连接线应避免妨碍动作执行，动作捕捉区域内不应有线缆与设备遮挡摄像头视野；各设备的固定应稳固，避免测试过程中移位影响数据。
整洁有序的现场布置，既有利于数据采集，也有助于减少实验中的干扰因素。
（一）数据命名与归档规范
联合实验产生的数据包括眼动原始数据、动作捕捉原始数据、同步信息与处理结果，需要建立统一的命名与归档规范。
命名应包含受试者编号、试验序号、任务条件与采集时间等信息，便于检索与对照；归档时应按数据类型分层存放，保留原始数据与处理记录的完整对应关系。
（二）隐私保护与数据安全
联合实验涉及受试者的视线信息与身体运动信息，均属于敏感数据，采集与存储过程应遵守隐私保护要求。
数据的存储设备应采取必要的安全措施，访问权限应限定于研究相关人员；公开使用数据时，应进行匿名化处理。研究方案应明确数据的使用范围、保存期限与共享方式，保障受试者权益。
（三）多模态数据的管理流程
两类数据的联合管理需要形成清晰的流程。采集完成后，应及时核对数据完整性并完成同步校验，将原始数据与处理数据分类保存；处理与分析过程中产生的中间文件与最终结果，也应按规范管理。规范的数据管理流程，是联合实验结论可靠、可追溯的基础。
（一）设备操作的专项负责
联动采集涉及两类系统与同步设备，操作要求较高。实验团队应明确各设备的专项负责人，分别负责眼动仪的操作校准、动作捕捉系统的采集管理与同步触发控制，使各环节操作规范、责任清晰。专项负责有助于减少操作失误，提高采集流程的稳定性。
（二）数据处理的协同配合
数据处理与分析需要眼动与动作两个专业方向的协同。熟悉眼动数据的人员与熟悉动作数据的人员共同参与处理流程，可以在数据质量判断、指标选择与结果解读上相互补充，减少单一专业视角带来的局限。协同配合还便于及时发现两类数据之间的矛盾，提高分析质量。
（三）试运行与团队磨合
正式实验前进行试运行，有助于团队成员熟悉流程并磨合配合。试运行可以发现设备操作、任务执行与数据处理中的问题，并在正式实验前加以解决；团队在试运行中形成的协作方式与操作习惯，也能提高正式实验的连贯性与效率。
（一）步态与注视联合采集
在步态研究中，可设计包含特定视觉目标的行走任务，同步记录行走过程中的视线位置与下肢运动。分析时可将视线落点与行走路径、脚着地位置进行空间关联，观察受试者在行走过程中注视前方目标、路面或身体附近的频率与时长，理解视觉在步态控制中的作用。
（二）坐站转移与视线策略
坐站转移任务中，受试者的视线往往先指向目标方向再启动动作。联合采集可记录视线开始转移的时刻与动作启动的时刻，计算两者之间的时间间隔，分析视线引导对转移动作的影响。
这类任务设计简单，适合作为联合采集的入门场景，也有助于理解功能性动作中的视觉-运动协调。
（三）上肢任务与目标注视
上肢功能任务中，可设置位于不同位置的视觉目标，记录受试者注视目标的过程与上肢到达目标的过程。
通过分析注视先于动作的程度、注视过程中手部位置的调整，可以了解视觉反馈在上肢运动控制中的作用。该类任务便于控制变量，是联合实验中较为常用的设计形式。
（一）避免因果关系的过度推断
联合数据能够呈现注视与动作在时间与空间上的对应关系，但对应关系不等于因果关系。视线先于动作出现，可能是动作规划的需要，也可能受任务要求或习惯影响。解读结果时，应结合任务设计与受试者特征，谨慎判断关系的方向与含义，避免过度推断。
（二）结合任务条件解释差异
注视策略与动作模式会受到任务条件的明显影响，同一受试者在不同任务中的表现可能存在差异。解释数据结果时，应结合具体的任务条件与实验情境，说明结果适用于何种场景；跨任务、跨受试者组比较时，应注意条件差异对结论的影响。
（三）重视个体差异的表现
视觉注意与动作执行存在明显的个体差异，年龄、经验、疾病状态等因素都会影响联合数据的特征。
分析结果时，应重视个体差异的表现，既关注组间规律，也留意个体模式；对于康复场景中的临床应用，个体化的结果解读往往比群体平均更有实际意义。个体差异的存在，也提示在实验设计阶段应适当控制受试者的基线特征，为结果的解释保留充分余地。
（一）实验流程的书面化
联合实验涉及环节较多，实验流程应以书面形式明确。方案应包含研究目的、受试者纳入标准、任务设计、设备操作步骤、同步设置、数据采集流程与处理分析方法，并明确各环节的负责人与时间安排。书面化的流程有助于团队统一执行，也为实验的复现与核查提供依据。
（二）预实验与正式实验的衔接
正式实验前开展预实验，是发现与解决问题的重要环节。预实验可以在小样本或志愿者条件下检验任务设计的可行性、设备运行的稳定性与数据处理的通畅性，并根据预实验结果调整实验方案。
预实验与正式实验的衔接安排，应考虑任务熟悉效应与受试者状态对数据的影响，保证正式数据质量。
（三）时间与资源的合理分配
联合实验的耗时通常高于单一系统实验，时间与资源的分配需要合理规划。设备准备、数据采集、数据处理与分析各环节都应预留充足时间，避免因时间紧张影响数据质量；人员安排也应考虑设备操作与数据处理的并行需求，使实验推进顺畅有序。
（一）同步技术的持续完善
同步技术是联动采集的基础支撑，其精度与易用性直接影响联合实验的质量。随着设备接口与同步协议的不断发展，硬件同步的稳定性与软件同步的灵活性将持续提升，联动采集的门槛进一步降低，更多研究团队可以开展动作与眼动的联合研究。
（二）分析方法的智能化
眼动与动作数据的联合分析，正受益于数据处理方法的智能化。
自动识别注视事件、动作阶段的自动分割以及联合指标的自动计算，可以显著提高处理效率；基于大量数据的模式分析，也有助于发现视觉与运动关系中更细微的规律。分析方法的发展，将拓展联合实验的研究深度。
（三）应用场景的不断拓展
动作与眼动联合研究正在向更多应用场景拓展。除康复训练、平衡评估与运动技能学习外，在辅助器具使用评估、日常生活活动分析与人机交互研究等领域，联合采集也显示出应用潜力。
随着实验方法与分析工具的成熟，联合研究将在更广泛的领域发挥作用，为理解行为机制与优化干预措施提供支持。
穿戴式眼动仪与无标记动作捕捉系统的联动采集，通过时间同步与空间对齐，将视觉注意信息与身体运动信息纳入统一的分析框架。联动采集的实施，需要充分的前期准备、规范的同步设置与系统的数据处理流程，同时应重视两类数据的质量检验与同步偏差的排查。
随着同步技术与数据分析方法的不断完善，动作与眼动联合实验将在康复医学与运动科学研究中发挥越来越重要的作用，为理解感知与行动的协调机制提供新的工具。
020-85262155│ 852-82088723
