简要描述： 实验室解决方案支持基于多模态人因数据进行人工智能模型训练，并进一步进行人工智能科学研究或工程应用。实验室解决方案可提供人因大数据管理平台、智能化预处理与应用平台、主客观数据融合与AI模型库以及智能应用平台。方案同时创新研发了基于多元时序数据的ErgoAI Transformer融合算法，结合多模态数据融合网络、生成对抗模型、时序记忆模型等方法，提高算法的准确率、鲁棒性和灵活性。

实验室可用于进行基于多模态人因数据进行人工智能模型训练，并进一步进行人工智能科学研究或工程应用。实验室主要分为被试间与主试间两大功能区域，之间由单向玻璃隔开，使主试间中的研究人员看见被试间内受试者的行为，而受试者看不见主试间，从而减小干扰。其中，被试间为实验进行的区域，可依照测试需求布置人因智能研究所需的多模态数据采集设备，如眼动仪、生理仪、手指轨迹分析仪、脑电仪等；被试间中有多个行为观察摄像头与拾音器，从不同角度摄取受试者的行为影像并采集受试者的声音，音视频信号传送给主试间中的人机环境同步平台进行数据分析。主试间为观察与数据分析区域，布置有语音控制台，研究人员的指令通过被试间的扬声器传送给受试者；主试间还布置有人机环境同步平台、人因智能边缘计算平台等设备，研究人员可在主试间实时同步采集多模态人因数据并进行分析。

实验室被试间设置有多模态人因数据采集设备，包括高精度眼动仪、边缘智能眼动仪、行为表情语音边缘智能实验仪、边缘智能生理仪、边缘智能脑电仪、边缘智能脑成像仪、边缘智能多模态脑功能仪以及行为模式边缘智能实验仪等。被试间的产品组成与选型可根据实际研究需求进行配置。

实验室主试间设置有多模态人因数据同步采集、分析和人因智能实验仪，包括ErgoAI人因智能实验仪和ErgoAI人因智能评估平台。其中，ErgoAI人因智能实验仪支持多模态数据同步采集与分析，确保所需要的人、机、环境三方面的多模态数据可基于同一时间轴进行实时同步，消除事后对齐数据分析的负担，并使数据“协同增效"，多角度综合印证结果，确保数据结果的有效性与准确性。ErgoAI人因智能应用平台，对接人机环境同步平台所同步采集的多模态数据，搭建开放式AI算法应用平台，能够为不同AI算法基础的用户，提供从数据采集、数据降噪、数据标注、模型训练、模型评估及部署应用的全流程智能化应用系统。平台可提供数千人次数据搭建的各类应用数据集，涵盖人员基数据集、状态数据集等，以及数十种人因工程预训练模型，包括单模态状态识别模型、多模态状态识别模型等。同时，ErgoAI人因智能应用平台支持根据实际研究内容与方向创建数据集、训练并验证模型，并进行模型部署与实时状态预测。

(1) 实验室示意图

功能应用：

1. 基于测试任务的多模态数据同步

2. 人因大数据平台

3. 人因智能算法模型库

4. 人因智能应用与定制开发