本发明涉及操作训练评估技术领域，更具体的说，涉及一种基于飞行员注意力分配的训练质量评估方法及系统。本方法包括：根据特定飞行任务场景收集飞行员注意力分配训练质量评估所需的数据；基于收集的数据，计算飞行员在特定飞行任务场景下的标准注意力分配模型，生成标准注意力分配模型的注意力分配与实际注意力分配；根据标准注意力分配模型的注意力分配与实际注意力分配进行比较，对飞行员在特定飞行任务场景下注意力分配的训练质量进行评估，形成并展示评估结果。本发明通过量化飞行员的注意力分配模式，结合眼动追踪技术和任务相关的主客观数据，能够客观、准确地评估飞行员在模拟机训练中的表现，提升了飞行培训的科学性、公正性和安全性。