基于人因工程的高校数字学习空间评价指标专家征询问卷 (第三轮)

尊敬的专家:

        您好!本课题组正在开展基于人因工程的高校数字学习空间评价指标的研究工作,首席专家为西北师范大学博士生导师、兰州文理学院校长王顶明教授。课题组在深入研读国内外人因工程学与教育学、教育技术学交叉文献的基础上,建构了以“人因效能”为核心概念的认知人因效能、组织人因效能二维分析框架,基于“人-技术-组织”(H-T-O)适配理论、社会技术系统理论以及宏观工效学理论构成的理论框架以及第二轮专家征询意见对指标体系进行了系统性修订,形成了第三轮专家征询问卷。

问卷填答流程简洁,预计占用您5-8分钟;问卷结果仅供评价指标修订的学术研究使用,个人信息及观点严格保密。恳请您于2026年7月20日前填写问卷,并反馈至邮箱jiangss.ss@foxmail.com。您的专业意见对本课题的推进与完善至关重要,项目组谨向您致以由衷的感谢!


西北师范大学 高校数字学习空间课题组

联系电话:18101294040(微信同号)

联系邮箱:jiangss.ss@foxmail.com

说明:

       一、核心概念界定

       本评价框架以“人因效能”(Human-Factors Effectiveness, HFE)为核心评价概念,将其界定为:在智能体(AI Agent,如学习通平台的智能推荐、自动批阅、自主学习、学习助手等)介入高校数字学习空间的情境下,使用者(教师、学生)与技术系统、组织环境之间的匹配程度所决定的系统功能性水平。人因效能包含两个相互关联的子维度:认知人因效能(技术系统与使用者认知特征之间的匹配程度)和组织人因效能(技术系统与组织制度环境之间的匹配程度)。人因效能的理论框架如图1所示。

图1 人因效能的理论框架

        二、情境说明

        本评价框架以“生成式人工智能与智能体等人工智能技术已介入高校数字学习空间”为既定情境条件,不关注高校数字学习空间中的技术“有无”,而关注人工智能技术介入情境下,高校数字学习空间的人因效能状况。评价对象为甘肃省普通本科高校的在线教学平台为核心载体的数字学习空间,评价视角涵盖教师、学生两个群体。

       三、重点修改说明(对标第二轮函询问卷)

      本轮征询问卷的核心改进与目的:

   (1)专家对“认知人因效能”与“组织人因效能”为二维核心的匹配评价体系较为认可,因此,第三轮专家函询的目的是将构念操作化的过程,请专家对题项进行论证,部分二级指标的题项是根据成熟问卷改编暂不函询,此次函询重点为自行编制的题项。

   (2)删除系数较低的角色适配

     四、填答说明

   (1)请根据您的实际情况填写第一部分“专家基础信息”;

   (2)请根据您的理解,对第二部分是人因效能的一级指标内容;第二部分是题项来源与需函询的题项,请专家对题项的重要性程度进行评分。其中“1”表明重要性程度“不重要”;“3”表明重要性程度“适中”;“5”表明重要性程度“非常重要”,请您在相应的认同程度下标记“√”;

   (3)对题项提出修改建议,补充未考虑到的需增加的指标或其他任何建议,请在增加在每个维度的“具体修改建议”中。

第一部分  咨询专家调查表
1. 您的姓名
2. 您对指标的判断依据
理论分析
实践经验
参考国内外资料
直觉选择
3. 您对内容的熟悉程度
  • 非常不熟悉
  • 不熟悉
  • 一般
  • 熟悉
  • 非常熟悉
高校数字学习空间
A.认知人因效能
B.组织人因效能

第二部分 基于人因工程的高校数字学习空间评价指标专家征询问卷

4. 一级指标专家征询
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
A.认知人因效能:指数字学习空间中,技术系统(含智能体组件)与使用者(教师与学生)认知特征之间的匹配程度。核心评价内容包括:认知负荷管理、可用性感知、AI自我效能感和认知适配性(心智模型匹配与智能体可理解性)。
B.组织人因效能:指数字学习空间中,技术系统与高校组织环境之间的匹配程度。核心评价内容包括:平台功能逻辑与高校教学管理制度及评价体系的契合度(组织兼容性);空间中的业务逻辑是否与使用者的实际工作流相匹配(教学流程适配)以及高校为促进技术有效使用所提供的培训、激励和反馈的制度保障充分性(制度支持)。
5. 拟删除或增加的一级指标或其他修改建议
二级指标专家征询(说明:按一级指标分组,每组包含下属二级指标)
6. 一级指标:A.认知人因效能
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
A1.认知负荷:使用者在数字学习空间中与学习通平台、智能体交互时承受的外在、内在和相关认知负荷是否在可管理与可接受的范围内。
A2a.可用性感知:使用者对高校数字学习空间或所应用的学习通平台的感知有用性(是否提升了效能)和感知易用性(是否直观易学)。
A2b.AI自我效能感:使用者对自身有效使用数字学习空间或所应用学习通平台中AI功能的能力信念。
A3.认知适配性:使用者的心智模型与系统映像的匹配程度,即智能体的推荐/预警/批阅是否可被理解。
A4.感知风险:使用者对生成式人工智能和智能体工具运用教学存在的各类风险感知。
7. 拟删除或增加的一级指标或其他修改建议
8. 一级指标:B.组织人因效能
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
B1.组织兼容性:高校数字学习空间的功能逻辑与高校教学管理制度、课程评价体系和教务数据标准的契合程度,简言之即是否存在“平台要求一套、学校考核另一套”的制度性冲突。
B2.教学流程适配:数字学习空间中的操作流程与使用者实际工作流的衔接——任务链是否完整、是否需要频繁跨模块跳转。
B3.制度支持:高校为促进高校数字学习空间的有效使用而提供的培训、激励和反馈的制度保障——培训是否具有实质效果、激励是否促进深度使用、反馈渠道是否畅通等
9. 拟删除或增加的一级指标或其他修改建议

因果链变量与调节变量专家征询问卷

10. 结果变量
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
C1.应用意愿:使用者计划继续使用、优先使用及推荐使用数字学习空间中智能体的相关智能功能的意向强度。(TAM/UTAUT模型构念)
C2.应用行为:使用者实际使用智能功能的频率、主动探索性。(TAM/UTAUT构念)
C3.空间满意度:对数字学习空间中智能体功能的总体满意度和期望确认程度。(ECM构念)
C4.认知资源释放度:使用者的认知潜力在多大程度上被转化为实际的资源,使其能够将心智投入从“克服技术障碍”转移至“完成核心任务”。
C5.人机协同效能:使用者的角色匹配潜力在多大程度上被转化为实际的、恰当的智能体-人分工,使用者是否在AI建议与自身判断出现分歧时能够保持决策的清晰性和自主性
11. 拟删除或增加的一级指标或其他修改建议
12. 调节变量
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
D1.人工智能素养:使用者对AI工具及智能体的基本认知、技能以及伦理意识。
D2.平台质量:高校数字学习空间中所使用平台的系统质量
13. 拟删除或增加的指标或其他修改建议
具体题项专家征询
14. A3.认知适配性
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
A3.1.1在线教学平台中的AI工具及智能体的操作方式与我的思维习惯相符。
A3.1.2在线教学平台中的AI工具及智能体的操作方式与我的工作方式相符。
A3.1.3在线教学平台中的AI工具及智能体的反馈模式是可以预测的。
A3.1.4在线教学平台中的AI工具及智能体的功能逻辑不会让我感到困惑。
A3.2.1在线教学平台中的AI工具及智能体操作流程与我的典型教学步骤是自然衔接的。
A3.2.2在线教学平台中的AI工具及智能体辅助教学时,教学任务的操作路径是清晰和连续的。
A3.2.3在线教学平台中的AI工具及智能体有效支撑了我整个学期的课程内容、教学任务
A3.2.4在线教学平台中的AI工具及智能体有效支撑了我的教学全过程,形成了教学闭环。
15. 拟删除或增加的题项或其他修改建议
16. B1.组织兼容性
  • 1
  • 2
  • 3
  • 4
  • 5
B1.1.1在线教学平台的AI工具及智能体的功能设计与我校的课程管理制度兼容
B1.1.2在线教学平台的AI工具及智能体的功能设计与我校的教学管理制度兼容
B1.1.3在线教学平台的AI工具及智能体的功能设计与我校的课程评价制度兼容
B1.1.4在线教学平台的AI工具及智能体的功能设计与我所在学校制度规定之间存在矛盾。【反向题】
B1.1.5在线教学平台的AI工具及智能体形成的教学数据能有效服务于教师教学改进。
B1.1.6在线教学平台的AI工具及智能体形成的教学数据能有效服务于学生学业评价。
17. 拟删除或增加的题项或其他修改建议
18. B2.组织流程支持
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
B2.1.1学校制定了明确的制度或使用指南,帮助教师将在线教学平台中AI工具及智能体融入教学
B2.1.2学校制定了差异化的在线教学平台中AI工具及智能体的使用指南
B2.1.3学校会及时调整在线教学平台中AI工具及智能体的制度或使用指南
B2.1.4学校会检查在线教学平台中AI工具及智能体在教学中的应用情况
B2.1.5学校对在线教学平台的使用安排与学期教学计划的时间节点是同步的且使用要求相对稳定
19. 拟删除或增加的题项或其他修改建议
20. B3.制度支持
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
B3.1.1学校或学院提供的培训对我的AI辅助教育教学工作起到了实质性的帮助。
B3.1.2学校对在线教学平台中的AI工具及智能体辅助教学提供了足够的技术支持。
B3.1.3学校对在线教学平台中的AI工具及智能体辅助教学提供了足够的方法支持。
B3.1.4学校对在线教学平台中的AI工具及智能体辅助教学提供了足够的经费与支持。
B3.1.5学校的考核或评价体系促进了我对在线教学平台中的AI工具及智能体的深度应用。
21. 拟删除或增加的题项或其他修改建议
22. C3.满意度
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
C3.1.1我对在线教学平台的AI工具与智能体感到满意
C3.1.2使用在线教学平台的AI工具及智能体功能的体验达到了我的预期
C3.1.3如果有机会我会向周边的同事介绍并推荐在线教学平台的AI工具及智能体
C3.1.4我愿意在未来的教学中继续使用在线教学平台的智能功能
23. 拟删除或增加的题项或其他修改建议
24. C4.认知资源释放度
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
C4.1.1在线教学平台中的AI工具及智能体能够帮我将更多精力投入到真正需要深度思考的事情上。
C4.1.2在线教学平台中的AI工具及智能体能够让我投入到更有价值教学决策上。
C4.1.3在线教学平台中的AI工具及智能体能够让我从低阶工作转向高阶工作。
C4.1.4在线教学平台中的AI工具及智能体让我不必花费大量精力去克服技术障碍。
25. 拟删除或增加的题项或其他修改建议
26. C5.人机协同效能
  • 非常不重要
  • 不重要
  • 一般
  • 重要
  • 非常重要
C5.1.1当在线教学平台中的AI工具与智能体的结果与我的判断一致时,会让我自己的决策更加确信。
C5.1.2当在线教学平台中的AI工具与智能体的结果与我的判断不一致,我知道自己具有最终决定权。
C5.1.3在实际应用在线教学平台中的AI工具及智能体中,我认为AI的定位是辅助教学而非替代教学。
C5.1.4我认为在线教学中人与AI共同协作,整体教学效果比我独立完成更好
27. 拟删除或增加的题项或其他修改建议
更多问卷 复制此问卷