第二,选择问题类型。根据评估目的,问卷调查可以单独或者综合使用五种问题类型。它们分别是:(1)开放型问题:不对答案作限定,提供充足的空白篇幅供填写;(2)复选型问题:提供一系列项目,要求参与者根据适合自己的情况选择多个选项;(3)是非型问题:提供诸如“是”或“否”一类的答案,要求参与者根据自己的情况对问题作出同意或者不同意的判断;(4)多项选择题:给出若干个选择项,要求参与者挑选出最合适的选项;(5)等级评定题:要求学员对一系列项目进行评定。应根据评估目的,单独或者综合选择有助于实现评估目标的问题类型。同时,还应考虑课程中的数据分析和所收集数据的多样性。
第三,拟定调查问题。根据课程中的问题类型和所需信息,拟定和编制各种调查问题。问题表述要简单、直观,避免含糊不清、主观误导。如涉及多个主题,应把问题分成多个部分。调查问卷的问题应充分考虑参与者的文化水平、阅读理解能力等,避免出现不熟悉的术语或表达方式。同时,注意编制数目应适当且具备多样性,以确保问卷的信度和效度。
第四,对问题进行测试。编制问卷问题后,应选择样本或者选择与参与者层次相近的人员对这些问题进行预测试。根据样本的反馈、评价和建议,改进和修正问卷,以确保问卷的有效性、准确性。在这个环节中,首先,要保证答卷匿名,以确保学员能敞开心扉,提出有用的和建设性的意见。其次,应安排一位中立人士收集表格,提高客观性。最后,还应注意向被试者解释反馈的目的及其用法,并留出充足时间完成表格。
第五,编制数据汇总表。编制一份数据汇总表,对数据进行分析,并以清晰易懂的方式阐述这些数据。
第六,编制最终问卷调查。将所有问题编制一份专业性的问卷调查,并配以适当的说明。
总之,反馈问卷调查在人力资源开发课程评估中具有不可或缺的地位,它们可以提供一种非常方便的数据收集方法。但是,就理想状态而言,反馈问卷调查只是总体评估过程的一部分。
表8-2 培训反馈问卷示例1
表8-3 培训反馈问卷示例2
表8-4 培训反馈问卷示例3
表8-5 培训反馈问卷示例4
2.测试
利用测试对接受培训前后的学习效果进行衡量,是培训评估中常用的方法之一。测试分数的提高可以表明培训项目对学员的技能、知识或态度所带来的改变。编制测试问卷的原则与设计和编制问卷调查和态度调查表格的原则类似。
(1)根据测试媒介可划分为书面测试、模拟测试、计算机辅助测试。书面测试包括客观测试和主观测试。客观测试是由一系列由测验人员事先设计好的客观性测项组成的测试。客观测试的优点在于答案简洁明了、可信性和有效性高;主试和被试回答和填写方便,不费时间和精力,操作和执行易行,通过客观性测试得到的资料比较规范,易于定量统计分析。缺点是,答案相对客观、刻板,被试易受主试限制,不利于充分发挥自己主观能动性,弹性较小。主观测试是由一系列主观性测项组成,这些测项没有为被试和主试提供具体答案,而是由回答者自动填答。主观性测项的问题答案一般很难给予准确预测,因此,测验设计人员也很难将其规范化、客观化。主观测试的优点在于,被试和主试可以自由地按照自己的方式发表意见,不受限制,弹性较大。其缺点在于测验的结果较难统计,难以给出客观的评分结果。
模拟测试的优点首先在于具有可重复性。可以用与真实工作环境几乎相同的方式,对一项任务或一项任务的某个部分进行重复。其次,可节省成本效益,保障安全。例如,评估飞行驾驶员的培训成果,只需借助飞机模拟器来模拟飞行条件即可,不必花大量金钱在真的飞机上进行。
常用的模拟技术包括以下几类:
第一,电子或机械模拟。这种技术采用组合性电子和机械设备对真实情景进行模拟。