研究发现为了更好的多项选择测试避免棘手的问题
多项选择测试和测验是一种有效的工具:(a)评估学生对事实和概念的掌握程度; (b)帮助学生学习和保留事实和概念。虽然一些教育工作者可能认为这是一个棘手的问题,但正确的答案似乎是:(c)上述所有内容,表明华盛顿大学圣路易斯的新研究。
“尽管人们经常将多项选择测试视为评估工具,但它们也可用于促进学习,”艺术与科学的认知心理学家安德鲁巴特勒说,他研究学习和回忆背后的大脑过程。“检索信息的行为加强了对这些信息的记忆,从而更好地保留了长期信息,并改变了信息的表现形式,从而产生了更深刻的理解。”
巴特勒的研究发表于9月出版的“记忆与认知应用研究期刊”,为构建多项选择问题提供了直接的技巧,这些问题在评估当前知识和加强持续学习方面都是有效的。
在主要调查结果中,教育工作者不应该在可能的答案列表中包括技巧问题或提供“以上所有”或“上述任何一个”选项。
巴特勒指出,研究多项选择题的格式非常重要,因为这些测试在全世界都得到了广泛的应用,特别是在美国,它们起源于早期测量智力的一部分。
一开始由于需要有效衡量第一次世界大战士兵的特征和蓬勃发展的学生入学率,多项选择测试现在影响了大学安置,工作场所招聘,职业发展甚至在线约会等领域的重要生活决策。
作为艺术与科学系的教育和心理与脑科学系的副教授,巴特勒开展的研究探讨了记忆的可塑性 - 记忆随着时间推移而改变或保持稳定的认知过程和机制。
他说,采取任何形式的测试都有可能改变我们对某个主题的理解,因为回忆信息的过程需要从相关记忆中重新构建重要的细节。
巴特勒说,虽然多项选择测试,特别是重复测试,有可能加强我们的召回,但格式错误的测试问题会产生相反的效果。他补充说,这样一个形成不良的问题可能会使我们对正确答案的记忆变得混乱,并加强对不准确的“分心者”答案的回忆。
巴特勒的研究评论证实,正确的问题格式和表达对于创建有效的多项选择测试至关重要。它还表明,许多广泛使用的多项选择测试仍然包含许多不符合基于研究的最佳实践的问题。
“幸运的是,创建有效评估理解的多项选择测试的最佳实践与支持学生学习的最佳实践大致相同,”巴特勒说。
巴特勒的研究解释了五项以研究为基础的建议背后的认知科学,以便制定更有效的多项选择题:
用简单的格式创建问题。随着教育工作者寻找测试更深入理解和更高层次学习的方法,复杂的问答形式变得越来越流行。示例包括提供诸如“A和B,但不是C”的答案,或者允许重复的答案,直到做出正确的选择。这样的格式可能对评估有害,因为鼓励进行猜测并且处理可能更多地关注于解析问题上下文而不是回忆正确的信息。一些复杂的格式,如置信答案,可能会带来好处,但还需要更多的研究。
创建涉及“现实世界”认知过程的问题。要真正测试能力,必须对问题进行组织,以便正确的答案需要使用解决现实世界中类似问题所必需的特定认知过程。需要更高层次思考的问题将增强学习并改善未来的表现。例如,一个多项选择问题可能需要一个考生来对比两个概念(以下哪一种是老鹰与老鹰的不同之处?)或者分析一组条件来做出决定(考虑到患者的症状,以下哪种诊断最有可能?)。
避免使用“以上都不是”和“以上所有”作为答案选择。当“不在上面”是正确的时,学生可能不需要检索正确的信息来回答问题,并且他们暴露了许多不正确的信息。使用“以上所有”可以让学生接触到大量正确的信息,但答案可能更为明显,从而使学生厌倦了回忆处理带来的潜在学习。这两种问题类型都可能对准确评估有害,而且对学习的潜在好处很小。
使用三个似是而非的响应选项。提供的每个答案选项都会增加问题难度。正确回答更难的问题的学生可以从挑战中学到更多,但提供太多合理答案的问题会对学习和评估产生负面影响。使用Goldilocks原则:不是太多,也不是太少。
使测试具有挑战性,但不是太困难。创建足够强大的测试来揭示学生对材料的了解程度,但很容易让大多数人(80%)获得及格分数。正确检索信息和回答问题可以加强学生的学习; 未能正确回答可能会加强对错误信息的记忆。挑战学生,但让他们成功。
最后,由于多项选择问题会让学生接触到大量合理的虚假信息,因此学生在评分完成后查看答案非常重要。反馈使测试者能够纠正错误并避免内化不正确的信息。它还加强了围绕正确答案的学习,这些答案在测试时是低可信度的猜测。
“从这些建议中得出的结论是,最有效的多项选择项目可以让学生以有效学习的方式进行思考,并能够有效衡量他们是否获得了所需的技能和知识,”巴特勒说。“为了最大限度地提高效率和效率,最好还是简单地回答多项选择项目的过程 - 增加复杂性通常会对学习和评估产生负面影响。”