分析小组评价和实地试验数据 小组形成性评价提供给设计师的是与一对一评价有些不同的数据汇总环境,从820个 学习者那里收集的数据要比单个人的数据更有意思,即这些数据可以反映出这个具有代表性 的学习者小组所遇到的问题以及他们的回应。在此阶段可以获得的数据一般有:前测、后测 中每道题目的得分、对态度问卷的回答、学习时间和考试时间,以及直接写在材料上的评论。 所有评测的基本分析单元为考试题,对每道题的表现都要判断对与错,如果一道题由几 部分组成,则每一部分都要判分,并分别报告,以免丢失信息。之所以需要每道题的信息 有三个原因 1.题目信息可以用来确定题目本身是否有问题,以及此题是否有效测量了对应目标中 所描述的行为。在下一节我们将介绍有关的方法。 2.单个题目数据还可以用来确定学习者在教学中遇到的困难。例如,对于某道题目来 说,知道有一半的人做错了固然重要,但是更为重要的是发现大多数人都选了多项 选择题中的同一个错误选项,或者在做求解题目时都犯了同一类型的推理错误 3.单个题目数据可以结合起来说明学习者在某个目标上的表现,以及最终在整个考试 中的表现。有时候,判断一个目标通过与否是根据一组题目做对的百分率。根据与 目标相关的每道题目的信息,不仅可以算出每个目标完成的正确率,还可以看出已 掌握目标的学习者的个数和比例。 在收集了题目数据之后,可以将它们组织成题目-目标表进行分析,还可以在此基础上 构造更加复杂的数据表 小组的题目-目标表现分析第一个需要构造的数据总结表是题目-目标表。表11.1为一 个题目-目标表实例,这是一个有十道题的考试,评测了四个教学目标,对20个学习者进行 小组形成性评价。 表11.1题目-目标分析表 目标 题目 题号 「学生2 ⅹ XxIxIxIxIxⅹxx8「1004100 生4 生20 2|50 做对学生数# i8191517176|181810|9 做对学生百分率%90957585853090905045 目标掌握百分率%90 85 表中的统计数据是根据分析,剔除了第6题和第8题后所做的求和3 分析小组评价和实地试验数据 小组形成性评价提供给设计师的是与一对一评价有些不同的数据汇总环境， 从 8-20 个 学习者那里收集的数据要比单个人的数据更有意思，即这些数据可以反映出这个具有代表性 的学习者小组所遇到的问题以及他们的回应。在此阶段可以获得的数据一般有：前测、后测 中每道题目的得分、对态度问卷的回答、学习时间和考试时间，以及直接写在材料上的评论。 所有评测的基本分析单元为考试题，对每道题的表现都要判断对与错，如果一道题由几 部分组成，则每一部分都要判分，并分别报告，以免丢失信息。之所以需要每道题的信息， 有三个原因： 1. 题目信息可以用来确定题目本身是否有问题，以及此题是否有效测量了对应目标中 所描述的行为。在下一节我们将介绍有关的方法。 2. 单个题目数据还可以用来确定学习者在教学中遇到的困难。例如，对于某道题目来 说，知道有一半的人做错了固然重要，但是更为重要的是发现大多数人都选了多项 选择题中的同一个错误选项，或者在做求解题目时都犯了同一类型的推理错误。 3. 单个题目数据可以结合起来说明学习者在某个目标上的表现，以及最终在整个考试 中的表现。有时候，判断一个目标通过与否是根据一组题目做对的百分率。根据与 目标相关的每道题目的信息，不仅可以算出每个目标完成的正确率，还可以看出已 掌握目标的学习者的个数和比例。 在收集了题目数据之后，可以将它们组织成题目-目标表进行分析，还可以在此基础上 构造更加复杂的数据表。 小组的题目-目标表现分析 第一个需要构造的数据总结表是题目-目标表。表 11.1 为一 个题目-目标表实例，这是一个有十道题的考试，评测了四个教学目标，对 20 个学习者进行 小组形成性评价。 表 11.1 题目-目标分析表 目标 1 2 3 4 题目 目标 题号 1 2 3 4 5 6 7 8 9 10 # % # % 学生 1 ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ 8 100 4 100 学生 2 ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ 8 100 4 100 学生 3 ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ 7 88 3 75 学生 4 ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ 4 50 0 0 学生 20 ⅹ ⅹ ⅹ ⅹ ⅹ ⅹ 4 50 2 50 做对学生数# 18 19 15 17 17 6 18 18 10 9 做对学生百分率% 90 95 75 85 85 30 90 90 50 45 目标掌握百分率% 90 75 85 45 表中的统计数据是根据分析，剔除了第 6 题和第 8 题后所做的求和