文档介绍：第十一章修改教学材料
评价需求
确定目标
进行教学分析
分析学习者和环境
写绩效目标
修改教学
开发评测量表
开发教学策略
设计并实施教学的形成性评价
设计并实施总结性评价
开发和选择教学材料
目标
能说明整理形成性评价数据有几种方法
会整理从形成性评价研究中获得的数据
能够根据整理好的形成性评价数据,找出教学材料和教师引导教学所存在的不足之处
根据教学材料的形成性评价数据,能够发现教学材料中存在的问题,并提出修改建议
背景
几乎所有的教学设计模型都非常强调形成性评价的概念,即为发现问题、修改教学材料而收集数据。这些模型经常会指出在数据收集整理后,你需要“适当地”修改教学材料。尽管很多研究都谈到修订教学材料的好处,但是很少有理论提及如何为修改材料而收集数据。在我们的形成性评价方法中,我们是根据我们的教学策略来解释数据,然后依据数据以及对学习过程的理解对教学材料做出改动。
对于教学材料,一般有两类修改:一类是对内容或材料实体进行修改,使其作为一个学习工具更加准确、更加有效;第二类修改是修改使用材料的过程。
在这一章,我们将指出如何整理从各种形成性评价中获得的数据,如何使用它们确定教学材料中应该修改的部分。你会发现在教学设计过程的这一步并不需要做复杂的统计,对数据进行简单的描述性总结就够了。在形成性评价和修改阶段一般都不需要使用精心设计的统计试验。
概念
对形成性评价收集的数据有多种整理方法,这些方法有助于发现学习者学习的难点,确定教材需要修改的地方。这里介绍的方法只是一些建议,在你具体处理你的数据的时候,你还可以采用其他能够帮助你从数据中获取更多认识的方法和技术。我们先从一对一形成性评价所收集的数据开始,看看如何处理这些数据,然后再考虑小组评价和实地试验阶段。
分析一对一试验数据
设计师在一对一形成性评价中所获得的数据很少,因为只有从三、五个学习者那里获得的信息。由于选择学习者时有意识地考虑了他们之间的差异,所以学习者所提供的信息极有可能存在很大的分化,不象混在一组时的情况。换句话来说,设计师必须要注意学习者回答中的共性和不同,确定对教学的最佳修改。
设计师在一对一形成性评价阶段可以获得五类基本信息:学习者特点和入门技能,对教学的直接反应,学习时间,后测成绩。如果使用了态度问卷,还有对问卷的回答。
做数据分析的第一步是先描述参加一对一评价的学习者,以及他们在入门技能测试中的成绩。然后,设计师要把学习者对教学的所有评论和建议整理在一起。具体做法可以这样,取一本教学材料,在其上用不同的颜色笔标记出不同学习者所提出的问题;还可以在上面写上来自领域专家的意见,以及在一对一评价期间所采用的教学方法。
下一组要总结的数据与后测有关,首先获得每道题的得分,然后将每个目标相关题目得分求和得到每个目标的得分,最后得到总分。一般会做一张表,上面记录了每个学习者的前测成绩、后测成绩和学习所用时间。另外,还要分析学习者在后测中每个目标上的表现,并给予评论。如果在这个阶段的教学中使用了态度问卷,那么对态度问卷数据可以采用类似的办法处理。
在收集了上述所有信息之后,设计师就可以开始准备修改教学了。当然,在一对一评价完成之前,已经修改了一些明显错误,现在要做的是有些难度的修改,可以从学习者表现最差的地方,或者是评论最多的地方开始。
首先,根据学习者成绩看看评分标准或者考试题目有没有问题。如果有问题,就要做相应地修改,使之与教学的意图和教学目标一致。如果题目没有问题,学习者表现又很差,那么就必须修改教学了。你可以基于三类信息修改教学:学习者的建议、学习者的表现和你自己对教学的看法。学习者经常能给出很好的建议。另外,设计师也要仔细分析学习者所产生的错误,确定出错类型,以便做针对性的修改。你也要相信自己对于如何修改教学才能最有效的判断,因为你已经采用系统化设计过程,仔细说明了学习者要学什么,并给出了例题,还为学习者提供了练习每种技能的机会,学习者在练习过程中也得到了反馈,所有的基本成分都在那里了!这个阶段最常做的修改就是澄清概念,增删练习。这三类信息通常给出了应该采取的最适当的修改步骤。
但是有时候你可能真的不知道该怎么修改教学,这时候不妨就不作修改,看看在小组评价时这部分材料的工作情况如何;或者由设计师给出几种解决办法,在小组评价时逐一尝试。
分析小组评价和实地试验数据
小组形成性评价提供给设计师的是与一对一评价有些不同的数据汇总环境, 从8-20个学习者那里收集的数据要比单个人的数据更有意思,即这些数据可以反映出这个具有代表性的学习者小组所遇到的问题以及他们的回应。在此阶段可以获得的数据一般有:前测、后测中每道题目的得分、对态度问卷的回答、学习时间和考试时间,以及直接写在材料上的评论。
所有评测