JDB电子发展

(基于Stevens and Levi 2005年的《大纲导论:一种节省评分时间、传达有效反馈和促进学生学习的评估工具》;《高等JDB电子学术课程评估》(Allen 2004)《大学校园中以学习者为中心的评估:从教学转向学习》(Huba and Freed, 2000)

一个JDB电子的格式

  • 任务描述
  • 规模
  • 属性
  • 属性说明

Rubric的组成部分

一个规则包括四个组成部分:

第1部分:任务描述

  • 包括学生的某种“表演”
  • 任务可以采取具体分配的形式;例如,一篇论文,一张海报,一个报告
  • 任务可以采取整体行为的形式;例如,参与,使用适当的实验室协议,在课堂上的行为期望

第二部分:规模

  • 描述任何给定任务执行得好坏
  • 可以使用的积极术语:“精通”,“部分精通”,“进步”,“新兴”
  • 非判断性或非竞争性语言:“高级”、“中级”、“初级”
  • 常用标签:
    • 成熟的,有能力的,部分有能力的,还没有能力的
    • 模范的,熟练的,边缘的,不可接受的
    • 高级、中级、高级、中级、新手
    • 杰出、熟练、中级、新手
    • 有成就,一般,发展。开始
  • 通常使用3-5个级别
    • 等级越多,就越难以区分,也就越难以准确地说明为什么一个学生的作业会落入这个等级
    • 但是,更具体的等级使学生的任务更清晰,也减少了教授提供详细评分笔记所需的时间

第3部分:尺寸

  • 简单而完整地列出任务的各个部分
  • 应该真正代表学生在成功的学术工作中必须结合的组成技能类型吗
  • 将任务分解成不同的维度,可以形成一种任务分析,清晰地识别任务的组成部分

例子:

任务:每个学生做一个5分钟的演讲,介绍一个社区在过去30年里的变化。学生可以以他或她希望的任何方式集中陈述,但需要有某种形式的论文,而不仅仅是按时间顺序的阐述。演示应该包括适当的照片、地图、图表和其他视觉辅助工具。

优秀的

主管

需要工作

知识/理解20%

思考/调查30%

沟通20%

使用视觉辅助20%

表达能力10%

第4部分:尺寸的描述

  • JDB电子至少应该包含该维度的描述或最高水平的性能
  • 评分指南标准=一个标准只包含对最高水平表现的描述

示例评分指南:(包括对最高表现水平的维度的描述)

任务:每个学生做一个5分钟的演讲,介绍一个社区在过去30年里的变化。学生可以以他或她希望的任何方式集中陈述,但需要有某种形式的论文,而不仅仅是按时间顺序的阐述。演示应该包括适当的照片、地图、图表和其他视觉辅助工具。

标准

评论

知识/理解20%

通过使用相关和准确的细节,展示了对历史的深刻理解。JDB电子研究是彻底的,超越了课堂上或指定的文本所呈现的。

思考/调查30%

报告以论文为中心,显示出对历史或社会问题的高度认识和高水平的概念能力。

沟通20%

演讲富有想象力,能有效地向听众传达思想。演讲者能有效地回应听众的反应和问题。

使用视觉辅助20%

演示包括适当和容易理解的视觉辅助工具,演示者在演示的适当时刻引用和解释。

表达能力10%

演讲者说话清晰响亮,让听众听得见,使用眼神交流、活泼的语调、手势和肢体语言来吸引听众。

示例三级标准:(包括描述所有级别性能的维度)

任务:每个学生做一个5分钟的演讲,介绍一个社区在过去30年里的变化。学生可以以他或她希望的任何方式集中陈述,但需要有某种形式的论文,而不仅仅是按时间顺序的阐述。演示应该包括适当的照片、地图、图表和其他视觉辅助工具。

优秀的

主管

需要工作

知识/理解20%

通过使用相关和准确的细节,展示了对历史的深刻理解。JDB电子研究是彻底的,超越了课堂上或指定的文本所呈现的。

演示使用的知识通常是准确的,只有轻微的不准确,并且通常与学生的论文相关。JDB电子研究是足够的,但不能超出课堂上或指定文本中所展示的内容。

报告几乎没有使用相关或准确的信息,甚至没有使用课堂上或指定文本中展示的信息。很少或根本没有明显的JDB电子研究。

思考/调查30%

该演讲以一篇论文为中心,表现出对史学或sodaI问题的高度认识和高水平的概念能力。

报告显示了一个分析结构和一个中心论点,但分析并不总是完全发展或与论文联系在一起。

报告没有分析结构,也没有中心论点。

沟通20%

演讲富有想象力,能有效地向听众传达思想。演讲者能有效地回应听众的反应和问题。

所使用的演示技巧在传达主要思想方面是有效的,但它们有点缺乏想象力。观众提出的一些问题仍未得到回答。

演讲不能吸引观众的兴趣,或者在传达的内容上令人困惑。

使用视觉辅助工具20%

演示包括适当的和容易理解的视觉辅助工具,演讲者在演示的适当时刻引用和解释。

演示包括适当的视觉辅助工具,但这些工具太少,格式难以使用或理解,或者演示者在演示中没有提及或解释它们。

演示文稿不包括视觉辅助工具,或包括视觉辅助工具不合适、太小或混乱而无法理解。演讲者在演讲中没有提到他们。

表达能力10%

演讲者说话的声音要响亮,要让听众听得见,要用眼神交流、活泼的语调、手势和肢体语言来吸引听众。

演讲者说话的声音大到足以让人听到,但有时往往会语无伦次,或者无法持续有效地使用眼神交流、手势和肢体语言。

演讲者的声音听不见,或者说话不清楚,以至于无法被理解。不要试图通过眼神交流、手势或肢体语言来吸引观众。

构建规则的四个阶段

反映

在这个阶段,我们花时间思考我们想从学生那里得到什么,我们为什么要布置这个作业,上次布置作业时发生了什么,以及我们的期望是什么。

  1. 你为什么要做这个任务?
  2. 你以前有没有布置过这样的作业或类似的作业?
  3. 这个作业和你教的其他内容有什么关系?
  4. 学生需要具备或发展哪些技能才能成功完成这项任务?
  5. 具体的任务是什么?
  6. 学生可以在作业中提供什么证据来证明他们已经完成了你在布置作业时希望他们完成的任务?
  7. 你对学生在这次作业中的总体表现的最高期望是什么?
  8. 除了根本不交作业,你能想到的最糟糕的作业完成情况是什么?

清单

在这个阶段,我们关注的是作业的具体细节,以及我们希望在完成的作业中看到哪些具体的学习目标。

  • 以上(d)-(e)-(f)关于所需技能、任务的确切性质和学习证据类型的答案通常是生成此列表的良好起点。一旦列出了学习目标,你就可以对每个学习目标所期望的最高表现水平进行描述。这些稍后将有助于完成JDB电子上的“尺寸描述”。

分组和标签

在这个阶段,我们组织我们在阶段1和阶段2中反思的结果,将类似的期望分组在一起,这可能会成为JDB电子维度。从第二阶段完成的最高绩效期望开始,并将相关的项目组合在一起。一旦将类似技能的表现描述归为一组,请阅读它们,并开始找出整个组的共同点并将其标记出来。这些标签最终将成为JDB电子上的尺寸——保持它们的清晰和中性是很重要的;例如,“组织”、“分析”或“引用”。

应用程序

在这个阶段,我们利用矩阵/网格格式,将第三阶段的维度和描述应用到JDB电子的最终形式。

一旦你确定了你在评估什么;例如,批判性思维,以下是创建整体规则的步骤:

  • 确定评估对象的特征;例如,适当地使用证据,识别逻辑谬误
  • 用这些特征描述你能期望的最好的作品——这描述了顶级类别
  • 使用这些特征描述最差可接受的产品——这描述了最低可接受的类别
  • 描述一个不可接受的产品-这描述了最低的类别
  • 开发中级产品的描述,并将其分配到中级类别。你可能会决定制定一个包含五个级别的量表;例如:不可接受、边缘、可接受、胜任、优秀或三个等级;例如,新手,称职的,模范的,或任何其他有意义的集合。
  • 请没有参与准则开发的同事将其应用于某些产品或行为,并根据需要进行修改以消除歧义。

例子

评估学生论文的整体标准(评估高等JDB电子学术课程,Allen 2004)

不足

这篇文章至少有一个严重的缺点。它可能是不集中的、不发达的或杂乱无章的。语言使用方面的问题严重影响了读者理解所传达内容的能力。

发展能力

这篇文章可能有些不集中,欠发达,或漫无边际,但它确实有一些连贯性。语言使用方面的问题偶尔会影响读者理解所传达内容的能力。

可接受的

这篇文章通常是集中的,包含一些思想的发展,但讨论可能是简单的或重复的。这种语言缺乏句法复杂性,可能偶尔会有语法错误,但读者能够理解所传达的内容。

复杂的

这篇文章重点突出,组织严密,显示出发展的深度。语言严谨,语法多样,思想深刻地传达给读者。

例子

开发有用的标准:提出问题和采取行动(以学生为中心的大学校园评估:将重点从教转移到学,Huba和Freed 2000)

问题

行动

什么标准或基本要素必须出现在JDB电子研究中。以确保它的高质量?

这些应该是区分好工作和差工作的标准

将这些作为行包含在您的JDB电子中

我希望为学生们说明多少个成就等级?

  • 级别通常应该描述一个范围
    从优秀到不能接受的成就
    • 例子:模范的,傲慢的,边缘的,不可接受的
    • 例如:老练的,有能力的,部分有能力的,还没有能力的
    • 例子:杰出的、熟练的、中级的、新手的例子:完成的、一般的、发展中的、刚开始的

将这些列包含在您的JDB电子中并标记它们

对于每一个标准或质量的基本要素,如何清晰地描述每一个成就水平的表现?

  • 避免使用未定义的术语(例如,重要的“,viar,显示出相当大的思想”)。
  • 避免使用带有价值意味的术语(例如,优秀的“,差的”)
  • 使用客观的描述,帮助学生在需要的时候变得更好

在JDB电子的适当单元格中包含描述

在每个质量水平上执行的结果是什么?

在JDB电子的注释中添加对结果的描述

我将在JDB电子中使用什么评分方案?

用适合你的方式把这个添加到JDB电子中

当我使用JDB电子时,哪些方面工作得很好,哪些方面需要改进?

  • 这个JDB电子能帮助你区分学生样本的质量水平吗?
  • 这些标准是否合适?
  • 游戏中所指定的成就等级是过多还是过少?
  • 是否有不完整或不清楚的描述?

相应地修改JDB电子

为特定作业制定标准时的附加问题/行动

学生必须掌握哪些内容才能很好地完成任务?

制定反映知识和/或内容使用的标准,并将其添加到JDB电子中

任务中是否有特定于评估环境的重要方面?

确定在此上下文中所必需的技能和能力,并在JDB电子中添加相关标准

在任务中,实现结果的过程和结果本身一样重要吗?

包括并描述反映过程重要方面的标准

额外的资源

美国高校协会价值项目

2009年秋季完成的本科JDB电子学习有效评估项目的主要成果是为AAC&U基本学习成果(如口头交流、批判性思维)中的15项制定了JDB夺宝游戏级的标准。所有《价值》准则均以PDF格式在《价值》网站下载;与IUPUI PULs关系最密切的项目可在本网站的IUPUI PULs评估部分直接链接。此外,2009年冬季出版的AAC&U同行评议期刊完全聚焦于VALUE项目。虽然整本期刊必须购买(IUPUI是会员,所以可以降低费用),但有几篇文章是面向普通读者的。此外,该项目于2010年1月出版了《评估成果和改进成果:使用标准的技巧和工具》(Terrel L. Rhodes主编),该书可按会员折扣价在网上订购。

查看资源

uipui大学图书馆

关于信息素养的一般信息,以及每年学习的IUPUI能力标准。

查看资源

西佛罗里达大学,大学教学与评估中心

链接到几个网站关于JDB电子开发。

查看资源

夏威夷大学马诺阿分校,评估中心如何创建和使用规则

有用的提示和如何决定是否以及如何使用规则,如何开发它们,如何在课堂上有效地使用它们,以及如何定位和校准小组评级的可靠性。

查看资源

圣约翰大学,高等JDB电子评估在线资源

到评估和投资组合领域中各种组织的链接的扩展列表,以及词汇表、解释和论文。

查看资源

北中央学院(伊利诺伊州),真实评估工具箱

由Jon Mueller教授维护,关于Rubrics的工具箱部分包括对Rubrics的种类和用途的有益概述以及创建它们的建议。

查看资源

费城社区学院,《观点:发展与大学教学、学习与评估期刊》,《构建更好的捕鼠器:JDB电子辩论》,Madeline Marcotte

期刊文章提供了一个扩展的介绍-哲学和实践-在高等JDB电子的规则。

查看资源

加州州立大学弗雷斯诺分校,JDB夺宝游戏JDB电子研究,评估和规划,“使用评分标准”

提供了一个有用的总结,说明了什么是标准,如何制定标准,以及在评分和项目评估中使用标准的建议。

查看资源

“为给定的任务创建一个规则”

虽然这些信息位于webquest网站上,但可以很容易地推广到不同JDB电子水平的其他类型的作业中。

查看资源