名称: 评分量规设计与验证 描述: 开发清晰的评分量规，包含明确的评估标准、表现等级和锚定示例，确保评分者间信度 允许工具: 读取、搜索、写入、编辑、全局
评分量规设计与验证
开发清晰的评分量规，包含明确的评估标准、表现等级和锚定示例，确保评分者间信度。
概述
本技能支持教育评估中评分量规的开发和验证。它涵盖评估标准定义、表现等级阐述、锚定示例选择以及信度验证，以确保对学生作业进行一致且公平的评估。
能力
标准制定
- 识别关键表现维度
- 定义可观察的指标
- 适当分配标准权重
- 确保全面性
- 避免标准间重叠
表现等级定义
- 阐述不同等级
- 编写清晰的描述语
- 确保渐进式区分
- 定义得分点
- 创建等级标签
锚定示例
- 选择代表性样本
- 记录每个等级的范例
- 注释评分理由
- 创建培训材料
- 与评分者共同验证
信度验证
- 进行评分者间信度研究
- 计算一致性统计量
- 识别评分不一致之处
- 为提高清晰度而修订
- 培训并校准评分者
使用指南
量规开发流程
- 明确目的和用途
- 确定评估标准
- 描述表现等级
- 起草量规描述语
- 选择并注释锚定示例
- 与多位评分者共同验证
- 根据反馈进行修订
描述语撰写
- 使用具体、可观察的语言
- 避免模糊的修饰词
- 确保结构平行
- 包含关键属性
- 清晰区分相邻等级
验证流程
- 选择多样化的评分者
- 提供校准培训
- 对共同样本进行评分
- 计算信度统计量
- 修订不清晰的标准
整合点
相关流程
- 评分量规开发与验证
- 总结性评估开发
- 形成性评估设计
协作技能
- 评估项目开发
- 学习目标撰写
- 质量保证审查
参考文献
- Stevens和Levi的量规设计
- Brookhart的量规指南
- 评分者间信度方法
- 表现评估标准