高中化学课件：上海市基于标准的命题框架.ppt

评价结果的处理不仅仅是一个技术活。评价结果的处理倒逼评价系统框架的设计。 * * 选择评委小组成员 对评委小组成员进行标准设定培训 实施第一轮标准设定 实施第二轮标准设定 实施第三轮标准设定 实施第四轮标准设定 提供不同区域的学生在本次测试中的实际测试数据给专家参考 选择评委小组成员 对评委小组成员进行标准设定培训 实施第一轮标准设定 实施第二轮标准设定 实施第三轮标准设定 实施第四轮标准设定 提供专家评断的初步结果给专家参考 统计相关结果，计算出最后优秀、良好、合格的划界分数线。 关键指标和评价参考点 学业 水平 测试 指标 问卷/访谈 学业 数据 分析 指标 数据 分析 数据挖掘 学业质量报告 非学业 因素的 水平 学业 水平 学校改进行动 学业质量评价基本模型 闵行区义务教育教学质量综合评价机制 谢 谢！ * * * * * * * * * * * * * * * * * * * * * * * * 基于数据反思命题改进 （一）难度的预测 全卷共61题，实测难度超过预估的19题，实测难度低于预估的39题，实测难度等于预估的3题。其中，差值小于或等于0.05的共32题，超过50%，差值小于或等于0.10的共47题，占比78%，差值超过0.20的5题，差值最大的是第21小题，为0.47，预估难度为0.9，实测难度为0.43。 （二）考试结果分析 原因分析： 1. 写作分值增加 2. A卷中超过60%的题目试测数据缺乏 3. 测试框架本身可能存在问题：主观题的比例达到44% 4. 语法考察（含连词成句）题型学生不熟悉 全市平均分为77.6分（2014年为76.3分），标准差为22.3分（2014年为21.5分）。 A、B、C、D各水平的比例为64.6%、16.2%、11.5%和7.7%。其中D水平的学生未达到《课程标准》规定的基本要求。 从分数段的分布来看，60分以下学生所占比例为18.5%（2014年为17.2%）。90分以上学生所占比例为40.9%（2014年为29.9%）。 2015年试卷的整体难度略有下降，但区分度也下降了。 进一步优化命题程序 进一步落实《课程标准》的要求 进一步立足学生视角 （三）改进措施 测试框架的结构 一、测试说明 （测试的定位） 二、测试的内容或能力框架 （测试内容或能力的内涵界定） 三、比例结构 （内容、题量、题型等的比例） 四、试卷双向细目表 （内容维度、能力维度、具体描述、试题难度） 五、测试样例及评分规则 六、表现水平描述 命题组卷 基于课程标准 试题注重考查学生对学科核心知识、技能的理解和掌握，重视学生综合运用所学知识解决实际问题的能力、收集与分析信息的能力以及对重要学科思想方法的理解与掌握。 严格控制试卷的总体难度。 组卷以体现课程标准对学生基本要求的题目为主，有难度的题目主要考查学生的高层次认知能力。 试题形式为客观性试题和主观性试题相结合。 试题多使用真实的情境和任务，注重通过客观性试题考察学生高层次认知能力。 工具研发 试题审议 学科试卷审议标准： 试题是否存在科学性错误 题干与选项的阐述是否清晰或有歧义 选项设置是否合理 试题属性标定是否正确 考查能力要求与上海课程标准的一致性 试题难度估计 评分标准是否合理 背景问卷审议标准： 试题内容是否指向测量的指标 试题的阐述是否清晰或有歧义 选项设置是否合理 试题是否必要 工具研发 学生问卷：学生基本情况；学习自信心；学习动机；学习压力；学生对学校的认同度；学业负担（睡眠时间、做作业时间、补课时间）；师生关系；对教师教学方式的评价；品德行为（理想信念、公民素质和健全人格） 教师问卷：教师基本情况；教师对课程的看法；对学校管理的看法；面临的困难；教学观和教师专业发展；教师教学方式（因材施教、互动教学和探究与发展能力） 校长问卷：学校基本情况；校长办学理念和教育观；校长的学校管理方法；课程领导力（课程决策与计划、课程组织与实施、课程管理与评价）。 工具研发——测试框架 测试工具的框架——调查问卷 问卷编制 概念界定 收集资料（公开发表的量表、PISA问卷、TIMSS问卷、NAEP问卷；对学生进行访谈） 编写试题 小范围测试（用学生的视角看试题的陈述） 形成问卷 大规模测试后，再根据数据进行修改完善。 2014年度“绿色指标”测试材料的梳理 样本学校考场信息的编排 样本学校校测试材料清单编排 测试材料袋封面的信息的编排 学生准考证的编排 样本学校学生名单的编排 考务工作 1、制定主观题评分标准，形成评分手册 2、组织阅卷教师，并对阅卷教师进行评分标准的培训 3