主讲人:杨志明(湖南师大测评研究中心主任、教授,北师大心理学部兼职研究生导师,美国教育考评局原技术总监,美国ETS和Pearson原心理测量学家)Jimmy_CN17
引言:考试意味着什么?
@听课+刷题模式是提升成绩的最佳手段吗?
@简单总分可以做什么用?
*知识结构与层次有何缺陷?
*能力结构与层次水平如何?
*考试成绩不稳定的原因何在?
*现在成绩可预测未来学习表现吗?
*分数报告该如何设计和使用?
@年级排名能带来什么好处?
*各科总分排名是真实水平的反应吗?
*排名信息是鼓励还是打击了自信心?
*排名给教与学提供了什么改进建议?
一、测评内容与能力维度设定
@设定依据:
*内容要求:课程标准/考试大纲
*能力要求:一般能力/学科能力
*目的要求:达标考试/选拔考试
@设定方法:
*编写考试说明(test specification)
@工作团队:
*学科内容专家(命题等)
*试题分析专家(参数估计、信度效度、分数分析)
——MBA(融合专家,通)
eg. 1.1 测试内容要求(数学)案例
全局观念,课标知识细化
举例:高考命题思路的演变历程
(1)双基模式:基础知识+基本技能(80s)
(2)能力立意:知识+能力而为目标(90s)
图
(3)三维目标:知识和能力、过程和方法、情感态度价值观(新世纪)
图
三维目标具体化?
(4)新动向:德智体美劳+立德树人(2018)
2019年高考命题特点:命题素材体现德智体美劳要求,理论联系实际,生活挂钩
两种命题趋向:学科结构(结构主义)+问题导向(行为主义)——>平衡
例题:1 1 1=6...
1.2.1 内容和能力要求概述
图表:
事实知识-记忆
概念知识-理解应用
程序知识(实验过程)-理解应用分析
元认知-考创造性人才
前三种考合格性考试
∴作为老师要把所教学科的内容归类!!!
考试的三种功能:学习结果检验、学习过程、为了学习
不同阶段设计问题不同,目的不同
1.2.2 一般能力结构(举例)-韦氏智力测验
言语理解(VCI)
图形推理(PRI)
工作记忆(WMI)
加工速度(PSI)
1.2.3 一般能力层次(布鲁姆目标分类学 有更新)
1.2.4 学科能力要求——《中国英语能力等级量表》
(1)
(2)《国标》内容和层次
命题老师要理清楚!学科的
(3)《国标》之阅读能力定义:
@读者阅读并处理书面材料时,
@运用各种知识(包括语言知识和非语言知识)和策略,
@围绕所读材料建构意义的能力,包括识别与提取书面信息的能力、概括与分析书面信息的能力、批判与评价书面信息的能力
@并具体提出了“理解书面描述、理解书面叙述、理解书面说明、理解书面指示、理解书面论述、理解书面互动”六个方面。
尝试行动:课题组-书写细化学科能力(分级),以此作为命题指导。
(4)《国标》阅读理解策略——第5级举例
1.4 考试说明
@以考试说明的形式确定:目的、用途、内容、形式(pBT、cBT、iBT、CAT、MST)、分数、报告
@测评内容编码
二、试卷测评维度得分点设计
@各知识点的分配:
*每个知识点的得分点数>=8才能保障精度
*大题目的计分点尽可能多并且合理(尽可能分出多个知识小点)
@能力层次的要求:
*不同类型知识的能力深度要求不同
2.1 考试蓝图
————符合目的、覆盖课标、突出重点、把握深度、保障精度
2.2 组卷方案
————标记所有题目的知识点和能力维度
三、考试形式与题目类型选择
3.1 考试形式:
pBT()
3.3 试题打磨(1)
——坏题目如何改进?
3.4 学生常见错误归纳与命题
*请结合本学科某知识点,归纳学生在思维方法上常犯错误类型6种
*目的是方便选择题欺骗选项的设计
尝试行动:归类各种常见错误类型
3.4.1 常见错误归纳()
四、保障题目质量的20条措施
1.每题都应对应考试蓝图中某特点知识点和能力点
2.除非考察综合能力所必须,不主张用一个题目考察多个互为条件的要点,避免出现考生因其中一个环节出错而导致整个题目得零分的情况。因为这会抹杀考生已经掌握了其他要点到“功劳”,
3.考点应该侧重重要内容而不去追究细枝末节。
4.题目素材或情景应当与教科书等不同,避免只考记忆或直接套用某种解题套路的问题
(高考命题要查重)
5.避免题目之间互为因果,或互为条件或结论等关联。
6.问题设计重在考察思维的迁移水平,注意把握具体与抽象之间的分寸
7.题目素材尽量基于事实,而不是基于主观见解。
8.避免出现“题目不会,但靠答题诀窍可以猜到答案”的问题
9.题目表述尽量切合被测群体的阅读理解水平,文字力求简明扼要、通俗易懂、没有歧义
10.
11.避免在题干的开头或中间使用填空,以免影响考生对问题本身的理解
12.在题干中避免使用否定式的句子
13.避免包含与测量内容关系不大的其他“难度”因素
14.所有干扰选项都有一定道理,所有选项中的共同内容应该设置在题干之中。
15.长度、形式等应该比较接近
16.避免用“以上都不对”,“以上都对”类型的选项
17.整个试卷的得分点尽可能多,以提升整个试卷的区分度和信度
18.避免使用在政治、军事、宗教、种族,以及一些争议较大的题材
19.避免使用事故、灾难、疾病、死亡、暴力等让人产生负面情绪情感的话题
20.避免使用更不利于具有某种生理缺陷者的内容
题干最好直接问问题,
小结与建议
【小结】考试命题三要素
1.测评内容
第二讲 考试的公平性
DIF研究
网友评论