2013年 安徽高考研讨会 英 语
高考应具有较高的信度、效度,适当的难度和必要的区分度。 ---《考试说明》
提 纲 研究《考试说明》的意义 信度 效度 信度与效度的关系 听力试题的信度与效度 单选题的信度与效度 完形填空题的信度与效度 提 纲 研究《考试说明》的意义 信度 效度 信度与效度的关系 听力试题的信度与效度 单选题的信度与效度 完形填空题的信度与效度 阅读理解题的信度与效度 任务型读写题的信度与效度 书面表达题的信度与效度
一、研讨《考试说明》的意义 课程理论 测试理论 高考试题 常规教学 考前指导 政策依据 技术依据 评价:信度、效度、难度、区分度 反拨作用 教学指导
二、什么是信度 同一试题 第一次测试 第二次测试 同一份试题 第一部分测试 第二部分测试 相同难度的试题 对第一组测试 对第二组测试
影响测试信度的因素 学习者的波动 测试的特征 与作答相关的错误 测试信度的因素 评分的波动 测试过程中的波动
怎样提高测试的信度? (1)抽取足够的样本,试题尽可能覆盖高中三年所学内容; (2)不设含糊的题目,提供清楚明了的指令,确保试卷卷面设计完善; (3)施考条件一致,无干扰; (4)充分研究单项选择题的命题技术,最大限度地提高其效度; (5)使受试者之间的比较尽可能直接; (6)提供详细的评分细则; (7)培训评分员; (8)评分前确定统一的可接受的答案和评分标准; (9)通过考号而非姓名来辨别受试; (10)书面表达采用多人独立评分。
三、什么是效度? 效度 语言测试的效度 内容效度 内容效度研究方面 ? 测试结果 测试目标 测试内容 考生成绩
影响测试效度的因素 (1)目标和任务不明确; (2)内容没有很好划定; (3)题项的比例不恰当; (4)题量不当; (5)有错误或不规范; (6)有暗示; (7)指导语表述不清或者太难; (8)缺少缓解怯考心理的措施; (9)没有为后续工作开好路。
怎样提高测试的效度? 确定测试内容范围和能力层次 双向细目表 编制试题 确定最有代表性的内容 确定测试内容所占比例 研究测试目标 确定测试内容范围和能力层次 确定最有代表性的内容 确定测试内容所占比例 双向细目表 编制试题 测试全面考查学生综合语言运用能力 取样广泛而无可预测性 尽可能使用真实的语言材料 尽可能使用直接测试法(如口试)、适当减少离散题(题与题之间彼此没有联系,如单选题)和客观题、增加主观题的比例 新增实用性、真实性并举的作文考试题型 进一步研究和规范改卷评分体系
四、信度与效度的联系 1、主观性测试 2、客观性测试 效度 (Validity) 信度 (Reliability) 信度
在测试中把握好信度和效度的平衡 效度 考试是否反映了考试性质 考试内容能否体现新的语言教学观 能否产生正面反拨效应 信度
双向细目表与效度 测 试 提高效度 教学诊断 题号 测试 范围 认知 要求 内容 题量 教学 引导 价值 取向 预设 难度 实际 1 2 3 …… 测 试 提高效度 教学诊断
五、高考听力的信度问题 信度 (Reliability) 效度 (Validity) 1.猜测或排除法 2.测试出的结果不能完全反映出受试者的实际语言运用能力
高考听力题的效度问题 功能意念项目 测试内容 话题项目 理解主旨和要义 效度体现 获取具体的、事实性性信息 能力要求 对所听内容作出推断 理解说话者的意图、观点和态度 测试内容
2010-2012年听力话题统计
2010年-2012年听力试题功能统计
2010年-2012年听力能力测试统计
听力原文词数统计 时间 2009 2010 2011 2012 字数 849 914 925 924
六、单项填空的信度与效度问题 产出性能力考查少 猜测影响结果阐释 测试内容广度有限 后效作用可能有害 信度 (Reliability) (Validity) 信度 (Reliability) 产出性能力考查少 猜测影响结果阐释 测试内容广度有限 后效作用可能有害 利于考试作弊
利用双向细目表提高单选题的效度 题号 考查范围 考查内容 能力要求 预设难度 实际难度 21 冠词 学科名词前用零冠词;普通名词前用a/an,表示“一个” 理解应用 22 交际用语 提供帮助/接受或拒绝 应用 23 形容词 vital, available, specific, similar 识记 24 非谓语动词 remember doing与remember to do 区别 25 介词 for life(终生;终身) 26 时态 现在完成进行时(状语over the past five hours) 27 主语从句 whether 引导的主语从句 28 动词短语 pay off 29 定语从句 as 引导的非限制性定语从句 30 过去分词做状语 31 虚拟语气 从句用were to do…表示将来的假设 32 态度-同意和不同意 33 时态和语态 一般现在时表示经常性动作 34 副词 however 35 过去进行时表示过去正在进行的动作
2012年单选题考查内容统计
七、完形填空的信度与效度 考点效度 何谓“考点效度”? 完形填空题对“考点效度”的要求 怎样提高完形填空“考点效度”?
考点层次 焦点因素 意义因素 惯用搭配因素 语法因素
考点层次和焦点因素与考点效度的关系
2012年完形填空考查内容
2009年至2012年完形填空考点层次统计
2012年完形填空焦点因素统计
效度不高的试题举例: 语法因素: Something made me think of you and 51 you did that night at the café in Bondi. 51. A. what B. which C. whatever D. whichever (2010年)Then, the writing point of the pen should 46_ the ink to flow evenly(均匀地)while the pen remains in touch with the paper. 46. A. change B. allow C. reduce D. press 惯用搭配: (2009年)I want to thank you for teaching me a very 36 lesson in life by the great example you 37 . A. humorous B. private C. reasonable D. valuable 37. A. followed B. gave C. set D. took
八、阅读理解的信度与效度 高考英语阅读理解分析项目 项目 描述 语篇输入 文章长度 单篇文章长度、文章总长度 阅读速度 阅读文章的速度,完成整个阅读理解的速度 文章难度 生词量、易读度 题材 社会生活与文化、个人经历与故事、教育、旅行、科普和现代技术、史地、人与自然 体裁 记叙文、说明文、议论文、应用文 预期回答 阅读技能 理解主旨大意、理解文中具体信息、根据上下文推断生词的词义、作出简单判断和推理、理解文章的基本结构、理解作者的意图和态度。
2010年-2012年阅读理解词数
2010年-2012年阅读速度
2010年-2012年阅读理解题材(关键词统计)
2010年-2012年体裁
2010年-2012年阅读技能
九、任务型读写的信度与效度 任务型读写的考查目的 阅读 表达
短文结构的考查 Title: Aspect Country Custom (77) ________ America Japan Thailand Dressing (79)________countries Korea Eating Spain Mexico (82)___________ Doing business Most countries China Conclusion:
2009年-2012年任务型读写能力考查
2009年-2012年任务型读写答案类型
2009-2011年任务型读写难度系数
2009-2012年任务型读写考查的词类
建议: 1.整合题型,加强同根词转换练习 regularly updated--- updated in a regular manners how to apply for jobs--- ways of job application It’s worth taking the time and finding as much information as you can. --- The time you spend and the efforts you make will be worthwhile. the function of education is to prepare us for life--- Education should be a preparation for life. critical(批判性的)thinking---think in a critical way how to manage it---skill of managing it take care of their health---keep healthy summarize(概括)what you’ve heard ---Give a summary of what the person has said 2.概括题,加强一句多译练习 work her way through college--- work to make money for her college study talk to career advisers---consult advisers less difficult---easier
十、书面表达的信度和效度 效度 (Validity) 信度 (Reliability) 开放性 控制性
近几年我省书面表达试题 阶段 年份 情景提供方式 主要内容 注意 课改前 06 假设你是李华,作为选派的交流学生在美国某中学学习了一年,寄住在Mr. Brown家里,刚回到国内。回国后你发现自己的一本英语词典遗忘在他家,因此给他写一封信,请他帮助寄回词典。 (1) 感谢在美国期间他所提供的帮助。 (2) 一本英语词典忘记带回。 (3) 词典是美国老师送的,非常珍贵。 (4) 词典很可能丢在卧室的书架上。 (5) 邮资自己付。 1. 词数100左右;信的开头和结尾已为你写好。 2. 可适当增加细节,以使行文连贯。 参考词汇:邮资—postage 进入课改 07 假设你是李华。美国一所友好学校准备与你们学校共同创办一份中学生英文刊物,该校格林先生来信询问有关情况。请你给他写封回信, (1) 表示赞成。 (2) 提出你喜欢的栏目。 (3) 简要说明理由。 1. 词数100左右。 2.信的开头和结尾已为你写好。适当增加细节,以使行文连贯。 参考词汇:栏目一column 课改中 10 假设你将参加某英语杂志社开展的一次征文活动,征文的内容要求你在电视、手机(cell)和网络三者中,放弃其中一个并陈述理由。请你以“Which would you give up: TV, cell, or Web?”为题,写一篇英语短文。 1. 字数100左右; 2. 可以适当增加细节,以使行文连贯。 12 假设美国某中学的学生明天来你校访问交流,主题是高中生对文、理科的选择。请你用英语写一篇发言稿,向他们介绍你所做的选择,并说明选择的理由。 注意: 1、开头和结尾已为你写好,不计入总词数; 2、词数为120左右; 3、短文中不能出现与本人相关的信息。
近几年写作题材 年份 主题内容 题材范围 2005 向外国学生介绍学校的有关要求 学校 2006 给美国朋友写信请求帮忙并致谢 学生 2007 与美国朋友商讨办杂志之事 学习 2008 介绍环保购物袋的使用 社会热点 2009 表达对父母经常翻看孩子日记或书包这一现象的看法 2010 从手机、电视、电脑三者中选择放弃一个,并说明理由。 2011 My Approach to Difficulties in Learning 学习方法 2012 高中生对文、理科的选择
近几年书面表达体裁 年份 2005 2006 2007 2008 2009 2010 2011 2012 文体 发言稿 书信 演讲稿 杂志征文
近几年书面表达情境提供方式 年份 2005 2006 2007 2008 2009 2010 2011 2012 情景 提供 方式 提纲式
控制度 年份 2005 2006 2007 2008 2009 2010 2011 2012 控制度 控制式 半开放式 开放式
难度系数 年份 2009 2010 2011 2012 难度系数 0.47 0.41
1.主、客观性试题相比较而言,主观性试题效度高,客观性试题信度高,客观性试题可操作性强,但有控制的主观性试题操作性也强,且信度也较高;相对客观性试题而言,主观性试题对教学更能产生积极的反拨作用。 2.设计得好的单项填空题同样具有较高的效度,而且对平时的词汇和语法教学具有积极的反拨作用。设计得好的单项填空题考查学生在一定的语境中运用语言知识、语法知识和语用知识的能力。另外,一个题干只设一个考点,效度较高;一个题干设两个或两个以上的考点,效度较低。 3.在语篇中考查学生综合运用语言知识、语法知识的能力,试题设计成填空题比设计成单项选择题效度更高,且有相当的信度。根据考生对做题过程的回忆,填空题的题型能有效地培养学生用英语思维的能力。但要特别注意选材,文章不能太难或太易,要充分考虑学生的实际生活和身心发展水平。 4.听力理解和阅读理解的单项选择题,考查考生综合理解和深层理解能力的题目比细节理解和浅层理解的题目具有更高的效度,更能准确地测试学生理解信息和获取信息的能力。 5.书面表达题设计为指导性写作,即有必要的提示,对写作的目的、对象、时间、地点、内容等情景给予简要说明,通过图画、图表、(中英文)提纲等形式提供情景,有一定的开放性,给学生留有足够的、可自由发挥的空间。该题型具有很高的效度。通过阅卷前对阅卷员进行培训,达成共识,能保持相当的信度。给学生留有发挥余地的写作,对教学有积极的反拨作用,扭转了学生死记硬背,并通过背诵范文来应付英文写作的局面。但应用文的写作效度低。在应用文的写作中得高分的大多数学生,其写作能力不一定高,因为如果学生背诵到了相关的范文,便可得高分。 6.科学、合理地制定评分标准,能提高试题的效度。这主要针对主观题而言。例如:在书面表达题中,如果过分注重语言形式的错误和过分关注书写的准确性,就不能准确地评估学生的书面表达能力。因为学生的语言组织能力、表达的流畅性等是学生书面表达能力更为重要的方面;另外,科学、合理的评分标准,对教学具有积极的反拨作用。
谢谢!