基于评价使用论证的英语口语测试效度验证 以一项初中二年级口语测试体系为例
作者：高淼著
出版时间：2016年版
丛书名： 中央财经大学科研学术文库
内容简介
　　本研究旨在基于“评价使用论证（Assessment Use Argument，简称AUA）”理论框架（Bachman & Palmer，2010），对“义务教育阶段英语学习质量监测系统”中的八年级口语测试进行效度验证。评价使用论证是教育评价领域指导测试开发和效度验证的*新理论范式，是对Kane（1992，2002，2004；Kane， Crooks & Cohen，1999）基于论证的效度验证的进一步发展。在这一视角下，效度验证是一个论证过程，此论证过程依据“实用推理模型（Toulmin， 2003）”，实现从事实到主张的步步推理。考生的“测试表现”是论证所基于的**个事实，从“测试表现”出发可获得“测试记录”这一主张，“测试记录”同时转化为“分数解释”这一主张所依据的事实；“分数解释”进一步转化为下一主张——“决策制定”所依据的事实；基于“决策制定”这一新的事实，*后作出有关“测试后果”的主张。评价使用论证强调测试的使用，将使用测试的后果做为设计和开发测试的首要考虑因素，因此效度验证也是证明测试使用合理性的推理过程，包括构建评价使用论证框架和收集证据对其进行验证两个阶段。
　　“义务教育阶段英语学习质量监测系统”的八年级口语测试以《义务教育英语课程太阳城 （2011年版）》（以下简称《英语课程太阳城 》）四级有关“说”这一技能的相关要求为依据，制定了具可操作性的测试任务开发和设计的细目表，成为设计口语任务和研究口语测试使用的重要指南。本口语测试采用面试型口试形式，包括日常会话、朗读短文和看图说话三个测试任务。测试目的是了解八年级学习者的口语水平，为教育行政部门制定相关教育决策提供基于测试的证据。基于测试结果所做的决策对学生、教师等测试利益相关者都会产生不同的影响，因此保证和探究本口语测试的质量至关重要。
目录
第1章 引言
1.1 研究背景
1.1.1 基础教育质量监测项目
1.1.2 小样本英语口语测试
1.2 选题缘起
1.3 评价使用论证概述
1.4 研究目的与意义
1.5 主要术语
1.6 本书结构
第2章 文献综述
2.1 构念及表现性评价中的构念界定
2.1.1 构念的定义及界定构念的视角
2.1.2 表现性评价的构念界定
2.2 效度和效度验证
2.2.1 效度概念的变化
2.2.2 效度验证的发展
2.3 评价使用论证(AUA)
2.3.1 AUA的基本结构
2.3.2 评价使用论证与基于论证的效验的比较及其特点
2.4 第二语言口语能力
2.4.1 语言能力
2.4.2 对第二语言口语能力的认识
2.4.3 口语的本质
2.5 表现性评价与第二语言口语测试
2.5.1 表现性评价
2.5.2 口语测试模型
2.5.3 相关的第二语言口语测试研究视角
2.6 相关研究
2.6.1 评价使用论证研究
2.6.2 混合研究方法
2.6.3 质性研究与口语测试效度研究
2.6.4 对口语测试信度的量化研究
2.7 本章总结
第3章 英语口语测试的评价使用论证框架
3.1 测试记录
3.1.1 主张
3.1.2 理由
3.2 分数解释
3.2.1 主张
3.2.2 理由
3.3 决策制定
3.3.1 主张
3.3.2 理由
3.4 测试后果
3.4.1 主张
3.4.2 理由
3.5 本章总结
第4章 研究设计
4.1 研究目的和研究问题
4.2 方法论及研究设计
4.3 参与人员
4.3.1 口试考生群体及抽样
4.3.2 评分太阳城 制定人员
4.3.3 评分员
4.3.4 口述报告研究被试
4.4 研究工具
4.4.1 口试试题
4.4.2 分项评分太阳城
4.4.3 即时追溯性口述
4.4.4 访谈
4.5 研究步骤
4.5.1 分项评分太阳城 制定及验证
4.5.2 评分
4.5.3 口语语料语篇特征分析
4.5.4 会话分析
4.5.5 做题过程研究
4.6 数据分析方法
4.6.1 量化数据分析方法
4.6.2 质性数据分析方法
4.7 方法论意义
第5章 研究结果
5.1 有关“测试记录”主张的研究结果
5.1.1 分项评分太阳城 的验证及修订
5.1.2 评分信度研究
5.2 有关“分数解释”主张的研究结果
5.2.1 口语产出的语篇特征分析
5.2.2 会话分析研究
5.2.3 考生做题过程研究
5.3 本章总结
第6章 口语测试评价使用论证(AUA)的证据汇总及讨论
6.1 英语口语测试的AUA主张
6.2 理由、反驳及证据
6.2.1 测试记录
6.2.2 分数解释
6.2.3 决策制定
6.2.4 测试后果
6.3 本章总结
第7章 结语
7.1 研究结果
7.1.1 研究问题一：支持“测试记录”主张的实证证据有哪些
7.1.2 研究问题二：支持“分数解释”主张的实证证据有哪些
7.2 研究价值及启示
7.2.1 效度验证的理论与实践方面
7.2.2 对口语测试实践的指导方面
7.2.3 研究方法方面
7.2.4 口语教学方面
7.3 研究局限及前景
附录1：整体评分太阳城
附录2：口试测试试题及对三组图片的详细描述
附录3：做题过程后的追踪访谈提纲
附录4：分项评分太阳城
附录5：会话分析转写符号体系
附录6：口试录音语料转写举例
附录7：被试口述报告及访谈录音转写文本举例
附录8：NVivo编码形成过程
附录9：各维度上各侧面的具体方差分量估计值汇总
附录10：每位被试的编码节点情况
参考文献
后记