2008 年 11 月 第 40 卷   6 期 第
外语教学与研究 ( 外国语文双月刊) Foreign L a nguage Teachi ng a nd Researc h ( bi mont hly)
N ov. 2008 V ol . 40 N o. 6
我国高校英语专业八级测试写作项目的 理论效度检验研究
鲁东大学
3
  修旭东
   提要 : 本文通过开发和预试一份调查问卷作为研究工具 、 运用相关统计程序调查了我国高校英语 专业八级写作测试的理论效度 。因子分析显示 , 八级写作测试基本上反映了写作内在过程或写作能力 。 回归和方差分析显示 , 考生的语言表达能力得到了统计上的边际性显著区分 “调整主题与体裁” 组织 , 、 “ 思想” 表达” 检查” “ 、 “ 、 子过程比其他子过程对写作成绩的影响更大 。上述分析结果表明 , 八级写作测试 总体上在多方面测量了考生的写作能力 , 但仍需进一步完善 。    关键词 : 八级写作测试 、 理论效度 、 效度检验   [ 中图分类号 ] H319   [ 文献标识码 ] A
1 . 引言 B ac h ma n ( 2000 : 22 ) 认为 : 语言测试的专业化和 “
t y) 会避免一些学者 ( 如 A nast asi 1988 ; Alde rs on 1991 ; Messic k 1994 , 1995a , 1995b ; Wei r 20
  05) 指出的传统术
语容易引起的混乱 ?? [ 构念效度 ] 既指包含所有 ?“它 效度类型的上义概念 ( sup e r or di nate te r m ) , 又指更具 体的 理 论 构 念 ( t heoretical const ruct ) ”( Weir 2005 :
14 ) 。本文使用的 “理论效度” 实质上是指传统 “构念效
效度研究是语言测试界现在和未来研究的两个重点领 域” 。我国高校英语专业八级测试 ( T EM
  8) 是根据 《高
( 等学校英语专业英语教学大纲》 2000 ) 在全国范围内
实施的大规模测试 , 但至目前对该测试中写作项目 ( 下 称 : 八级写作测试) 的效度检验研究还很少见 。
logical Association ( A PA ) 1985 :
  9) , 或是对效度证据 ( 的全面的 “评价总结” Messic k 1995b : 742 ) 。因此 , 检 ( “效度 ……是一个整体概念” A me rica n Psyc ho2 ( 本文的 “理论效度”t he ory2based validit y) 是 Weir
度” 中更具体的 “理论构念” 。
验某一测试的效 度 需从整 体 上 对 效度 证 据 ( validit y 一切与测试有关的因素进行整体研究 。但限于篇幅 , 其整体效度进行研究的标志性部分 。
evide nce) 进行全面的调查研究 , 即对所有效度证据或
本文仅检验八级写作测试的 “理论效度”以此作为对 ,
( 2005 ) 提出的一个新术语 , 它关注的是理论上认为语
言测试应测的能力 , 即“真实生活语言所蕴含的各种 能力” 或内在/ 认知过程 ( Weir 2005 : 18 ) 。本 文 使用
( “理论效度” 代替传统的 “构念效度” const ruct validi2
3 本文根据笔者博士论文 ( 英语) 的部分内容撰写而成 ,是对八级写作测试理论效度研究的一部分 。感谢 : 英国 Cyril Weir 教 授、 Barry OπSullivan 教授和 Roger Hawkey 研究员对论文的指导 ,上海外国语大学 、 河南大学 、 鲁东大学有关同学提供的预试研究 和主体研究的数据 ,匿名审稿专家提出的修改意见 。
B ridge ma n & Carls on 1983 ; Ha mp2L yons & Kr oll 1997 ;
Cum mi ng et al . 2000 ; Hyla nd 2002 ; Weigle 2002 ; 上海
外国语大学 T EM 考试中心 1997 ) 曾对多种测试 ( 如 :
I EL TS 、 F EL 、 R E 、 EM ) 的写作项目进行过研究 , TO G T
但仍存在一些问题 , 如缺乏经验性的 、 全面的 、 可操作 的对高风险写作测试进行效度检验的理论框架 ; 缺乏 根据该框架来开发和预试检验效度的工具和程序 ; 缺 乏从不同角度检验 [ 这些 ] 工具和应测的构念 ( t he o2 “ 尽管 Weir ( 2005 : 47 ) 建立了一个比较全面的 、 可操作 性较强的 ( 即从理论效度 、 内容效度 ( context validit y , 又译作环境效度) 、 评分效度/ 评分员信度 、 试后效度和 效标关联效度方面) 检验写作测试效度的框架 , 但仍缺 ・447 ・
retical const ructs ) 之间关系” 的研究 ( Weir 2005 : 2 ) 。
 [ 文章编号 ] 100020429 ( 2008 ) 0620447207
在非 母 语 写 作 研 究 中 , 许 多 学 者 或 机 构 ( 如
2008 年                     外语教学与研究                     6 期 第
少在该框架基础上开发和预试检验写作测试效度的有 效工具 , 因而也无从谈起检验工具和应测的构念之间的 关系或确立证据来支持对分数所作出的推论或解释 。 因此 , 对八级写作测试的理论效度进行检验 , 应首 先确立检验写作测试理论效度的框架 , 即首先从理论 上搞清楚应该测试哪些能力或反映这些能力的内在/ 认知过程 ( Ass ociation of L a nguage Teste rs i n Eur op e
Weir 2005 :
  18) , 然后以该框架为依据开发和/ 或预试 ( AL T E) me mbers 1998 : 139 ; Bac h ma n 1990 : 2542256 ;
图 1 . 写作测试的理论效度检验框架
“语言知识” “语法知识” 语篇知识” 功能 包括 、 “ 、 “ 知识” “社会语言知识” “语法知识” 和 。 包括词汇知识 、 音系/ 字系知识 、 句法知识 。 “语篇知识” 包括衔接知 识、 修辞结构知识 。 “功能知识” 包括概念 ( 达意 ) 功能 知识 、 操作功能知识 、 启发功能知识 、 想象功能知识 。 “社会语言知识” 包括方言/ 变体知识 、 语体 ( 语域 ) 知 识、 自然表达或习惯表达知识 、 文化特指和修辞手段
e r 1996 :662
  77) 。 ( 辞格) 知识 ( Bac h ma n 1990 : 84298 ; Bach ma n & Pal m2
相应的研究工具 ( 如 : 问卷 ) 和/ 或程序 ( 如 : 有关数理统 计程序) ( Weir 2005 ) , 再使用这些工具和程序来检验 该测试在多大程度上测试了应测的能力 。
2 . 写作测试理论效度的检验框架
ledge) 或主题知识 ( t op ical k nowle dge ) ( Bach ma n & Pal mer 1996 :65 ) 或文化背景知识或专业知识 ( subject mat te r knowledge ) ( Weir 2005 : 75 , 97 ) 。这些知识是
语言使用时的信息源 , 有的已存于写作者脑中 , 称为 资源 ( 如 : 文章 、 书籍或其他媒介) 中获得 , 称为 “外在知
( 识” Weir 2005 : 97 , 1
  11) 。
效度检验是一个类似评价的过程 , 在这个过程中
“内在知识”有的还未存于写作者脑中但可以从外部 ,
Bach ma n & Pal me r ( 1996 ) 关于语言能力的论述 , 在英
必须提供效度证据以支持对分数所做出的推论 ( Bach2 国专家 Weir 、 ’ O Sulliva n 和 Haw key 的指导下 , 笔者试 建了写作认知过程模型 ( 见图
  1) 作为检验写作测试理 论效度或提供效度证据的理论依据 。该模型涵盖了上
( 述多个模型中的所有成分或 “理论构念” 建模理据请
2005 : 15 ) 。根 据 先 前 研 究 , 特 别 是 参 考 Fl owe r & Hayes ( 1981 ) 、 reiter & Sca r da malia ( 1987 ) 、 be & Be Gra Kapla n (1996 ) 的 写 作 认 知 模 型 和 Bac h ma n ( 1990 ) 、
参看笔者 2002 , 2004 , f ort hcomi ng) 。为方便读者 , 此 处对该模型再作简要解释 。
组成 。前者提供的 “语言知识” “内容知识” 对后者 和 ,
提供支持 ( Flower & Hayes 1981 : 370 ; Be reit er &Sca r2
Kapla n 1996 : 226 ; Weir 2005 :
  47) 。
da malia 1987 :8 , 12 ; Bac h ma n 1990 : 1072108 ; Gra be &
ma n 1990 : 22223 ; AL T E me mbers 1998 : 168 ; Weir
裁” 产生思想” 组织思想” 表达” “检查” 个子过 “ 、 “ 、 “ 、 和 6 程组成 。该过程与 Weir ( 2005 :
  47) 的模型有所不同 ,
Weir 没有把 “检查” 包含在内 , 因为他认为 “检查” 与模型
中的 “监控” 重叠 。 “检查” 之所以在笔者模型中保留是 因为在多数情况下它发生在写作之后 ( 尤其针对不满意 部分) , 而 “监控” 是指在写作的任何阶段起到控制或扫 描作用的活动 。并且 “检查” “监控” , 与 也分别得到了
Field ( 2004 ) 以及 Flowe r & Hayes ( 1981 ) 的证实 。
一致的初始任务 。Flowe r & Hayes ( 1981 : 3
  72) 认为 ,
“确定目标”是整个写作过程中的一个 “计划过程” 。
Bereite r &Sca r da malia (1987 :
  12) 将它置于 “对任务的
心理 表 述 ( me nt al rep rese nt ation of assignme nt ) ” 之
Gra be 和 Kap la n (1996 :2
  27) 认为 “确定目标” 有三个
后 , 其他子过程在 “确定目标” 这个子过程基础上进行 。 任务 :1 ) 它 “为写作设定目标和宗旨” 2 )“提供与目标 ; 一致的初始任务表述” 3 ) 将 ; “环境” “言语短时工作 与
( 记忆” ve r bal w or ki ng me mory) 连 接 起 来 。本 研 究
中 “确定目标” , 与上述 Gra be 和 Kapla n 提出的三个功 能的论述基本一致 。 “调整主题与体裁” 指依据内容知识和篇章知识为
该模型由 “写作支持源” “写作实施过程” 和 两部分
・448 ・
写作提供主题提示和体裁提示 。根据 Bereite r & Scar 2
da malia (1987 :
  7) 的观点 , 对任务的心理表述在他们 ( 的 “知识陈述” k nowle dge2telli ng) 模型中 “可以分解为 t ra nsf or mi ng) 模型中 “确定目标” “任务的心理表 , 紧跟
( 对主题 和体裁 的调 整” “知识转 化” knowledge2 。在
“内容知识” 指现实世界知识 ( real2w orld know ~ “确定目标” 指根据写作情景确定目标及与目标相
“写作实施过程” “确定目标” 调整主题与体 由 、 “
修旭东   我国高校英语专业八级测试写作项目的理论效度检验研究
述” 之后 , 虽然 “调整主题与体裁” “确定目标” 没在 之后 出现 , 但这并不意味着写作者不调整主题与体裁 , 因为 在 “确定目标” 之后是与 “内容知识” “语篇知识” 和 互动 的 “解决内容问题” “解决修辞问题”而 和 , “解决内容问 题” “解决修辞问题” “内容知识” “语篇知识” 和 在与 和
lia 1987 :8 , 12 ) 。因此 “调整主题与体裁” “知识转 , 在
思想 ( Flowe r & Hayes 1981 : 370 ) , 也无论文本是否符 合确定目标和文本输出的要求 ( Gra be & Kap la n 1996 :
2
  26) , 写作者都需要对其进行评价和修正 。在该子过
程中 , 写作者既需要语言知识也需要内容知识 。 图 1 模型为寻找和确定八级写作测试理论效度的 证据提供了蓝图 。换言之 , 开发和预试相关的工具应 以图 1 中的因素或变量为依据 。
3 . 预试研究
“内容进展”( conte nt develop i ng ) 的过程类似 。在分 类、 组合 、 发展和排序过程中 ,“问题 转 换” ( p r oble m
t ra nslation ) ( 同上 :12 ) 频繁地与 “内容知识” “语篇知 和
“表达” 子过程中才能把思想用得体 、 精美 、 衔接和连贯 子过程与 Be reiter 模型 ( 1987 :
  8) 的 “更新对文本的心 理表 述 ” ( up date me nt al rep rese nt ation of text ) 和
Grabe 模 型 ( 1996 : 226 ) 的 “在 线 加 工 装 配” ( on2li ne
cessi ng outp ut ) 过程相似 。在该子过程中 , 写作者特别
( p r ocessi ng asse mbly) 、内在加工输出” i nte r nal p r o2 “
互动时 , 必然会调整主题与体裁 (Be reite r & Scar da ma2 化” 模型中依然得到了体现 。主题调整有助于内容切 题 , 体裁调整有助于语篇连贯 。 “产生思想” 是指产生完整的 、 更多是不完整的 、 零 散的甚至是不合逻辑的或矛盾的思想或观点 ( Fl owe r
te r 模型 ( 1987 :8 ) 中 “从记忆中提取内容” 的含义相似 , & Hayes 1981 :37 ) 。该子过程在很大程度上与 Be rei ~
预试研究用来开发和预试检验八级写作测试理论 效度的工具 。 根据图 1 模型 , 笔者设计和预试了一份问卷作为 研究工具用来调查或检验八级写作测试的理论效度 。

  3. 1   预试的总体程序
或在某种程度上与 Gra be 模型 (1996 : 2
  26) 中 “语言能 力” “社会知识” 和 互动的过程相似 。在该子过程中 , 内 容知识堪称主要的写作支持源 。 “组织思想” 指把产生的思想进行集中 、 归类 、 排序
预试的总体程序如下 :
1 ) 问卷发放前 , 邀请两位本族语英语教师 ( 来自
美国和加拿大 ) 和三位非本族语英语教师检查英语问 卷 ( 问卷开始时用英语设计 ) 中各个项目的正确性 、 恰 当性 、 简洁性和可理解性 。

  2) 邀请六位将参加八级写作测试的学生阅读并
和创新 。它与 Flower 模型 ( 1981 : 370 ) 中对思想进行 分类 、 组合 、 发展和排序的含义相同 , 也与 Be reiter 模 型 (1987 :112
  12) 中的 “文本进展”( text develop i ng) 和 识” 发生作用 。因此在该子过程中 , 写作者通常既需要 内容知识也需要语篇知识 。 尽管 “组织思想” 至少可以提供文章的框架 , 但却 不能把 “一个复杂的网络框架变成一段线性的英语文
( 本” Flower & Hayes 1981 :3
  73) , 因为在 “组织思想” 后
回答所有的项目 , 然后将他们分成两个小组就问卷中 的每个项目进行详细访谈 。大多数访谈的问题用汉语 表述 , 偶尔既用英语也用汉语表述 ( 访谈的
 

相关内容

英语专业八级听力常用短语汇总【词典级】

   大家网英语专八论坛 a back seat driver 专爱指点司机如何开车的乘客 a big bear hug 抱得很紧 a bit trying 有点苦恼 a cap and gown 毕业典礼的礼服 a cup of Java 一杯咖啡 a dead battery 汽车电瓶没电了 a good shot 照相的取景很出色 a hangover from the old days 遗留下来的老习惯 a knockout 引人注目 a little too tight 紧了一点 a m ...

英语专业八级翻译

   (5) 8 级测试 英译汉部分; ?? 1996?2005 年英语专业 8 级统考题中英译汉试题评析 【1996 年 8 级测试英译汉 级测试英译汉】 Four months before Election Day1, five men gathered in a small conference room at the Reagan-Bush headquarters2 and reviewed an oversize calendar that marked the remaining ...

高校英语专业四级口试大纲

   高校英语专业四级口试大纲 SYLLABUS FOR TEM 4 ORAL 总 则 2000 年出版的《高等学校英语专业英语教学大纲》 (一下简称《大纲》 )规定, 高等学校英语专业基础阶段的主要教学任务是“传授英语基础知识,对学生进行 全面的、严格的基本技能训练,培养学生实际运用语言的能力、良好的学风和正 确的学习方法,为进入高年级打下扎实的专业基础”(《大纲》 ,2000:2)。 《大纲》指出, “为了帮助各校和有关部门了解执行本教学大纲的情况,教育 部委托全国高校外语专业教学指导委员会英 ...

高校英语专业八级考试大纲

   高校英语专业八级考试大纲(2005 新大纲 新大纲) 高校英语专业八级考试大纲 总 则 国家教委<高等学校英语专业高年级英语教学大纲)规定, 高等学校英语专业高年级英语的教 学任务是“继续打好语言基本功,进一步扩大知识面,重点应放在培养英语综合技能,充实 文化知识,提高交际能力上。” 同时,<大纲)也指出,“大纲的执行情况主要通过统一测试进行检查。”“测试和评分应力求 尽快达到标准化和电脑化,使其具有科学性、客观性和可行性。” 根据(大纲)中的上述规定,英语专业八级考试大纲规定了 ...

英语专业八级考试范文集锦

   英语专业八级考试范文集锦 Children should begin their formal schooling at an early age People have different views on what children should do at a very early age. Some think that children should begin their formal education and start to spend most of their time ...

1999年英语专业八级全真试题

   www.tingroom.com 在线英语听力室 TEST FOR ENGLISH MAJORS (1999) -GRADE EIGHTPAPER ONE TIME LIMIT: 95 MIN PART I LISTENING COMPREHENSION [40 MIN.] In Sections A, B and C you will hear everything ONCE ONLY. Listen carefully and then answer the questions that ...

2004年英语专业八级全真试题

   www.tingroom.com 在线英语听力室 TEST FOR ENGLISH MAJORS (2004) -GRADE EIGHTPAPER ONE TIME LIMIT: 95 MIN PART I LISTENING COMPREHENSION [40 MIN.] In Sections A, B and C you will hear everything ONCE ONLY. Listen carefully and then answer the questions that ...

2000年英语专业八级全真试题

   www.tingroom.com 在线英语听力室 TEST FOR ENGLISH MAJORS (2000) -GRADE EIGHTPAPER ONE TIME LIMIT: 95 MIN PART I LISTENING COMPREHENSION [40 MIN.] In Sections A, B and C you will hear everything ONCE ONLY. Listen carefully and then answer the questions that ...

2008年英语专业八级全真试题

   www.tingroom.com 在线英语听力室 2008 年英语专业八级考试真题及答案 答案在: 答案在:第 11 页 TEST FOR ENGLISH MAJORS(2008) ( ) ?GRADE EIGHT? TIME LIMIT: 195MIN PART I LISTENING COMPREHENSION (35 MIN) SECTION A MINI -LECTURE In this section you will hear a mini-lecture. You will h ...

2010年英语专业八级考试大纲

   大家论坛 club.topsage.com 2010 年英语专业八级考试大纲 总 则 国家教委<高等学校英语专业高年级英语教学大纲)规定,高等学校英语专业高年级英语的教 学任务是"继续打好语言基本功,进一步扩大知识面,重点应放在培养英语综合技能,充实 文化知识,提高交际能力上. " 同时,<大纲)也指出, "大纲的执行情况主要通过统一测试进行检查."测试和评分应力求尽 " 快达到标准化和电脑化,使其具有科学性,客观性和可行性. & ...

热门内容

2007中级职称英语

   2007 年度全国职称外语等级考试试卷 年度全国职称外语 职称外语等级考试试卷 英 语 (卫生类 B 级) 部分:词汇选项(第 1~15 题,每题 1 分,共 15 分) 第 1 部分:词汇选项 下面每个句子中均有 1 个词或短语划有底横线, 请为每处划线部分确定 1 个意义最为接 近的选项。 1.I have been trying to quit smoking. A.give up B.pick up C.build up D.take up 2.Relief workers were ...

小学六年级英语(牛津)调研卷

   小学六年级英语(牛津)调研卷 学校: 班级: 姓名: 学号: 得分: 一、 ( ( ( ( ( ( ( ( ( 听力部分(30%) 听录音,选出你所听到的单词、词组或句子(播一遍) 10% ) 1. A. work B. walk C. world D. word ) 2. A. mouth B. mouse C. month D. house ) 3. A. problem B. program C. project D. people ) 4. A. concert B. contest ...

《英语(新目标)》的教学与反思

   新目标)》 《英语(新目标 》的教学与反思 英语 新目标 上海外国语大学附属浙江宏达学校 俞小静 各位教研员、各位老师: 上午好!非常高兴能有这样的机会和来自嘉兴市各个县市的同行们交流《英语(新目标) 》的一些体 会。我主要向在座的各位老师介绍一下我们宏达学校七年级英语教师使用《英语(新目标)》过程中对教材 的认识、对于不同教学板块采用的具体教学方法、教材的合理处理、小组合作学习、教学评价以及教学反 思等方面谈一下自己的感受。 一、对于教材的认识 1.1 对教材的整体认识 《英语(新目标) ...

英语写作技巧

   写作模板 辩论式议论文 模版1 Some people believe (argue, recognize, think) that 观点1. But other people take an opposite side. They firmly believe that 观点2. As for me, I agree to the former/latter idea. There are a dozen of reasons behind my belief. First of all, ...

2010中考英语复习课本知识整理七年级上Unit7

   www.xkb1.com 新课标第一网不用注册,免费下载! 2010中考英语一轮复习课本知识整理七年级上 2010中考英语一轮复习课本知识整理七年级上Unit 7 How much are these things? ? 一、单元目标定位 1.重点 词汇 pants裤子;socks 短袜; shorts短裤;sweater毛衣 dollar美元;color颜色; help 帮助,援助;want想要,需要; clothes衣服,服装;shop商店,买东西,购物; yellow黄色的;ask问, ...