文章基本信息

标题：Developing a Coherent System for the Assessment of Writing Abilities: Tasks and Tools
本地全文：下载
作者：Muñoz, Ana Patricia ; Mueller, Jonathan ; Álvarez, Martha E. 等
期刊名称：Íkala
印刷版ISSN：2145-566X
出版年度：2009
卷号：11
期号：1
页码：265-307
语种：English
出版社：Escuela de Idiomas
摘要：This article discusses the design and validation of a writing assessment system. Two main processes are addressed: validation of the construct and the writing test prompts, and design and validation of scoring instruments. Construct validation included defining and aligning the construct, the standards, and the nature of the assessment tasks. The validation of tasks was determined by analyzing task content against a set of criteria to design appropriate writing tasks and by surveying students' understanding of the prompts. Finally, scoring rubrics were designed based on the standards and the construct. To validate the rubrics, their alignment with the construct and the standards was established, as well as the estimation of their inter-rater reliability (r = > 0,7).Key words: writing standards, construct validity, writing prompts, inter-rater reliability, rubrics Este artículo presenta el proceso de diseño y validación de un sistema para la evaluación de la escritura. Se discuten dos procesos centrales: validación del constructo y de las instrucciones de escritura en las pruebas evaluativas, y diseño y validación de las herramientas de evaluación. La validación del constructo requirió su definición y alineación con los estándares de escritura y con las tareas evaluativas. Para validar las tareas se analizó su contenido, respondiendo a un conjunto de criterios para el diseño apropiado de actividades de escritura y encuestando a los estudiantes participantes sobre su comprensión de las instrucciones. Por último, se diseñaron rúbricas como herramientas de medición, y su validez se determinó mediante la alineación con los estándares y el constructo, y la estimación de la confiabilidad interna entre evaluadores (r > 0,7). Palabras clave: estándares de escritura, validez del constructo, instrucciones para la escritura, confiabilidad interna, rúbricas. Cet article présente le développement et la validation d'un système d'évaluation de l'écrit. L'on présente deux processus essentiels qui sont la validation du construct linguistique et des tâches évaluatives puis l'élaboration et la validation des instruments évaluatifs. La validation du construct a été déterminée à travers sa définition et son alignement avec les standards d'écriture par niveau de suffisance, et avec les tâches évaluatives. Afin de valider ces dernières, nous avons analysé leur contenu en répondant à des critères pour le développement des activités évaluatives appropriées et en demandant aux étudiants leur compréhension des instructions écrites. Nous avons élaboré des grilles d'évaluation et leur validité a été définie selon leur alignement avec les standards, le construct et l'estimation de fiabilité interne chez les évaluateurs (r > = 0.7). Mots clés: standards d'écriture, validité du construct, tâches évaluatives de l'écrit, fiabilité interne, rubriques
关键词：writing standards; construct validity; writing prompts; inter-rater reliability; rubrics