Curso sobre la evaluación de la expresión escrita para la Universidad de A Coruña: abril 2013

1. 1
Las pruebas de expresión escrita dentro del
Marco Europeo Común de Referencia para las
Lenguas
Michael Harris 2013 michaellgharris@gmail.com
Contenidos del curso:
A: Introducción: un repaso
B: Una prueba
C: Las especificaciones de una prueba
D: Los instrumentos
E: Taller de estandarización
F: La evaluación de una prueba
G: El futuro
B:#Una#prueba# Evalua#las#dos#respuestas#(1510).#
Responde#a#este#correo#electrónico:#
!
Hola!……..,!
!
Me!llamo!Luisa!y!estoy!muy!contenta!que!eres!mi!nueva!amiga!por!correspondencia.!
Tengo!doce!años!y!voy!al!Ins=tuto!Antonio!Machado!en!Madrid.!
!
Vivo!en!un!barrio!al!norte!de!la!ciudad!en!un!piso!con!mi!madre,!mi!hermano!Daniel,!mi!
perro!Leandro!y!un!hamster.!¡Daniel!=ene!ocho!años!y!es!MUY!pesado!!Vemos!a!nuestro!
padre!algunos!fines!de!semanas!y!vamos!juntos!de!vacaciones!en!agosto.!¿dóndé!vives!tú!
y!cómo!es!tu!familia?!
!
No!me!mola!mucho!el!ins=tuto!pero!sí!me!encantan!los!deportes!y!estoy!en!el!equipo!de!
balonmano.!Soy!portera!y!el!otro!día!paré!dos!penal=es.!Durante!el!verano!juego!el!tenis!y!
mi!heroe!es!Rafa!Nadal.!Le!vi!jugar!el!verano!pasado!y!es!un!=o!MUY!simpá=co.!¿Qué!
deportes!y!aficiones!=enes!tú?!
!
Bueno,!ahora!tengo!que!irme.!Voy!al!cine!con!un!par!de!amigas.!Mañana!iremos!a!una!
fiesta!en!casa!de!una!prima!mía.!Me!encanta!bailar!¿y!tú?!
!
Chau!chao,!
!
Luisa!

2. 2
Hola%Luisa!%
%
Gracias%por%tu%carta.%Estoy%muy%contenta%de%escribir%a%8.%Tengo%trece%años%y%mi%
colegio%esta%Ludlow%School.%No%es%un%gran%colegio.%Tiene%cuatrocientos%alumnos.%
%
Vivo%en%un%pueblo%en%el%centro%de%el%pais.%El%pueblo%es%llamado%Ludlow.%Tiene%diez%mil%
inhabitantes.%Es%un%lugar%lindo%y%8ene%un%gran%cas8llo.%Vivo%en%una%casita.%Vivo%con%mi%
padres%y%mi%hermanos%Toby%y%Dan.%Son%gemelos%y%8enen%diez%y%seis%anos.%%%
%
Mi%colegio%es%muy%bueno.%Mi%favorita%tema%es%ciencia.%Odio%deporte%y%mi%afición%es%
fotografia.%Te%envio%fotos%de%mi%y%mi%familia%en%la%playa.%%Toco%el%piano%y%me%gusta%
mucho%el%soul.%Mi%cantante%favorito%es%Adele.%Es%lo%mejor!!%Me%gusta%bailar%con%mis%
amigos%los%fin%de%semana.%
%
Tengo%que%irme.%Tengo%que%estudiar%por%un%examen%de%matemá8cas.%Y%tengo%que%
estudiar%Español.%No%te%cuento%más%cosas.%Escribame.%
%
Hasta%luego,%
%
Sandra%
Hola%Luisa!%
%
Tu%carta%es%muy%interesante.%Mucha%gracias!!!!!!!!!%%%También%soy%feliz%que%tu%es%mi%nueva%
amiga.%Tengo%dose%como%>%y%mi%colegio%es%Ashton%School%for%Girls.%No%son%chicos!!!!%%
%
Vivo%en%norte%Londres%en%un%pequeno%piso–%no%tengo%hermano%y%hermana.%Mis%padres%son%
Eric%and%Joanna.%No%tengo%animales%pero%quiero%un%pero.%Tiene%suerte%con%tu%Leandro.%Qué%
>po%pero%es?%Londres%es%bonito%pero%llove%y%llove%MUCHO!!!!!%Quero%ir%a%Madrid%en%el%
verano.%Hay%mucha%sol??%
%
Yo%tambien%gusta%deportes.%No%se%el%balomano.%¿Es%diver>da?%Yo%juego%hockey%pero%no%
estoy%portera.%Ayer%hago%dos%goles!!!!!!!%No%juego%tenis%pero%veo%en%TV.%Rafa%Nadal%esta%
muy%bueno%jugador!!!!%Soy%fan%de%Chelsea%tambien%y%quiero%Fernando%Torres%MUCHO.%
Tengo%un%poster%de%Fernando%en%mi%habitación!!!!!%
%
Bueno,%ahora%tengo%que%irme.%Voy%con%mi%madre%a%>endas.%Es%mi%cumpleanos%proxima%fin%
semana%y%vamos%comprar%comida.%Vamos%pasar%bien%y%bailar%MUCHO!!!%
%
Chau%chao,%
%
Anne%

3. 3
Evaluación*oral*vs.*escrita*
1*¿Qué*relevancia*5ene*la*evaluación*de*la*comunicación*
escrita*hoy*en*día?*
2*¿Qué*diferencias*hay*entre*la*evaluación*de*la*expresión*
escrita*y*oral?*
3*¿Qué*problemas*prác5cos*has*tenido*con*la*evaluación*
de*la*expresion*escrita?*
4*¿Es*mejor*integrar*la*evaluación*de*la*expresión*escrita*
con*otras*destrezas?*
5*¿Deberíamos*incluir*la*traducción*como*elemento*para*
evaluar?*
6*¿Cómo*ha*cambiado*la*comunicación*escrita*en*los*
úl5mos*15*años?*
C:#LAS#ESPECIFICACIONES#
Descriptores en el MCER Fuente:'Ian'Wood''Pearson'Educa2on'
70
60
50
40
30
20
10
0
Compr. escrita Compr. oral Expr. Oral Expr. escrita
· 441 descriptores A1-B2+ · 286 expr. Oral (65%) · 284 nivels B (65%)
· 89 descriptores nuevos (Escala General Pearson)

4. 4
Centro Virtual Cervantes

5. 5
TAREAS&ESCRITAS&
Mensajes cortos: LA)REVOLUCIÓN)ELECTRÓNICA)
notas en papel
sms/whatsapp/comentarios en Facebook/blog/conferencias/correo electrónico/
comentarios sobre películas/libros/hoteles/restaurantes etc.
Rellenar formularios/cuestionarios
Mensajes más largos:
Informes/comunicados/carteles
Cartas/postales
Centro Virtual Cerelectrónico
Cartas por correo vantes
ArtículosVirtual Cervantes
Centro periodísticas/críticas/descripciones
Redacciones/trabajos académicos
Entradas de blog/presentaciones online/glogster
Narrativa: relatos/anécdotas
Poemas/letras de canciones
Instrucciones/folletos
Wikis/documentos abiertos
ÁMBITOS:))Público))Ocupacional)))Educacional))Personal)
TEMAS:))ej.)aficiones)/)vacaciones)/)la)cultura)etc.)
)
¿QUÉ TAREAS NECESITAN REALIZAR LOS CANDIDATOS?

6. 6
Centro Virtual Cervantes
Centro Virtual Cervantes
Centro Virtual Cervantes

7. 7
ESTRATEGIAS DE LA COMUNICACIÓN ESCRITA
Planificación
Preparación
Localización de recursos
Centro Virtual Cervantes
Centro Virtual Cervantes
Atención al destinatario
Reajuste de la tarea
Reajuste del mensaje
Ejecución
Compensación
Apoyo en los conocimientos previos
Intento
Evaluación Control del éxito
Corrección Autocorrección

8. 8
Como$establecer$los$obje.vos$para$una$prueba$
1. Establecer,una,lista$de$obje.vos$y$contenidos$para,los,exámenes:,dominios,,ámbitos,y,usos/temas/
nivel/;po,de,comunicación,y,funciones/estrategias/aspectos,cualita;vos.,Estos,obje;vos,deben,ser,
públicos.,,
2. Eligir,del,“documento,base”,unos,obje;vos,para,una,nueva,prueba,de,comunicación,escrita:,
,
¿Qué$es$la$situación$comunica.va?$
AD,ÁMBITO:………………………………………………………………….………………………….,
BD,TEMAS:………………………………………………………………………………………………..,
CD,TIPO,DE,TEXTO:……………………………………………………………………………………,
,
¿Qué$puede$hacer$el$alumno?$
$
CD,ACTIVIDADES,COMUNICATIVAS,(;po,de,comunicación/funciones):,
i………………………………………………………………………..,
ii………………………………………………………………………..,
iii……………………………………………………………………….,
DD,ESTRATEGIAS:…………………………………………………………………………………….,
,
¿Cómo$lo$puede$hacer?$
ED,,
GRADO,DE,EXPRESIÓN,(producción/interacción),………………………………………………………,,,,,
GRADO,DE,COMPRENSIÓN,(interacción)………………………………………………………………,.,
,
D:#LOS#INSTRUMENTOS#DE#EVALUACIÓN
Consideraciones+prác.cas!
1:+TAREAS+
2:+CONDICIONES+
a) formato:!¿papel!o!electrónico?!
b) apoyo:!diccionario!/!acceso!a!Internet!/!apuntes!
c) número!de!tareas!
d) ;empo!
e) vigilancia!
Planifica+una+prueba+escrita+a+nivel+B1+

9. 9

10. 10
LAS$COMPETENCIAS$DE$LA$EXPRESIÓN$ESCRITA$
$
$!
Competencia$comunica;va:$$
1!relevancia!del!contenido!para!el!contexto!!!
2!adecuación!del!contenido!para!el!contexto:!lenguaje/es6lo/registro/referencias!culturales!
(competencia!sociolingüís6ca)!
!
Competencia$interac;va:$
capacidad!de!comprensión!del!texto!al!que!responde!(carta/ar>culo!etc.)!
capacidad!de!entablar!un!diálogo:!comentar/pedir!opiniones!!
!
Competencia$discursiva:$
coherencia!(desarrollo!del!tema!/!organización!discursiva!ej.E!!parafos)!!
cohesión!(uso!de!marcadores!de!discurso)!
!
Competencia$lingüís;ca:$
corrección!léxica3/3grama6cal!/!ortográfica!!!
complejidad!(‘riqueza’)!lingüís6ca!!(sintác6ca/léxica)!
!
¿Qué$elementos$evalúas$en$tus$exámenes$?$¿Cuáles$son$los$más$fáciles$para$evaluar?$¿Cuáles$$
son$los$más$diMciles$
Centro Virtual Cervantes

11. 11
Centro Virtual Cervantes
Centro Virtual Cervantes

12. 12
Centro Virtual Cervantes
Centro Virtual Cervantes

13. E:#TALLER#DE#ESTANDARIZACIÓN 13
MENSAJE* B.1:"un"baremo"provisional"
5"Transmite"un"mensaje"muy"claro,"relevante"y"adecuado"al"contexto"y"la"tarea.""
4"Transmite"un"mensaje"bastante"claro"y"adecuado"al"contexto"y"la"tarea."
3*Transmite*un*mensaje*que,*en*general,*es*relevante*y*adecuado*al*contexto*y*la*tarea.*B.1.*
2"Su"mensaje"no"es"lo"suficientemente"claro"ni"adecuado"al"contexto"y"la"tarea."
1"Tiene"muchos"problemas"para"comunicar"un"mensaje"comprensible"y"adecuado."
INTERACCIÓN""(depende%de%la%tarea)*
5"Su"mensaje"con3ene"todos"los"elementos"necesarios"para"responder"a/iniciar"un"diálogo"con"su"interlocutor."
4"Cubre"la"mayor"parte"de"los"elementos"necesarios"para"responder"a/iniciar"un"diálogo"con"su"interlocutor.""
3*Cubre*suficientes*elementos*necesarios*para*responder*a/iniciar*un*diálogo*con*su*interlocutor.*B.1.*
2"Faltan"elementos"importantes"para"responder"a/iniciar"un"diálogo"con"su"interlocutor."
1"No"es"capaz"de"entablar"un"diálogo"con"su"interlocutor."
COHERENCIA*Y*COHESIÓN*
5"Su"texto"es"cohesivo"(ej."conectores/puntuación)"y"con"un"buen"desarrollo"y"una"estructura"muy"clara"(ej."párrafos).""
4"La"mayor"parte"de"su"texto"es"cohesivo"y"con"un"desarrollo"lógico"una"estructura"razonablemente"clara.""
3*Enlaza*los*disBntos*elementos*en*su*texto*para*crear*una*secuencia*suficientemente*cohesionada*y*coherente.*B.1.*
2"Es"diRcil"seguir"su"texto"porque"en"partes"es"poco"coherente"y"cohesionado."
1"Su"texto"es"poco"coherente"y"cohesivo."
COMPETENCIA*LINGÜÍSTICA**
5"Demuestra"un"repertorio"lingüís3co"amplio"para"realizar"la"tarea"con"precisión"y"casi"sin"errores."
4"Demuestra"un"repertorio"lingüís3co"suficiente"para"realizar"la"tarea"con"razonable"precisión"y"con"pocos"errores."
3*Demuestra*suficientes*recursos*lingüísBcos*para*realizar*la*tarea*con*suficiente*precisión*y*sin*errores*que*dificultan*la*
comprensión.*(B.1.1.)*
2"Le"falta"los"recursos"lingüís3cos"para"realizar"la"tarea"y"sus"errores"dificultan"la"comprensión."
1"Tiene"pocos"recursos"lingüís3cos"y"comete"errores"básicos"sistemá3camente."
Fiabilidad!!
• reunir!el!seminario!de!profesores!
• entregar!los!baremos!provisionales!
• distribuir!las!redacciones!a!cada!profesor/a!
• la!evaluación!por!el/la!profesor/a!!
• comparar!las!evaluaciones!!
• modificar!el!baremo!si!es!preciso!

14. 14
TALLER"DE"ESTANDARIZACIÓN"
1"Lee"cada"redacción"dos"veces."
"
2"U2liza"el"baremo"para"evaluar"la"redacción:"
"
:"mensaje" " " " "…../5""""
:"coherencia/cohesión" "…../5"
:"competencia"lingüís2ca"" "….../5"
"
3"¿Qué"redacciones"corresponden"a"un"nivel"B1?"
Enumera"las"razones"para"tus"decisiones."
"
"
4"Compara"tus"evaluaciones"con"el"grupo."
"
" TAREA%2%
"
Escribir%un%%
sinopsis%de%%
Paperman(
(corto%de%%
Disney)%

15. 15
A"
B"

16. 16
C"
D"

17. TAREA%2 17

18. 18
B"
C"

19. 19
D"

20. 20
F:#EVALUACIÓN#DE#UNA#PRUEBA!
Válidez!de!la!
prueba!
Fiabilidad!
Viabilidad!
Transparencia!
A Socio-cognitive Framework for Tes
Validation (Weir 2005)
Un#marco#socio+
cogni-vo#para#la#
validación#de#
pruebas##(Weir#
2005)#
6
Galaczi#and#Ffrench#2009#

21. 21
Los$resultados:$
¿Qué$conclusiones$puedo$sacar$$
de$los$resultados$sobre$la$prueba$$
oral?$
$
$
Polígonos(de(frecuencia(

22. 22
Fiabilidad:(entre(correctores(/(entre(el(
mismo(corrector ((
Método(2(mitades:(Spearman7Brown(
Kuder(Richardson(20(/(Cronbach(Alpha(
(
Análisis'de'ítems:''coeficiente'de'
dificultad'/'índice'de'discriminación''

23. 23
1/)Válidez)
La)aceptación)de)la)prueba))) Factores)para)evaluar
)
(válidez)externa))
Las)espeficaciones)y)la)realidad)de)la)prueba)(válidez)de)contexto))
¿Una)muestra)adecuada)de)los)contenidos?)(válidez)de)contenido))
Predicción)de)rendimiento)futuro)de)los)candidatos)(válidez)predicDva))
2/)Fiabilidad)
Fiabilidad)entre)los)diferentes)asesores)en)la)evaluación.))
¿Siguieron)los)mismos)procedimientos)en)la)misma)forma?)
Análisis)de)las)diferentes)tareas)(facilidad/discriminación))y)items)(ej.)preguntas))en)la)
prueba.)(¿Una)tarea)es)demasiado)fácil)o)diLcil?)))
3/)Viabilidad)
Uso)de)los)recursos)humanos)(profesores/personal)administraDvo))
Uso)de)locales)/)equipos))))))Coste)de)la)prueba))
4/)SaDsfacción)con)la)prueba)
Candidatos:*a)*información)sobre)la)prueba)/)objeDvos)/)ejemplos))b))administración)
de)la)prueba)c))opiniones)sobre)la)prueba)(disDntas)tareas))
Profesores:*sus)opiniones)sobre)la)prueba)))Empresarios:)valor)para)el)mercado)de)
trabajo)
CUESTIONARIO+++++++++++++++++++++++++++++++++
+
1+¿Cuál+fue+la+sa5sfacción+de+los+alumnos+con+la+
prueba?+
2+¿Qué+opinión+tuvo+el+profesorado+que+
administró+la+prueba?+
3+¿Cómo+funcionó+la+administración+de+la+
prueba?+¿Fue+una+prueba+viable?+
4+¿Evaluó+la+prueba+lo+que+pretendía+evaluar?+
5+¿Hubo+acuerdo+entre+los+diferentes+asesores?+
6+¿Funcionaron+todas+las+partes+de+la+prueba+de+
forma+igual?+(facilidad/discriminación)++

24. G:#¿El$futuro?! 24
!
1!¿Qué!usos!hay!para!las!
pruebas!informa5zadas!
en!el!centro!de!idiomas!
de!la!Universidad!de!A!
Coruña?!
!
2!¿Qué!ventajas!y!
desventajas!5enen!!
!!!!estas!pruebas?!!

25. 25
Diseño'de'pruebas:!
Alderson,!J.C.,!Clapham,!C.!and!Wall,!D.!(1995)!Language'Test'Construc/on'and''
Evalua/on.'Cambridge:!CUP.!
Bachman,!L.F.!(1990)!Fundamental'Considera/ons'in'Language'Tes/ng:!Oxford:!Oxford!!
University!Press!
Bachman,!L.F.!and!Palmer,!A.S.!(1996)!Language'Tes/ng'in'Prac/ce''Oxford:!Oxford!!
University!Press!
Bailey,!K.!(1998)!Learning'about'Language'Assessment:'Dilemmas,'Decisions'and''
Direc/ons.!Boston,!MA:!Heinle!&!Heinle!
J.D.!Brown!(1988)!Understanding'Research'in'Second'Language'Learning'!Cambridge:!!
Cambridge!University!Press!
J.D.!Brown!(1992)!StaSsScs!as!a!Foreign!LanguageU!Part!2!TESOL'Quarterly'vol.!26/4!
Carroll,!B.J.!(1980)!Tes/ng'Communica/ve'Performance'!Oxford:!Pergamon!
Carroll,!B.J.!and!P.J.!Hall!(1985)!'Make'your'own'language'tests:''a'prac/cal'guide'to''
wri/ng'language'performance'tests.'!Oxford:!Pergamon.!
Davies,!A.!(1990)!Principles'of'Language'Tes/ng'!Oxford:Blackwell.!
Galaczi,!E.!and!Ffrench,!A.!(2009)'Inves/ga/ng'the'Context'Validity'of'Speaking'Tests''within'a'SocioN'
cogni/ve'Framework''www.cambridgeesol.org/assets/pdf/whatNwe.../research_update5.pdf'!
Hill,!C.!and!Parry,!K.!(1995)!From'Tes/ng'to'Assessment'!London:!Longman!
Hughes,!A.!(1989)'Tes/ng'for'Language'Teachers''Cambridge:!Cambridge!University!!
Press!
Spolsky,!B.!(1989)!CommunicaSve!Competence,!Language!Proficiency!and!Beyond.!!
Applied'Linguis/cs''Vol'10/2'!
Weir,!C.J.!(1988)!Communica/ve'language'tes/ng.!Exeter:!University!of!Exeter.!
Weir,!C.J.!(2005)!Language'Tes/ng'and'Valida/on'''Oxford:!Palgrave!Macmillan!
'
La#expresión#escrita:#
Amena,#M.#(2005).'Iden,fying'the'processes'of'assessing'wri,ng'using'an'analy,c'marking'criteria.'In'P.'Davidson,'C.'Coombe,'&'W.'Jones'
(Eds.),'Assessing'second'language'wri0ng'in'academic'contexts'(pp.'225H249).'Norwood,'NJ:'Ablex.'
Bloch,#J.#(2001).'Plagiarism'and'the'ESL'student:'From'printed'to'electronic'texts.'In'D.'Belcher'&'A.'Hirvela'(Eds.),'Linking'literacies:'
Perspec0ves'on'L2'reading;wri0ng'connec0ons'(pp.'209–'228).'Ann'Arbor,'MI:'University'of'Michigan'Press.'
Caudry,#T.#(1989)'The'validity'of',med'essay'tests'in'the'assessment'of'wri,ng'skills,'ELTJ'Vol'44,'Issue'2'pp'122H131'
Cumming,#A.#(1997).'The'tes,ng'of'secondHlanguage'wri,ng.'In'C.'Clapham'(Ed.),'The'encyclopedia'of'language'and'educa0on:'Volume'7.'
Language'assessment'(pp.'51H63).'Dordrecht,'The'Netherlands:'Kluwer.'
Eguiluz,#J.#y#De#Vega,#C.#(1990):'“Una'propuesta'de'criterios'para'la'valoración'de'la'Expresión'Escrita”.'Actas'del'I'Congreso'del'Estudio'del'
Español.'Ediciones'Universidad'de'Salamanca,'Salamanca.''
Eguiluz,#J.#y#De#Vega#(2009)'Criterios'para'la'Evaluación'de'la'Producción'Escrita,'marcoELE.'ISSN'1885H2211'/'núm.'9''
HampDLyons,#L.#(1991).'Assessing'second'language'wri0ng'in'academic'contexts.'Norwood,'NJ:'Ablex.'
HampDLyons,#L.#(1996).'The'challenges'of'secondHlanguage'wri,ng'assessment.'In'E.'M.'White,'W.'D.'Lutz,'&'S.'Kamusikiri'(Eds.),'Assessment'of'
wri0ng:'Poli0cs,'policies,'prac0ces'(pp.'226H240).'New'York:'Modern'Language'Associa,on.''
Hinkel,#E.#(2011).'What'research'on'second'language'wri,ng'tells'us'and'what'it'doesn't.''In'E.'Hinkel'(Ed.),'Handbook'of'Research'in'Second'
Language'Teaching'and'Learning'Volume'2'(pp'523H538).'New'York:Routledge.''
Kress,#G.'(1998).'Visual'and'verbal'modes'of'representa,on'in'electronically'mediated'communica,on:'The'poten,als'of'new'forms'of'text.'In'
I.'Snyder'(Ed.),'Page'to'screen:'Taking'literacy'into'the'electronic'era'(pp.'53–79).'London:'Routledge.'
Kroll,#B.#(Ed.).'(1990).'Second'language'wri,ng:'Research'insights'for'the'classroom.'Cambridge,'UK:'Cambridge'University'Press.'
Kroll,#B.#(1998).'Assessing'wri,ng'abili,es.'Annual'Review'of'Applied'Linguis0cs,'18,'219H240.'
Lumley,#T.'(2002).'Assessment'criteria'in'a'largeHscale'wri,ng'test:'What'do'they'really'mean'to'the'raters?'Language'Tes0ng,'19(3),'246H276.'
Shaw,#S.#D.,#&#Weir,#C.#J.#(2007).'Examining'wri0ng:'Research'and'prac0ce'in'assessing'second'language'wri0ng.'Cambridge:'Cambridge'
University'Press.''
Walker,#R.#and#Pérez#Riu,#C.#(2008)'Coherence'in'the'assessment'of'wri,ng'skills.'ELTJ'Vol'62,'Issue'1'
Weigle,#S.#C.'(2002).'Assessing'wri0ng.''Cambridge:''Cambridge'University'Press.'''
White#E.#(1994)'Teaching'and'Assessing'Wri0ng.'San'Francisco:'JosseyHBass.'#
Enlaces:#
Abril#Villalba,#M#Sobre'evaluación'de'la'expresión'escrita:'deficiencias,'insuficiencias'y'actualización'
hWp://biblioteca.universia.net/html_bura/ficha/params/0tle/evaluacion;expresion;escrita;deficiencias;insuficiencias;actualizacion/id/
52822203.html''
Foreign'language'wri,ng:'assessment'hip://coerll.utexas.edu/methods/modules/wri,ng/04/scoring.php'
Gómez#Arévalo,#LE#(2009)'La'evaluación'de'la'Expresión'Escrita'en'Castellano'
hip://www.slideshare.net/ptorres/laHevaluacinHdeHlaHexpresinHescritaHenHcastellanoH1070254''

26. 26
Marco&Comun&Europeo:&
CEF$Construct$Project$(2005)$h5p://www.ling.lancs.ac.uk/groups/ltrg/oldprojects/construct.htm$$
CEFTrain$h5p://www.ceCrain.net/$(con$CD$Rom$en$ingles$y$acGvidades$de$formación)$
Figueras,&N.,&North,&B.,&Takala,&S.,&Van&Avermaet,&P.,&Verhelst,&N.$(2003)$$
Rela%ng(Language(Examina%ons(to(the(CEF.(Manual(Preliminary(Pilot(Version.DGIV/EDU/LANG$+$
Figueras,&N.&(2005).$«El$Marco$común$europeo$de$referencia$para$las$lenguas:$de$la$teoría$a$la$
prácGca»,$en$Carabela,$57,$Madrid:$SGEL.$
Figueras,&N.&(2005)$‘El$Marco$Común$de$Referencia,$de$la$teoría$a$la$pracGca.’$Revista(Carabela,$n.57$SGEL$
Figueras,&N.&(2006$)$La(Evaluación(Dentro(y(Fuera(del(aula:(retos(planteados(por(el(MCER$$$
XIV$Encuentro$PrácGco$de$Profesores$de$ELE$$h5p://www.encuentroa$
pracGco.com/pdf05/figueras.pdf$$
LiBle,&D&(ed).$(2002)$European$Language$Porcolio$in$Use:$Nine$examples$+$Marco$Común$Europeo$de$$
Referencia$para$las$Lenguas$$cvc.cervantes.es/obref/marco/cvc_mer.pdf$$$$$
Martyniuk,&W.&(ed)$(2010)$Aligning$Tests$with$the$CEFR$$$Studies(in(Language(Tes%ng(33((Cambridge:$$
CUP$$
Milanovitch,&M.&(2002)$Language(Examining(and(Test(Development(Strasbourg:(Language(Policy(Division((
Milanovitch,&M&and&Weir,C.&(eds)$(2010)$Studies(in(Language(Tes%ng(33:(Aligning(Tests(with(the(CEFR((
Cambridge:$CUP$
Morrow,&K.&(2004)$Insights(from(the(Common(European(Framework$$Oxford:$Oxford$
University$Press$
hLp://www.coe.int/t/dg4/linguis%c/Publica%ons_EN.asp#P101_3402($
Trujillo&Sáez,&F&&Marco(Común(Europeo(para(las(Lenguas(y(PorVolio(Europeo(de(Lenguas.$$$
h5p://www.pnte.cfnavarra.es/eibz/porcolio/agenda/tenerife/ponencia_peltene_mat_fer_tru.p$
df$$
DVD$(Ingles/Italiano/Francés)$–$entrevistas$con$comentarios$–$$información:$
h5p://www.coe.int/T/DG4/Porcolio/?L=E&M=/main_pages/illustraGonse.html$&
Evaluación*y*Tecnología:*
!
A3ali,*Y.,*&*Burstein,*J.*(2006).!Automated!Essay!Scoring!with!e;rater!V.2.!Journal(of(Technology,(Learning,(and(ç(
Assessment((JTLA),(4(3).!
Alderson,*J*(2000)!‘Technology!in!TesAng:!the!Present!and!the!Future.!System.!28/4!593;603!!
Burstein,*J.!(2003).!The!e;rater!scoring!engine:!Automated!essay!scoring!with!natural!language!processing.!In!M.!D.!
Shermis!&!J.!C.!Burstein!(Eds.),!Automated(essay(scoring:(A(cross(disciplinary(approach((pp.!113–121).!Mahwah,!NJ:!
Lawrence!Erlbaum!Associates.!!
Chapelle,*C.A.*and*Douglas,*D.*(2006)!Assessing(Language(through(Computer(Technology!!Cambridge:!Cambridge!
University!Press!
Chung,*Gregory*K.W.K.,*and*Eva*L.*Baker*(2003).!"Issues!in!the!Reliability!and!Validity!of!Automated!Scoring!of!
Constructed!Responses",!p.!23.!In:!Automated(Essay(Scoring:(A(CrossADisciplinary(PerspecDve.!Shermis,!Mark!D.,!and!Jill!
Burstein,!eds.!Lawrence!Erlbaum!Associates,!Mahwah,!New!Jersey,!!
Cizek,*G.*J.,*&*Page,*B.*A.!(2003).!The!concept!of!reliability!in!the!context!of!automated!essay!scoring.!In!M.!D.!Shermis!&!!
J.!Burstein!(Eds.),!Automated(essay(scoring:(A(crossAdisciplinary(perspecDve((pp.!125–145).!Mahwah,!NJ:!Lawrence!!
Erlbaum!Associates.!
Landauer,*T.*K.,*Laham,*D.,*&*Foltz,*P.*W.*(2003).!Automated!Essay!Scoring:!A!cross!disciplinary!perspecAve.!In!M.!D.!!
Shermis*&*J.*C.*Burstein*(Eds.),!Automated(Essay(Scoring(and(annotaDon(of(essays(with(the(Intelligent(Essay(Assessor((
(pp.!87–112).!Mahwah,!NJ:!Lawrence!Erlbaum!Associates.!
Shermis,*Mark*D.,*Jill*Burstein,*and*Claudia*Leacock!(2006).!"ApplicaAons!of!Computers!in!Assessment!and!Analysis!of!!
WriAng",!p.!403.!In:!Handbook(of(WriDng(Research.!MacArthur,!Charles!A.,!Steve!Graham,!and!Jill!Fitzgerald,!eds.!!
Guilford!Press,!New!York,!
Wang,*Jinhao,*and*Michelle*Stallone*Brown!(2007).!"Automated!Essay!Scoring!Versus!Human!Scoring:!A!ComparaAve!!
Study",!p.!6.!Journal!of!Technology,!Learning,!and!Assessment,!6(2)!
Enlaces:*
Automated!Essay!Scoring!hep://en.wikipedia.org/wiki/Automated_essay_scoring!*
Análisis!de!herramientas!para!diseñar!pruebas!informaAzadas:!
hep://balrog.sdsu.edu/~wstrombe/test_authoring_systems.htm!!
Dikli,*Semire*(2006).!"An!Overview!of!Automated!Scoring!of!Essays".!Journal!of!Technology,!Learning,!and!Assessment!
5(1)(
TOEFL(h"p://www.sp.toefl.eu.