Download Comentario sobre el examen ¿Cuál es la impresión holística de este

Comentario sobre el examen
1. ¿Cuál es la impresión holística de este examen? ¿Tiene validez de aspecto?
El examen crea un todo a través de una situación parecida a la realidad. Las estructuras que se
evalúan están estrechamente ligadas al texto auditivo, así como a la producción escrita. Además,
la comprensión escrita, por ejemplo, se evalúa a través de los diálogos y las situaciones que el
alumno debe entender para poder resolver las actividades gramaticales; de este modo, el examen
está diseñado a partir del punto de vista holístico.
La prueba tiene validez de aspecto porque los elementos a evaluar aparecen claramente en cada
reactivo.
2. A partir del análisis del contenido determinar el nivel de conocimiento que se
intenta evaluar.
De acuerdo la dificultad de los contenidos gramaticales, la prueba evalúa la posesión de un nivel
A2. La mayoría de los temas gramaticales se evalúan a nivel de comprensión y sólo uno a nivel
de aplicación:
TABLA DE ESPECIFICACIONES
Nivel de
conocimiento
Contenido definido
operacionalmente
1. Uso de los verbos ser Identifica
y estar
Comprensión
El alumno sólo debe identificar,
por medio del contexto, el
verbo correcto.
2. Verbos con
indirecto
Comprensión
Los verbos ya están dados y el
alumno
sólo
tiene
que
conjugarlos
y
elegir
el
pronombre indirecto de acuerdo
al contexto.
3. Uso del presente del Identifica
indicativo
o
del
subjuntivo
Aplicación
El alumno selecciona el modo
verbal adecuado y después
escribe alguna idea libre a partir
del input que se le da.
4. Uso de pronombres Identifica
directos e indirectos
Comprensión
El alumnos debe identificar el
objeto directo y/o el indirecto
para después transformarlo(s)
en el pronombre adecuado.
de
5. Uso
pronominales
verbos Identifica
Comprensión
Los verbos ya están dados y el
alumno
sólo
tiene
que
escribirlos en la forma correcta.
6. Uso de pretérito e Identifica
imperfecto
Comprensión
De acuerdo al contexto
seleccionar la forma adecuada.
Componente
Acción
objeto Identifica
7. Comprensión
Identifica
selectiva de un texto
auditivo
N/A
Escuchar un texto y numerar los
elementos de acuerdo a la
secuencia en la que aparece.
8. Comprensión
Discrimina
detallada de un texto
auditivo
N/A
Responder a preguntas del tipo
verdadero/falso de acuerdo al
texto escuchado.
9. Redacción
descripción
ciudad
Aplicación
De acuerdo a la actividad
elegida,
redactar
una
descripción.
de
la Redacto
de una
3. Explicar qué tipo de reactivos se emplean y justificarlos.
En las actividades 1, 2, 5 y 6 se utiliza el cloze de supresión selectiva, se eliminaron los verbos
que conforman la base gramatical que se está evaluando.
El ejercicio 3 utiliza el formato de respuesta abierta, al igual que la producción escrita (9).
En el 4 se trata de sustitución de ciertos elementos en las oraciones.
El primer ejercicio de comprensión auditiva presenta el formato de ordenamiento (cronológico
de acuerdo a como aparecen en la grabación), y el segundo es de verdadero / falso.
4. A partir del análisis de reactivos, ¿cuáles podría disminuir la confiabilidad?
En el primer ejercicio no está indicado que se deba responder con los verbos ser o estar y, en
realidad, caben otras opciones que harían difícil la calificación por parte del profesor.
Al ser un ejercicio para complementar libremente, el 3 (indicativo/subjuntivo) puede ser
inexacto ya que la respuesta de cada alumno será diferente y la evaluación será, por ende, un
tanto subjetiva.
Dado que los ejercicios 2, 5 y 6 (cloze selectivo) tienen indicada el verbo a conjugar, en realidad
no se está evaluando ni comprensión de lectura ni habilidad léxica.
La parte de comprensión auditiva no tiene indicado cuántas veces debe escucharse el programa
radiofónico, lo que provocaría que algunos profesores lo reproduzcan una sola vez y otros dos o
más, creando diferencias de oportunidad entre los diferentes grupos.
Además, la segunda actividad de la prueba puede ser resuelta sin haber escuchado el texto
auditivo.
En la redacción, es poco confiable dar la indicación de escribir 15 reglones, sería mejor dar un
número de palabras y/o ciertos temas que se deben tocar. Además, los alumnos pueden elegir
entre dos temas que tienen diferente grado de dificultad por requerir estructuras y léxico
diferentes.
5. ¿Cuáles habilidades se intenta medir con ese instrumento?
Comprensión auditiva, expresión escrita, sintaxis e indirectamente comprensión de lectura.
6. El léxico empleado en las instrucciones es adecuado al nivel que se pretende
evaluar?
El léxico me parece correcto. Sin embargo, las instrucciones no son claras en cuanto a lo que se
le pide al alumno; por ejemplo, en la primera actividad dice “complete el diálogo entre ambas
amigas”, pero no está indicado si sólo se debe usar los verbos ser y estar o si también es posible
responder con otros.
7. ¿Qué baremo podríamos utilizar para puntuar la expresión escrita?
Actividad
Cumplió con
objetivos
de
actividad: 3
los La descripción
la pobre: 2
fue La actividad no se
cumplió: 0
Coherencia
y Las ideas del texto están unidas El texto carece de cohesión y/o
coherentemente con conectores y lógica: 0
adhesión del texto
tienen un orden lógico: 2
Contenido léxico
Léxico amplio
variado: 2
y Léxico repetitivo y no Carente de léxico
suficientemente
suficiente
para
exacto: 1
realizar la actividad: 0
El uso de estructuras
Estructura
fue correcto: 3
(morfología,
sintaxis, ortografía,
puntuación)
Las estructuras no
siempre
fueron
correctas pero no
interfirieron en la
comprensión
del
texto: 2
Los
estructurales
permiten
comprensión
texto: 0
errores
no
la
del
Total: ____ / 10
8. Para responder las preguntas de Comprensión auditiva, ¿sería necesario, para el
extranjero, escuchar el texto?
La segunda actividad se puede resolver sin escuchar el texto, lo que reduce la confiabilidad de la
prueba.
9. ¿Podríamos considerar que la evaluación de Comprensión de lectura está implícita
en la resolución del examen?
Sí, porque para resolver algunos de los ejercicios gramaticales (1 y 6) es necesario entender el
texto.
10. Haz un comentario libre y amplio, justificando tus opiniones sobre el instrumento.
La mayoría de los ítems requieren poco cambio para tener un nivel de confiabilidad adecuado,
además se podría evaluar léxico si en los ejercicios 2, 5 y 6 se eliminaran los verbos de debajo
de cada espacio o si se pusieran todos juntos en una caja antes o después del texto para que el
alumno tenga que seleccionar el que complete adecuadamente la idea porque algunos de esos
ejercicios son demasiado mecánicos y no requieren un dominio de la estructura.
En las instrucciones debe estar explícito lo que se pide que haga el alumno; si bien el profesor
puede explicar cada uno de los ítems al iniciar la prueba, de cualquier modo los alumnos tienen
siempre dudas y van a preguntar innumerables veces lo mismo (experiencia personal).
La manera en que está planteada la redacción no es confiable por varias razones: la alternativa a
elegir crea desigualdad de oportunidades; 15 renglones es una medida demasiado arbitraria;
tomando un solo tema, debería haber preguntas guía o puntos a seguir en los que se
“condicione” el tipo de información que se solicita del alumno, por ejemplo:
Describa una ciudad que conozcas. Habla sobre los siguientes temas:

Localización

Historia

Sitios de interés
De este modo, el alumno tendrá que usar presente para la localización, pasado e imperfecto para
la historia e imperativo o subjuntivo para los sitios de interés.