Introducción
La retroalimentación formativa es un procedimiento instruccional consistente en ofrecer información sobre el rendimiente los estudiantes para mejorar su aprendizaje (Narciss et al., 2014; Shute, 2008). Eiseñe entornos digitales de aprendizaje permite proporcionar retroalimentación formativa en tiempo real. Sin embargo, hay muy poca investigación sobre el uso que los estudiantes hacen de esta información. Un problema añadido es la variabilidae tipos de retroalimentación existente. Siguiendo a Narciss (2013) y Shute (2008) podemos diferenciar entre retroalimentación de verificación (Knowledge of Response o KR), de respuesta correcta (Knowledge of Correct Response o KCR) y retroalimentación elaborada (Elaborated Feedback o EF). La retroalimentación KR incluye exclusivamente información de verificación de respuestas (correct incorrecto), mientras que la retroalimentación KCR incluye además la respuesta correcta (la alternativa X es la solución correcta) y la retroalimentación EF incluye información adicional como, por ejemplo, explicaciones sobre la respuesta. Aunque EF es el tipe retroalimentación más efectivo en entornos digitales (van der Kleij, Feskens y Eggen, 2015), sus efectos no son automáticos, sino que los aprendices deben decidir procesar activamente su información (Bangert-Drowns, Kulik, Kulik y Morgan, 1991). EF suele proporcionarse junto a retroalimentación KR o KCR, aunque no siempre es así (p. ej., se pueden dar explicaciones o pistas sobre por qué una respuesta es correcta o incorrecta, sin mencionar explícitamente la respuesta correcta). Por tanto, cabe preguntarse en qué medida la retroalimentación KR y KCR afecta a la decisión de acceder voluntariamente a EF. Este es el principabjetivel presente estudio. De forma complementaria, este estudio también examina el efecte estos tipos de retroalimentación en el aprendizaje de conocimientos conceptuales en el área de física.
Habitualmente los profesores asignan a sus alumnos tareas en las que han de responder preguntas sobre los contenidos de un varios textos (Ness, 2011). La razón es que estas tareas inducen procesos de comprensión que facilitan el aprendizaje (Anmarkrud, McCrudden, Bråten y Strømsø, 2013; Cerdán, Gilabert y Vidal-Abarca, 2011; Roelle y Berthold, 2017). Además de estos procesos cognitivos de comprensión (p. ej., hacer inferencias), responder preguntas de un texto también implica activar procesos metacognitivos propios de la resolución de problemas (p. ej., búsqueda de información en los materiales o evaluación de la relevancia de la información encontrada) (Rouet, Britt y Durik, 2017). Un estudiante competente posee habilidades cognitivas y metacognitivas para poner en marcha esas operaciones cognitivas de comprensión, búsqueda de información y monitorización de información relevante que le conducirá a completar con éxita tarea de responder preguntas y a aprender los conceptos o ideas requeridos (Vidal-Abarca, Mañá y Gil, 2010). Sin embargo, muchos estudiantes de Educación Secundaria suelen experimentar dificultades en este tipe tareas (OCDE, 2006 y 2010). Esa puede ser una de las razones de que los profesores proporcionen retroalimentación sobre las respuestas de sus alumnos (Ness, 2011). Seguramente asumen que la retroalimentación puede ayudar a superar las dificultades de comprensión y aprendizaje de conocimientos de ciencias de sus estudiantes. Este procedimiento instruccional, i.e., leer textos y responder a preguntas, se adapta perfectamente a los entornos digitales de aprendizaje, en los que una retroalimentación inmediata puede jugar un papel esencial (Shute y Rahimi, 2017; van der Kleij et al., 2015).
Resultados de un reciente metaanálisis sobre la efectividae la retroalimentación en entornos digitales sugieren que EF es el tipe retroalimentación más eficaz, mientras KCR tiene un efecto positivo menor y KR apenas tiene efectos en el aprendizaje (van der Kleij et al., 2015). Sin embargo, la investigación previa no es concluyente por lo que respecta a la efectividae la EF en tareas de comprensión que requieren contestar preguntas de un texto (Golke, Dörfler y Artelt, 2015; Llorens, Vidal-Abarca y Cerdán, 2016; Llorens, Vidal-Abarca, Cerdán y Ávila, 2015). Por ejemplo, Golke et al. (2015) examinaron la efectividae tres tipos diferentes de EF diseñados para mejorar la comprensión de textos: KR + pistas para facilitar la construcción de inferencias, KR + explicaciones del error o KR + apoyo para monitorizar la comprensión del texto. La efectividae estos tipos de EF fue comparada con KR y con una condición control sin retroalimentación. Estudiantes de sexto grade Primaria leyeron varios textos expositivos y narrativos para responder preguntas de comprensión tipo test en un entornigital. Todos los estudiantes, exceptos del grupo sin retroalimentación, recibieron los mensajes asignados después de contestar incorrectamente, tras lo cual tuvieron un segundo intento sin ningún tipe retroalimentación. Los estudiantes completaron una evaluación inmediatamente después de finalizar la prueba y otra varias semanas después. Ambas pruebas incluyeron diferentes textos y preguntas. Los resultados mostraron que no existían diferencias entre los tipos de retroalimentación EF en comparación con la retroalimentación KR o el grupo sin retroalimentación. Además, la retroalimentación KR no influyó tampoco en el rendimiente los estudiantes. Resultados paralelos fueron encontrados en su segundo estudio. Los autores concluyeron que la ausencia de efectos de la EF en la comprensión de los textos se debió probablemente aajo compromise los estudiantes en procesar activamente la retroalimentación proporcionada. Sin embargo, estos autores no examinaron hasta qué puntos estudiantes decidieron utilizar la retroalimentación elaborada (EF), aspecto centrae nuestro trabajo.
En el área de ciencias, Maier, Wolf y Randler (2016) realizaron un estudio para analizar la efectividae varios tipos de retroalimentación: EF (KR + explicación tras responder incorrectamente), KR o control sin retroalimentación. Estudiantes de secundaria leyeron un texte biología, contestaron una serie de preguntas y recibieron retroalimentación según el grupo asignado. Además, pidieron a los alumnos del grupo EF que autoevaluaran el uso que habían realizade esa información. Los resultados mostraron que, en general, no hubiferencias entre los tres tipos de retroalimentación en el rendimiente los estudiantes. Posteriormente, Maier et al. (2016) dividieron a los estudiantes del grupo EF en dos subgrupos: aquellos que indicaron haber utilizada EF y aquellos que no. Los nuevos resultados mostraron que aquellos estudiantes que decían haber utilizada EF obtuvieron mejor rendimiento que los estudiantes del grupo control y aquellos que no habían utilizada EF. Nbstante, este estudio cuenta con una limitación obvia al no utilizar una medida objetiva sobre el use EF. En el presente trabajo examinamos la decisión de los estudiantes de acceder voluntariamente a la EF en función de la retroalimentación correctiva recibida, así como su influencia en el aprendizaje de conocimientos conceptuales de física sobre la presión atmosférica y el viento. En nuestro estudio, los mensajes EF para cada pregunta consistían en una explicación para facilitar la comprensión de los conocimientos evaluados. Por ejemplo, para la pregunta “Si Torricelli hubiera cogido un tube 2 metros de altlene mercurio, en vez de un tube un metro y hubiera repetido su experimento, ¿qué habría pasado con la columna de mercurio?;”, la respuesta correcta sería “Habría quedado a la misma altura, 760 mm”. En este caso, el mensaje EF era: “Piensa que la altura a la que queda el mercurio está determinada por el punto en el que se iguala el pesel mercurio que contiene el tubo y el pese la columna de aire sobre la cubeta”. Estos mensajes EF contienen información directamente relacionada con contenidos conceptuales presentados en el texto. En el ejemplo anterior, el mensaje EF contiene una explicación para facilitar la comprensión del experimente Torricelli, aunque sin proporcionar la respuesta correcta o KCR. Por tanto, se espera que los mensajes EF permitan al estudiante ajustar o corregir su conocimiento sobre los contenidos presentados en el texto sobre la presión atmosférica y los vientos.
Aunque la efectividae la retroalimentación en entornos digitales ha sido ampliamente investigada (p. ej., Hattie y Gan, 2011; Shute, 2008; van der Kleij, Eggen, Timmers y Veldkamp, 2012), existe poca investigación acerca de cuándo y cómeciden los estudiantes procesar la retroalimentación (Butler y Winne, 1995). Por tanto, cabe preguntarse si proporcionar retroalimentación correctiva KR o KCR influye en la decisión de acceder a EF, una cuestión esencial para eiseñe entornos digitales. Parece lógico pensar que la retroalimentación correctiva permite al estudiante confirmar su modele respuesta cuando responde correctamente, mientras que le induce a iniciar un procese corrección de errores cuando responde incorrectamente, modificando así el modele respuesta inicialmente construido. Los estudios realizados por Timmers y Veldkamp (2011) y Fox, Klein Entink y Timmers (2014) analizaron el uso que hacían un grupe estudiantes universitarios de la EF después de completar un test sobre competencia en la búsqueda de información en un entornigital. Después de responder una serie de preguntas, el sistema proporcionó retroalimentación KR para cada respuesta. Una vez se mostró la retroalimentación KR, los estudiantes pudieron acceder opcionalmente a un mensaje EF para cada pregunta. Es importante señalar que estos mensajes EF contenían retroalimentación KCR junto con una explicación. Los resultados mostraron que los estudiantes accedieron a esos mensajes EF en las preguntas respondidas incorrectamente. Una limitación importante de estos estudios es la presencia de retroalimentación KCR junto con la explicación, por lo que no podemos saber si los estudiantes accedieron a esos mensajes para conocer la respuesta correcta o también para leer la explicación.
Por otra parte, existe investigación que ha examinado el tipe retroalimentación habitualmente proporcionado en entornos digitales de aprendizaje, así comas preferencias de los aprendices por un tipe retroalimentación u otro. En un estudio reciente, Tärning (2018) encontró que las aplicaciones utilizadas en Educación Primaria con escolares suecos proporcionaban principalmente retroalimentación KR y en muy pocas ocasiones proporcionaban retroalimentación KCR y EF. Como recomendación, la autora sugiere que los entornos digitales deben incluir EF con explicaciones cuando su objetivo sea facilitar el aprendizaje. Sugerencias similares fueron propuestas por Lefevre y Cox (2016), quienes examinaron el tipe retroalimentación que preferían los estudiantes de posgradespués de responder preguntas tipo test en un entornigital. Estos autores sugieren que los entornos digitales deben a) proporcionar retroalimentación, b) ofrecer EF para las respuestas correctas, c) proporcionar retroalimentación clara y focalizada en la tarea, d) ofrecer EF de tipo explicativo en las preguntas que evalúan la aplicación del material estudiado y e) permitir a los estudiantes revisar las preguntas. Los resultados de este estudio mostraron que los estudiantes prestan especial atención a la retroalimentación KR inicialmente y a la retroalimentación KCR cuando responden incorrectamente, por lo que la precisión de las respuestas es un factor esencial para comprender el use la EF (Lefevre y Cox, 2016). En un estudio con la metodología pensar-en-voz-alta, Máñez, Vidal-Abarca, Kendeou y Martínez (2019) analizaron el procesamiente una EF que contenía KR, KCR y pistas para mejorar la comprensión de los contenidos evaluados. Los resultados indicaron que los estudiantes focalizan su atención en conocer la precisión de su respuesta y la respuesta correcta. Nbstante lo anterior, existe un vacío respecto al papel que juega la retroalimentación correctiva KR y KCR en el use la EF en entornos digitales, cuestión abordada en el presente estudio.
Así, ebjetive este estudio es, en primer lugar, analizar la influencia de la retroalimentación correctiva KR y KCR en el use la EF en un entornigital. Para elliseñamos un experimento en el que manipulamos el tipe retroalimentación correctiva que proporcionaba el sistema automáticamente tras responder cada pregunta: retroalimentación de verificación (KR), de respuesta correcta (KCR) o no correctiva (control). Tras recibir ese mensaje, todos los estudiantes de las tres condiciones podían acceder voluntariamente a un mensaje de retroalimentación elaborada (EF) para cada pregunta. De esta manera examinamos la influencia de la retroalimentación KR y KCR en comparación con una retroalimentación “control” en la decisión de acceder a la EF. Esperamos que la retroalimentación correctiva influya en la tendencia de los estudiantes a utilizar la EF. Por tanto, el grupo “control” será el que empleará la EF en mayor medida, debido a que ésta es la única fuente de información con la que comprobar la comprensión de los conocimientos evaluados. El grupo KR, sin embargo, utilizará la EF un poco menos, debido probablemente a que emplearán la EF tras responder incorrectamente. Por último, el grupo KCR será el que utilice la EF en menor medida, ya que conocer la respuesta correcta puede interferir con el use información adicional contenida en la EF. Además, esperamos que los estudiantes utilicen la EF tras responder incorrectamente cuando reciban retroalimentación KR y KCR, mientras que tendrán dificultades para monitorizar su uso cuandesconozcan la precisión de sus respuestas.
Este estudio también examina, en segundugar, el efectel tipe retroalimentación en el rendimiente los estudiantes en la prueba de comprensión y en una prueba de aprendizaje final administrada 24 horas después. Mientras que la primera prueba consiste en responder preguntas de comprensión de un textisponible y recibir retroalimentación sobre las respuestas proporcionadas, la segunda consiste en responder preguntas que evalúan el grado en que los estudiantes son capaces de recordar y transferir el conocimiento aprendido a nuevas situaciones. Dos posibles predicciones pueden ser planteadas con este diseño. En primer lugar, es posible que el grupo que recibe retroalimentación KCR obtenga un rendimiento superior en ambas tareas, debido probablemente a la rápida codificación de las respuestas correctas recibidas. En segundugar, es posible que el mayor use la EF por parte de los estudiantes de los grupos control y KR cancele el efecto positive conocer la respuesta correcta en el grupo KCR. Por tanto, es posible que tanta retroalimentación correctiva como el acceso a la EF jueguen un papel esencial en el rendimiente los estudiantes, especialmente en la tarea de aprendizaje final.
Método
Participantes
Sesenta y siete estudiantes de 3º de ESO (Medad = 15, DT = .82) de dos centros educativos públicos de la Comunidad Valenciana participaron en este estudio. El 52.2% de los estudiantes eran varones y el 47.8% mujeres. Todos los alumnos habían estudiado Ciencias Naturales y Física según el plan de estudios español. La participación fue aprobada por el consejel centro y la recogida y tratamiente datos fue realizada de forma que se preservó el anonimate los participantes. Cada estudiante fue asignado a une los tres tipos de retroalimentación correctiva (KR, KCR o control), asegurándonos de que el nivee conocimiento previo fuera similar en los tres grupos, F(2, 64) = 0.23, p > .05.
Materiales
Los materiales incluyeron un cuestionarie conocimientos previos, materiales para la tarea de comprensión (un texte ciencias, preguntas de comprensión y mensajes de retroalimentación para cada pregunta) y una prueba de aprendizaje final con nuevas preguntas. Estos materiales fueron previamente validados en dos grupos de 3º de ESe un centro educativo público. Una vez introducidas las modificaciones oportunas, estos materiales fueron utilizados en el presente estudio.
En primer lugar evaluamos el conocimiento previo en ciencias con un cuestionario compuesto por 30 afirmaciones. Para cada afirmación, los alumnos debían indicar ‘verdadero’, ‘falso’ o ‘no sé’. El cuestionario incluyó conocimiento generae ciencias (“la temperatura es una propiedae la materia”) y conocimientos específicos de la temática (“cuanda temperatura de un gas disminuye, su presión disminuye”). Cada respuesta correcta obtuvo 1 punto y cada incorrecta un cero; las respuestas ‘no sé’ se contaron por separado.
Toda la tarea de comprensión se efectuó con una aplicación informática cuyo funcionamiento se explica en la sección siguiente. Se empleó un texto sobre la presión atmosférica y el viento adaptade un libre texte ciencias. El texto tenía una longitue 1,126 palabras, incluidos los títulos de los (sub)apartados y las notas de sus figuras. Para promover la comprensión y el aprendizaje de los contenidos elaboramos 12 preguntas que podían ser contestadas consultanda información del texto. Por ejemplo, “¿La densidael aire es igual en todos los puntos de la tierra?;”. Para contestar esta pregunta, los alumnos debían integrar información de varias frases del texto. En este caso, los estudiantes debían comprender que la atmósfera es un espacio extremadamente grande formado por partículas cuya distribución no es uniforme, que la densidae las capas del aire varía según la altura y que la presión atmosférica también varía según la temperatura. Por tanto, la respuesta correcta era “No, porque varía en función de la temperatura y la altura”. Cada pregunta tenía asociado un mensaje EF que consistía en una explicación para comprender la respuesta correcta, pero sin decirla explícitamente. Cada mensaje comenzaba con la expresión “Piensa que...”, seguida de la explicación pertinente sobre los fenómenos atmosféricos evaluados en la pregunta. Por ejemplo, el mensaje para la pregunta anterior fue “Piensa que la densidael aire se determina por lo juntas o separadas que se encuentran las partículas que lo componen y esepende de las condiciones externas”. Así, estos mensajes EF contenían información directamente relacionada con los contenidos presentados en el texto que eran evaluados en cada pregunta. Es importante señalar que los alumnos tomaban la decisión de acceder voluntariamente a estos mensajes EF después de contestar cada pregunta, siendo cada decisión registrada automáticamente por la aplicación informática. Cada respuesta fue calificada con 1 ó 0 dependiende si era correcta o incorrecta.
La prueba de aprendizaje final estuvo formada por 10 preguntas nuevas de respuesta breve. Estas preguntas evaluaban los conocimientos aprendidos en la tarea de comprensión. Por ejemplo, “¿Qué factores hacen variar la presión atmosférica?;”. Cada respuesta se calificó con 1 (correcta), .50 (parcialmente correcta) o 0 (incorrecta) en función del grade exactitud. Para la pregunta anterior, si el estudiante responde “La altura y la temperatura” recibiría un punto, mientras que si únicamente menciona un factor recibiría .50 puntos.
Herramienta. La aplicación informática Read&Learn fue utilizada para la tarea de comprensión. Read&Learn es un desarrolle una aplicación anterior llamada Read&Answer (Vidal-Abarca et al., 2011). Read&Learn presenta información, registra y computa las acciones y los tiempos de procesamiente los estudiantes mientras realizan la tarea (p. ej., contestar preguntas de un texto). Además, Read&Learn puede proporcionar diferentes tipos de retroalimentación adaptados a la ejecución de los estudiantes. En este estudio, Read&Learn presentaba el texto en una pantalla (Figura 1a) y la pregunta y sus alternativas de respuesta se presentaron en otra pantalla (Figura 1b). Para contestar, los estudiantes marcaban la alternativa de respuesta que consideraban correcta. Un interfaz sencillo permitía ir de una pantalla a la otra clicando eotón correspondiente en cada pantalla.
Enlarge this image.Figura 2 Capturas de pantalla del mensaje de retroalimentación correctiva recibido automáticamente después de responder (KR, KCR, o control) (a), del mensaje EF al que podían acceder voluntariamente todos los estudiantes (b) y pantalla con la pregunta y sus alternativas tras cerrar los mensajes de retroalimentación (c).
Tras responder cada pregunta, Read&Learn proporcionaba a los estudiantes mensajes de retroalimentación correctiva según la condición asignada, KR, KCR, o control (Figura 2a). En la condición KR, los estudiantes recibían información acerca de la corrección de su respuesta (correct incorrecto), mientras que en la condición KCR se informaba además acerca de cuál era la alternativa correcta (p. ej., Incorrecto, la respuesta correcta es b) No, porque varía en función de la temperatura y la altura). Por último, para la condición “control”, los estudiantes recibieron mensajes neutros (Has contestada pregunta X). Tras responder cada pregunta y recibir el mensaje de retroalimentación correspondiente a la condición, los estudiantes de las tres condiciones podían acceder voluntariamente al mensaje EF correspondiente con la explicación de la respuesta (Figura 2b). Al cerrar estos mensajes se presentó la pantalla de la pregunta con la alternativa seleccionada por el estudiante, pero sin señalar la respuesta correcta (Figura 2c). Nótese que sólos estudiantes de la condición KCR conocían realmente la respuesta correcta cuando se equivocaban, ya que sólo esta retroalimentación incluía la respuesta correcta. Los estudiantes podían pasar a la siguiente pregunta clicando en eotón Siguiente independientemente de si decidían leer EF o no.
Procedimiento
El investigador se puso en contacto con los orientadores de los centros educativos y les explicó el procedimientel estudio. Después de conseguir los consentimientos informados, se concertaron las fechas en las que se aplicarían las pruebas. El procedimiento generael estudio puede verse en la Figura 3. La aplicación del estudio requirió de tres sesiones. En la primera sesión administramos la prueba de conocimiento previo en papel y lápiz en el aula ordinaria. En la segunda sesión aplicamos la tarea de comprensión en el aula de informática. Cada estudiante completó la tarea individualmente en un ordenador. Los estudiantes recibieron inicialmente las siguientes instrucciones sobre la tarea de comprensión y el use Read&Learn: “A continuación leeréis un texto sobre la Presión atmosférica y el viento y responderéis doce preguntas tipo test sobre sus contenidos, pudiendo consultar el texto cuando necesitéis. Después de responder cada pregunta, el programa os mostrará un mensaje en el centre la pantalla” (no se informó del tipe retroalimentación correctiva que recibiría cada participante). “Cuando veáis ese mensaje, el programa os dará dos opciones: a) ver una explicación (mensaje EF) que puede ayudaros a comprender mejor la respuesta a la pregunta ) cerrar el mensaje y continuar con la siguiente pregunta sin ver la explicación. Si clicáis en ‘Ver explicación’ aparecerá el mensaje con la explicación; una vez leída, clicad eotón ‘Cerrar’. Al cerrar esos mensajes, veréis la pregunta junto con eotón ‘Siguiente’ para pasar a la siguiente pregunta. El programa os avisará cuandleguéis a la última pregunta. Es importante que hagáis bien esta tarea porque mañana responderéis unas preguntas para conocer cuánto habéis aprendido. ¿Tenéis alguna duda?; Muchas gracias por vuestra colaboración”. Los estudiantes completaron la tarea a su ritmo. Una vez respondida cada pregunta, Read&Learn proporcionó retroalimentación correctiva automáticamente (i.e., KR, KCR o control según la condición asignada) y todos los estudiantes tuvieron la opción de acceder a un mensaje EF para cada pregunta. En la tercera sesión administramos la prueba de aprendizaje final en papel y lápiz 24 horas después de completar la tarea de comprensión. Los estudiantes debían contestar las preguntas con la información que habían aprendidurante la sesión previa. Los estudiantes tenían un código asignado, conocido sólo por cada estudiante y su tutor, a fin de preservar su confidencialidad, a la vez que permitía identificar las respuestas de cada participante a large las tres sesiones.
Enlarge this image.Figura 3 Esquema del procedimiento experimental utilizado para los grupos de retroalimentación control, KR y KCR.
Medidas
Se tomaron medidas para cada tarea. Respecto a la evaluación de conocimientos previos, calculamos el númere aciertos en la tarea de verificación de afirmaciones. Para la tarea de comprensión, Read&Learn proporcionó el rendimiente los estudiantes como el porcentaje de respuestas correctas. Además, proporcionó dos medidas relacionadas con el use la EF: el porcentaje de estudiantes que decidieron acceder al menos a un mensaje y el porcentaje de preguntas en que los estudiantes decidieron acceder a la EF. Estas decisiones fueron condicionadas a la precisión de las respuestas de los estudiantes (correctas e incorrectas). Así calculamos los porcentajes de acceso a la EF en función de la exactitue las respuestas, tomando como totaa cantidae accesos a los mensajes EF. Para la tarea de aprendizaje final calculamos el porcentaje de respuestas correctas.
El estudio nos permitió comparar el acceso a la EF y el rendimiento en las tareas de comprensión y aprendizaje final en función del tipe retroalimentación correctiva recibido. Para la medida de “acceso a la EF” utilizamos las pruebas no paramétricas Kruskal-Wallis y Wilcoxon, debido a que las puntuaciones no se distribuyen de forma normal. Los porcentajes de accesos a los mensajes EF en el grupo control, W(20) = .867, p = .01, en el grupo KR, W(24) = .854, p = .003, y en el grupo KCR, W(23) = .654, p < .001, se desvían significativamente de la distribución normal. Nbstante, los análisis de homogeneidae varianzas mediante la prueba de Levene demuestran que no existen diferencias significativas dependiendel tipe retroalimentación, F(2, 64) = 1.26, p = .29.
Utilizamos ANCOVA para las medidas de producto, ya que las puntuaciones se ajustan a la distribución normal y las varianzas se distribuyen de forma homogénea. Para la “tarea de comprensión”, los aciertos en el grupo control, W(20) = .953, p = .418, y en el grupo KR, W(24) = .938, p = .145, tienen una distribución normal; nbstante, las puntuaciones del grupo KCR, W(23) = .862, p = .005, se desvían de la distribución normal. El análisis de homogeneidae varianzas mediante la prueba de Levene demuestra que no existen diferencias significativas entre los grupos, F(2, 64) = 2.83, p = .067. Para la “tarea de aprendizaje final” los aciertos en el grupo control, W(20) = .916, p = .082, en el grupo KR, W(24) = .976, p = .82 y en el grupo KCR, W(23) = .956, p = .384, tienen una distribución normal. Además, la prueba de Levene demuestra que no existen diferencias significativas en las varianzas entre los tipos de retroalimentación, F(2, 64) = 0.09, p = .92.
Resultados
Efectel Tipe Retroalimentación Correctiva en el Use la EF
Para analizar el efectel tipe retroalimentación correctiva (control, KR y KCR) en el porcentaje de estudiantes que utilizan la EF y el porcentaje de accesos a la EF utilizamos la prueba Kruskal-Wallis. Las medias y desviaciones típicas figuran en la Tabla 1. Para el porcentaje de estudiantes que acceden a la EF encontramos un efecto significativo en función del tipe retroalimentación correctiva recibido, H(2) = 16.15, p < .001. La prueba Jonckheere revela una tendencia significativa en los datos, indicando que a medida que la retroalimentación correctiva incluye información más específica sobre la respuesta (KR y KCR), el porcentaje de estudiantes que accede a la EF disminuye, J = 746, z = -3.89, p < .001, r = -.48. Para el porcentaje de accesos a la EF encontramos resultados paralelos, ya que este también está significativamente influido por el tipe retroalimentación correctiva recibido, H(2) = 21.28, p < .001. Además, la prueba Jonckheere revela una tendencia significativa, indicando que a medida que la retroalimentación correctiva incluye información más específica sobre la respuesta (KR y KCR), el porcentaje de accesos a la EF disminuye drásticamente, J = 746, z = -4.80, p < .001, r = -.59. Ambos resultados confirman las hipótesis relacionadas con el efecte la retroalimentación correctiva en el use la EF.
Enlarge this image.Tabla 1 Estadísticos descriptivos de las decisiones de acceso a la EF en función del tipe retroalimentación correctiva. La DT se muestra entre paréntesis
Para comprender mejor el efecte la retroalimentación correctiva en el use la EF analizamos el acceso a la EF en función de la precisión de las respuestas (correctas, incorrectas) para cada tipe retroalimentación correctiva (control, KR y KCR) mediante la prueba Wilcoxon. Para el grupo control, no existen diferencias en el porcentaje de accesos a los mensajes EF entre las respuestas incorrectas (Mdn = 50.00) y las correctas (Mdn = 50.00), z = -1.42, p = .157, r = -.22. Sin embargo, para el grupo KR encontramos que los estudiantes tienden a acceder a los mensajes EF más frecuentemente para las respuestas incorrectas (Mdn = 77.50) que para las respuestas correctas (Mdn = 0), z = -3.75, p < .001, r = -.54. Igualmente, para el grupo KCR, los estudiantes tienden a acceder a los mensajes EF más frecuentemente para las respuestas incorrectas (Mdn = 16.67) que para las respuestas correctas (Mdn = 0), z = -2.02, p = .043, r = -.30. Por tanto, los estudiantes del grupo control accedieron a EF independientemente de la precisión de sus respuestas, mientras que los estudiantes que recibieron KR y KCR accedieron a EF después de responder incorrectamente (Figura 4). Por tanto, estos resultados confirman nuestra hipótesis inicial.
Enlarge this image.Figura 4 Porcentaje de accesos a la EF en función del tipe retroalimentación correctiva y la precisión de las respuestas. El porcentaje ha sido calculado sobre el totae accesos de cada participante.
Efectel Tipe Retroalimentación en el Rendimiente los Estudiantes
Los porcentajes de acierto para la tarea de comprensión y la tarea de aprendizaje final fueron analizados mediante dos ANCOVAs en los que introdujimos el tipe retroalimentación correctiva (control, KR y KCR) como variable entre-sujetos y el nivee conocimiento previo como covariable. Las medias y desviaciones típicas para cada variable de rendimiento figuran en la Tabla 2. Los resultados del ANOVA unifactorial para el porcentaje de aciertos en la tarea de comprensión no revelan diferencias significativas en función de la retroalimentación recibida, F(2, 63) = 0.80, p > .05. Sin embargo, observamos diferencias estadísticamente significativas en función del nivee conocimiento previe los estudiantes, F(1, 63) = 7.51, p = .008, ηp2 = .11. Para el rendimiento en la tarea de aprendizaje final encontramos resultados paralelos. No existen diferencias significativas en función de la retroalimentación recibida, F(2, 63) = 1.45, p > .05. Sin embargo, observamos diferencias estadísticamente significativas en función del nivee conocimiento previo, F(1, 63) = 30.60, p < .001, ηp2 = .33. Estos resultados confirman nuestra segunda predicción para el efecte la retroalimentación en el rendimiente los estudiantes.
Enlarge this image.Tabla 2 Estadísticos descriptivos del rendimiento en las tareas de comprensión y aprendizaje final en función del tipe retroalimentación. La DT se muestra entre paréntesis
Además, realizamos dos análisis de regresión lineal múltiple para examinar el efectel conocimiento previo, el tipe retroalimentación correctiva y la decisión de acceder a los mensajes EF en el rendimiente los participantes en ambas tareas. Para el rendimiento en la tarea de comprensión, los resultados indican que los tres predictores explican un 10.2% de su varianza, R2 ajustado = .06, F(3, 63) = 2.38, p = .078. La única variable que predijo significativamente el rendimiento fue el conocimiento previe los participantes, β = .319, t(63) = 2.66, p = .01. El tipe retroalimentación correctiva, β = .005, t(63) = 0.04, p > .05, y las decisiones de acceder a la EF, β = .018, t(63) = 0.13, p > .05, no predijeron significativamente el rendimiento.
Para el rendimiento en la tarea de aprendizaje final, los resultados indican que los tres predictores explican un 37.4% de su varianza, R2 ajustado = .34, F(3, 63) = 12.53, p < .001. En este caso, observamos que el conocimiento previo, β = .574, t(63) = 5.74, p < .001, el tipe retroalimentación correctiva, β = .263, t(63) = 2.29, p = .025, y las decisiones de acceder a la EF, β = .248, t(63) = 2.16, p = .034, predijeron significativamente el resultado en la tarea de aprendizaje final. Estos resultados confirman nuestra hipótesis inicial.
Discusión
La retroalimentación formativa es une los componentes centrales en eiseñe entornos digitales de aprendizaje (Shute y Rahimi, 2017; van der Kleij et al., 2015). Aunque su efectividad ha sido ampliamente investigada (p. ej., Hattie y Gan, 2011; Shute, 2008), existe poca investigación acerca de cuándo y cómo se utiliza la retroalimentación en entornos digitales (Fox et al., 2014; Máñez et al., 2019; Timmers y Veldkamp, 2011). Una complicación adicional es que frecuentemente no se compara la influencia que ejercen unos tipos de retroalimentación sobre otros, i.e., KR y KCR sobre EF. Por ello, ebjetivo principael estudio fue examinar el impacte la retroalimentación correctiva (KR y KCR) en la decisión voluntaria de acceder a EF cuandos estudiantes aprenden conocimientos conceptuales de ciencias, una de las áreas en las que los estudiantes de Educación Secundaria experimentan más dificultades (OCDE, 2006 y 2010). Un segundbjetivo fue examinar la influencia de la retroalimentación en el rendimiente los estudiantes. Estos objetivos fueron abordados con una de las tareas más representativas en el ámbito académico consistente en contestar preguntas a partir de un textisponible (Ness, 2011). Así, este estudio contribuye a la comprensión del use la retroalimentación formativa y proporciona información valiosa para eiseñe entornos digitales de aprendizaje.
Respecto al primer objetivo, según predijimos, existe una marcada tendencia en el use la EF en función de la retroalimentación correctiva recibida. Proporcionar retroalimentación correctiva cada vez más detallada (KR y KCR) disuade a los estudiantes de acceder a los mensajes EF, seguramente porque muchos estudiantes se centran en conocer la corrección de sus respuestas, más que en un aprendizaje conceptual profundo (Máñez et al., 2019). Así, los estudiantes que desconocen si sus respuestas son correctas tienden a acceder a un mayor númere mensajes EF, probablemente con la intención de encontrar pistas que les permitan confirmar su modele respuesta o conocer cuál es la respuesta correcta. Los estudiantes que reciben KR acceden a los mensajes EF en menor medida que los de control ya que tienden a acceder cuando fallan, pero no cuando aciertan. Los estudiantes que reciben KCR acceden a los mensajes EF en muy pocas ocasiones ya que cuando fallan reciben información sobre cuál es la respuesta correcta. De hecho, aproximadamente la mitae los estudiantes que recibió retroalimentación KCR nunca decidieron consultar la EF. Parece que invertir esfuerzos en procesar retroalimentación adicional cuando se conoce la respuesta correcta (KCR) se considera poco necesario y, por tanto, no se implican en el coste que conlleva leer las explicaciones de la EF. Es llamativo que todos los estudiantes del grupo controecidieron acceder al menos a un mensaje EF, siendo este porcentaje significativamente más bajo en las otras condiciones, particularmente en la condición KCR, en la que casi el 50% de los estudiantes nunca accedió a un mensaje EF. Aunque resultados previos indican que los estudiantes acceden frecuentemente a la EF en entornos digitales (Timmers y Veldkamp, 2011), nuestros resultados sugieren que los estudiantes deciden utilizar la EF en un númerimitade ocasiones. Cabe destacar que Timmers y Veldkamp (2011) diseñaron mensajes EF que incluían la respuesta correcta, por lo que la decisión de utilizar esa retroalimentación pudo estar motivada por la retroalimentación KCR incluida. En nuestro estudio, los resultados sugieren que los estudiantes acceden a la EF para intentar conocer la respuesta correcta, ya que la tasa de accesos depende de la información correctiva recibida automáticamente tras responder.
Por tanto, ofrecer retroalimentación correctiva interfiere en cierta medida en la decisión de buscar EF adicional. ¿Cuál es, pues, la función de la retroalimentación correctiva?; Los resultados sugieren que la función de la retroalimentación KR y KCR es verificar el modele respuesta creado por el estudiante para responder y mejorar la monitorización del use la EF (Mory, 2004). Así, cuandos estudiantes reciben retroalimentación de tipo correctivo y fallan, entonces deciden acceder a EF (Fox et al., 2014; Timmers y Veldkamp, 2011). Cuandos estudiantes no reciben retroalimentación correctiva acceden a la EF independientemente de si sus respuestas son correctas o incorrectas, lo que resulta congruente con resultados previos que indican que los estudiantes experimentan problemas al monitorizar la precisión de sus respuestas (Dunlosky y Metcalfe, 2009). Aunque el use la EF parece estar motivado por la precisión de las respuestas de los estudiantes, hay alumnos que, a pesar de ser informados de sus errores, deciden no acceder a la EF. Puede que estos estudiantes consideren la tarea demasiado compleja, no estén suficientemente motivados para buscar información adicional, o tengan dificultades para entender la EF. Tomados en conjunto, los resultados de nuestro estudio son consistentes con la idea de que ebjetive los estudiantes al responder preguntas de un textisponible es proporcionar la respuesta correcta (Rouet et al., 2017).
Respecto al segundbjetivo, examinar el efectel tipe retroalimentación en el rendimiente los estudiantes, los resultados revelaron que no existen diferencias entre los tres tipos de retroalimentación empleados (control + EF, KR + EF y KCR + EF), resultado consistente con investigaciones recientes en las áreas de comprensión y aprendizaje de ciencias (Golke et al., 2015; Maier et al., 2016). Este resultado puede deberse al use la EF que realizaron los estudiantes en función de la retroalimentación correctiva recibida automáticamente después de responder cada pregunta. Como predijimos, el mayor use la EF por parte de los estudiantes de los grupos control y KR pudo haber compensado el efecto positive conocer la respuesta correcta en la condición KCR. Los resultados del análisis de regresión confirman esta idea, ya que tanta retroalimentación correctiva como el use la EF juegan un papel positivo en el aprendizaje final. En apoye esta interpretación se puede mencionar eato que los estudiantes del grupo control no sólo tuvieron acceso a la EF, sino que además hicieron un mayor use esta información, reduciendo así la distancia con el rendimiente los estudiantes que recibieron retroalimentación KCR, quienes decidieron acceder a menos mensajes EF. Recibir retroalimentación KCR pudo tener un efecto positivo en su rendimiento (van der Kleij et al., 2015), ya que conocer la respuesta correcta permite modificar el modele respuesta construidurante la contestación a la pregunta. Así, es posible que la retroalimentación KCR sea capaz de influir en el aprendizaje profunde este tipe conocimientos de ciencias. Parece que proporcionar retroalimentación que incluya información correctiva y elaborada puede ejercer una influencia positiva en el aprendizaje de los estudiantes cuando contestan preguntas de comprensión en entornos digitales (Llorens et al., 2016; Llorens et al., 2015). Aun así, debemos ser cautos con respecto a la efectividae la retroalimentación en este tipe tareas, ya que los porcentajes de aciertos fueron relativamente bajos, debido probablemente a la dificultae los conocimientos del texto.
Estos hallazgos tienen implicaciones teóricas y prácticas destacables. Este experimento aporta información teórica acerca de cómos estudiantes de Secundaria monitorizan y autorregulan el use la retroalimentación cuando han de contestar preguntas de un texte ciencias. Los resultados de este estudio ayudan a conocer la tendencia de los estudiantes a utilizar voluntariamente la EF en función de la presencia de retroalimentación KR y KCR. Igualmente, ofrece información valiosa para eiseñe herramientas digitales en las que se proporcione retroalimentación al responder preguntas sobre los contenidos de un texto. Aunque la retroalimentación correctiva KR y KCR pueden interferir en el use la EF, parece necesario que los entornos digitales proporcionen ambos tipos de retroalimentación (Lefevre y Cox, 2016; Mason y Bruning, 2001), especialmente cuando se promueve el aprendizaje de conocimientos complejos (Tärning, 2018). Aunque nuestro estudio sugiere que el use la EF es reducido, especialmente cuando se recibe retroalimentación KCR, esta información parece ser útil para corregir el modele respuesta creado por los estudiantes cuando se aprenden conceptos complejos en el área de ciencias.
El presente estudio tiene una serie de limitaciones que abren nuevas líneas de estudio para explorar el uso y la efectividae la retroalimentación formativa en entornos digitales. En primer lugar, la tarea de comprensión tuvo una duración breve y los materiales evaluaron únicamente una temática del área de física. Aunque los patrones observados en la decisión de buscar EF después de recibir retroalimentación correctiva KR y KCR son claros, es necesario conocer si estos resultados se replican en otros dominios de conocimientel aprendizaje de ciencias, así como en otras áreas como matemáticas o ciencias sociales. Asimismo, es importante señalar que los resultados muestran una marcada tendencia en el use la EF a pesar de contar con una muestra relativamente pequeña. Nuevos estudios son necesarios para replicar estos resultados con muestras más amplias que abarquen también otras etapas educativas. En segundugar, parece necesario incluir una condición control en la que los estudiantes no reciban ningún tipe retroalimentación, ya que las diferencias en rendimiento respecto a los otros grupos experimentales pueden haberse minimizadebido a que la condición control accedió a los mensajes EF frecuentemente. En tercer lugar, el rendimiento en la prueba de aprendizaje final fue relativamente bajo, por lo que parece necesario incluir una prueba tipo test, ya que los estudiantes no habían sido entrenados para responder preguntas en formato abierto. En cuartugar, sería interesante conocer el efecte factores externos en el use la EF (Lefevre y Cox, 2016), ya que estos factores pueden ser fácilmente manipulables en los entornos digitales y pueden desempeñar un papel importante en el procese aprendizaje de los estudiantes. Por ejemplo, la disponibilidae los textos al contestar las preguntas es una variable situacional que puede afectar al use la EF. Finalmente, resulta interesante conocer la razón por la que los estudiantes deciden nuscar EF. Así, examinar aspectos motivacionales puede ofrecer información valiosa sobre la autorregulación del use la EF (e.g., Nicol y Macfarlane-Dick, 2006), ya que la motivación juega un papel central en situaciones de aprendizaje con retroalimentación (Kluger y DeNisi, 1996).
Tomados en conjunto, los resultados sugieren que no podemos asumir que la retroalimentación sea procesada automáticamente. Más bien, parece que los alumnos monitorizan el use la retro-alimentación elaborada (EF) en situaciones de aprendizaje autorregulado (Butler y Winne, 1995), ajustando su uso en función de la retroalimentación correctiva KR o KCR proporcionada tras contestar cada pregunta y la precisión de sus respuestas. De este modo, los hallazgos de este experimento son valiosos para eiseñe entornos digitales de aprendizaje en los que la retroalimentación puede ajustarse a las necesidades de los estudiantes cuando aprenden conocimientos conceptuales.
Extended Summary
Answering questions from a text and receiving formative feedback is a common academic task (Ness, 2011) that can be delivered in digital environments (Shute & Rahimi, 2017). Formative feedback refers to any information provided to the students about their performance to improve their learning (Shute, 2008). Formative feedback embraces a range of feedback types. A common distinction is usually made between corrective and elaborative feedback. Corrective feedback provides students with Knowledge of Response or KR (correct/incorrect) or Knowledge of Correct Response or KCR (The correct answer is X). Elaborated Feedback or EF usually contains additional information beyond students’ performance such as explanations or hints. A recent review study suggests that EF is the most effective type of feedback to enhance learning in digital environments, KCR feedback has a lower effect, and KR does not influence learning outcomes (van der Kleij, Feskens, & Eggen, 2015).
In order te effective, students have to engage actively in processing its content (Bangert-Drowns, Kulik, Kulik, & Morgan, 1991). However, little research has explored how students process feedback in digital environments. Recent findings suggest that students tend to focus their attention on knowing the accuracy of their responses and the correct answer even when EF is received (Lefevre & Cox, 2016; Máñez et al., 2019). Although EF is usually provided along with corrective feedback, little is known about the effect of receiving KR and KCR feedback on a student’s decision to use EF. Thus, our study examines the extent to which corrective KR and KCR feedback may influence a student’s decision to voluntarily access EF when answering questions from a science text in a digital environment. Likewise, this study also examines whether these types of feedback influence the student’s performance when learning conceptual knowledge in the area of physics.
Method
Sixty-seven 9th-grade students (Mage = 15, SD = .82) participated in the study (52.2% were male and 47.8% were female). All participants were Spanish native speakers from two schools of Valencia (Spain). All the students had studied Natural Sciences and Physics according to the Spanish curriculum. After measuring his/her prior knowledge, each participant was assigned tne of the three experimental groups that varied in the type of corrective feedback delivered: KR, KCR, or control (i.e., non-corrective feedback). For the comprehension task, students read a science text about the atmospheric pressure and wind phenomenon and answered a set of multiple-choice questions with the text available in Read&Learn, a web-based application that traces students’ behaviors. After answering each question, Read&Learn delivered corrective feedback automatically depending on the experimental condition assigned. Whereas students in the KR group received information on their response correctness (correct/incorrect), students in the KCR group were informed about the correct response (The correct answer is X), and students in the control group received non-corrective feedback (e.g., “You have answered question number X”). After receiving these feedback messages, all the students had the option to voluntarily access EF made of an explanation to infer the correct response without stating it explicitly. For instance, for the question “Is the air density the same in all points of the earth?;” (Correct response: “No, because it varies depending on the temperature and the altitude”), the EF message is “Think that the air density is determiney how close or separated the particles are, and that depends on the external conditions”. Finally, participants answered a finaearning task with new short-answer questions 24 hours later. Read&Learn recorded the student’s decisions to access EF, which were conditioned to question-answering success. We computed two performance scores: comprehension task performance and finaearning task performance as the percentage of correct responses.
Results
To address the first aim, to analyze the effect of corrective feedback (KR, KCR, and control) on the use of EF, we conducted Kruskal-Wallis tests for both the percentage of students who accessed the EF and the percentage of EF accesses. Significant differences were found for both measures as a function of the type of corrective feedback received. The Jonckheere tests revealed a significant trend in the data, indicating that as the corrective feedback includes more specific information about the response (KR and KCR feedback), the use of EF decreases significantly. That is, fewer students decided to access EF anower rates of accesses appeared, especially when corrective feedback included the correct response (i.e., KCR). Tetter understand the effect of the type of corrective feedback on the use of EF, we took into account the question-answering success (correct vs. incorrect responses). The Wilcoxon tests revealed that students in the control group accessed EF in a similar fashion after providing either correct or incorrect responses. However, students in the KR and KCR feedback groups accessed EF more frequently after providing incorrect responses (see Figure 4).
To address our second aim, to examine the effect of feedback type on the students’ performance, we conducted two ANCOVAs and regression analyses for both comprehension task performance and finaearning task performance. ANCOVAs’ results revealed no significant differences as a function of feedback type. Students’ prior knowledge significantly explaineoth performance measures. For the finaearning task performance, regression analyses showed that the student’s prior knowledge, the corrective feedback type, and the EF use significantly predicted the student’s outcomes.
Discussion
It is common to assume that students process EF when received. Recent research suggests that this is not always the case, probably because of the corrective feedback provided along with the EF. Regarding our first goal, results showed a trend in the EF use basen the corrective feedback provided. Providing KR and KCR feedback seems tiscourage students from accessing EF to some extent, probably because many students focus on knowing the answer correctness (Máñez et al., 2019). Students who not know if their answers are correct tend to access EF quite often, probably looking for clues to confirm their response moder to uncover the correct answer. Receiving KR feedback triggers lower rates of EF accesses, since students tend to use EF after failure. Students who received KCR feedback seldom access EF, probably because they consider unnecessary to process additional information when they already know the correct response. Moreover, results indicate that KR and KCR feedback’s main function is to verify the student’s response model and hence increase the use of EF after failure (Fox, Klein Entink, & Timmers, 2014), since students struggle to monitor the accuracy of their responses. Regarding our second goal, results revealed nifferences among the feedback types, which is consistent with recent findings in the areas of text comprehension and science learning (Golke, Dörfler, & Artelt, 2015; Maier, Wolf, & Randler, 2016). This result can be explaineasen the EF use each experimental group made. The greater use of EF in the control and KR feedback groups may have compensated for the positive effect of knowing the correct answer in the KCR group. Overall, findings suggest that students access EF in an effort to know the correct answer since they use EF as a function of the type of corrective feedback in combination with the accuracy of their responses. This study contributes tur understanding of how secondary-school students engage in processing formative feedback when learning conceptual knowledge and provides valuable information for the design of digitaearning environments.
Para citar este artículo: Máñez, I. (2019). ¿Influye la retroalimentación correctiva en el use la retroalimentación elaborada en un entornigital?; Psicología Educativa, 26, 57-66. https://doi.org/10.5093/psed2019a14
Financiación. Esta investigación se ha realizadentrel proyecto FPU014/04646 y EST15/00492 subvencionado por el Ministerie Educación, Cultura y Deporte y el proyecto EDU2014-55662-R subvencionado por el Ministerie Economía y Competitividad.
Anmarkrud, Ø., McCrudden, M. T., Bråten, I. y Strømsø, H. I. (2013). Task-oriented reading of multiple documents: Online comprehension processes anffline products. Instructional Science, 41, 873-894. https://doi.org/10.1007/s11251-013-9263-8
Bangert-Drowns, R. L., Kulik, C. C., Kulik, J. A. y Morgan, M. T. (1991). The instructional effect of feedback in test-like events. Review of Educational Research, 61, 213–238. https://doi.org/10.3102/00346543061002213
Butler, D. L. y Winne, P. H. (1995). Feedback and self-regulateearning: A theoretical synthesis. Review of Educational Research, 65, 245-281. https://doi.org/10.3102/00346543065003245
Cerdán, R., Gilabert, R. y Vidal-Abarca, E. (2011). Selecting information to answer questions: Strategic individuaifferences when searching texts. Learning and Individuaifferences, 21, 2011-205. https://doi.org/10.1016/j.lindif.2010.11.007
Dunlosky, J. y Metcalfe, J. (2009). Metacognition. Thousanaks, CA: Sage.
Fox, J.-P., Klein Entink, R. y Timmers, C. (2014). The joint multivariate modeling of multiple mixed response sources: Relating student performances with feedback behavior. Multivariate Behavioral Research, 49, 54-66. https://doi.org/10.1080/00273171.2013.843441
Golke, S., Dörfler, T. y Artelt, C. (2015). The impact of elaborated feedback on text comprehension within a computer-based assessment. Learning and Instruction, 39, 123-136. https://doi.org/10.1016/j.learninstruc.2015.05.009
Hattie, J. y Gan, M. (2011). Instruction basen feedback. En R. E. Mayer y P. A. Alexander (Eds.), Handbook of research on learning and instruction (pp. 249 -271). New York, NY: Routledge.
Kluger, A. N. y DeNisi, A. (1996). The effects of feedback interventions on performance: A historical review, a meta-analysis, and a preliminary feedback intervention theory. Psychologicaulletin, 119, 254-284. https://doi.org/10.1037/0033-2909.119.2.254
Lefevre, D. y Cox, B. (2016). Feedback in technology-based instruction: Learner preferences. British Journaf Educational Technology, 47, 248-256. https://doi.org/10.1111/bjet.12227
Llorens, A. C., Vidal-Abarca, E. y Cerdán, R. (2016). Formative feedback to transfer self-regulation of task-oriented reading strategies. Journaf Computer Assisteearning, 32, 314-331. https://doi.org/10.1111/jcal.12134
Llorens, A. C., Vidal-Abarca, E., Cerdán, R. y Ávila, V. (2015). Does formative feedback on search behavior help students in answering comprehension questions from an available text?; Infancia y Aprendizaje, 38, 808-841. https://doi.org/10.1080/02103702.2015.1076269
Maier, U., Wolf, N. y Randler, C. (2016). Effects of a computer-assisted formative assessment intervention basen multiple-tier diagnostic items anifferent feedback types. Computers & Education, 95, 85-98. https://doi.org/10.1016/j.compedu.2015.12.002
Máñez, I., Vidal-Abarca, E., Kendeou, P. y Martínez, T. (2019). How do students process complex formative feedback in question-answering tasks?; A think-aloud study. Metacognition anearning, 14, 65-87. https://doi.org/10.1007/11409-0s11409-01909192-w
Mason, B. J. y Bruning, R. (2001). Providing feedback in computer-based instruction: What the research tells us. Center for Instructional Innovation, University of Nebraska-Lincoln. Recuperade https://www.researchgate.net/publication/247291218_Providing_Feedback_in_Computer-based_Instruction_What_the_Research_Tells_Us
Mory, E. H. (2004). Feedback research revisited. En D. Jonassen (Ed.), Handbook of research on educational communications and technology (pp. 745-783). Mahwah, NJ: Erlbaum.
Narciss, S. (2013). Designing and evaluating tutoring feedback strategies for digitaearning environments on the basis of the interactive tutoring feedback model. Digital Education Review, 23, 7-26.
Narciss, S., Sosnovsky, S., Schnaubert, L., Andrès, E., Eichelmann, A., Goguadze, G. y Melis, E. (2014). Exploring feedback and student characteristics relevant for personalizing feedback strategies. Computers & Education, 71, 56-76. https://doi.org/10.1016/j.compedu.2013.09.011
Ness, M. (2011). Explicit reading comprehension instruction in elementary classrooms: Teacher use of reading comprehension strategies. Journaf Research in Childhood Education, 25, 98-117. https://doi.org/10.1080/02568543.2010.531076
Nicol, D. J. y Macfarlane-Dick, D. (2006). Formative assessment and self-regulateearning: A model and seven principles of good feedback practice. Studies in Higher Education, 31, 199-218. https://doi.org/10.1080/03075070600572090
OCDE. (2006). Assessing scientific, reading and mathematicaiteracy. A framework for PISA 2006. París, Francia: OCDE.
OCDE. (2010). PISA 2009 results: What students know and can do: Student performance in reading, mathematics and science. París, Francia: OCDE.
Roelle, J. y Berthold, K. (2017). Effects of incorporating retrieval intearning tasks: The complexity of the tasks matters. Learning and Instruction, 49(2), 142-156, https://doi.org/10.1016/j.learninstruc.2017.01.008
Rouet, J.-F., Britt, M. A. y Durik, A. M., (2017). RESOLV: Readers’ representation of reading contexts and tasks. Educational Psychologist, 52, 200-215. https://doi.org/10.1080/00461520.2017.1329015
Shute, V. J. (2008). Focus on formative feedback. Review of Educational Research, 78, 153-189. https://doi.org/10.3102/0034654307313795
Shute, V. J. y Rahimi, S. (2017). Review of computer-based assessment for learning in elementary and secondary education. Journaf Computer Assisteearning, 33, 1-19. https://doi.org/10.1111/jcal.12172
Tärning, B. (2018). Review of feedback in digital applications-Does the feedback they provide support learning?; Journaf Information Technology Education: Research, 17, 247-283. https://doi.org/10.28945/4104
Timmers, C. F. y Veldkamp, B. P. (2011). Attention paid to feedback providey a computer-based assessment for learning on information literacy. Computers & Education, 56, 923-930. https://doi.org/10.1016/j.compedu.2010.11.007
Van der Kleij, F. M., Eggen, T. J. H. M., Timmers, C. F. y Veldkamp, B. P. (2012). Effects of feedback in a computer-based assessment for learning. Computers & Education, 58, 263-272. https://doi.org/10.1016/j.compedu.2011.07.020
Van der Kleij, F. M., Feskens, R. C. y Eggen, T. J. H. M. (2015). Effects of feedback in a computer-baseearning environment on students’ learning outcomes: A meta-analysis. Review of Educational Research, 85, 475-511. https://doi.org/10.3102/0034654314564881
Vidal-Abarca, E., Mañá, A. y Gil, L. (2010). Individuaifferences for self-regulating task-oriented reading activities. Journaf Educational Psychology, 102, 817-826. https://doi.org/10.1037/a0020062
Vidal-Abarca, E., Martínez, T., Salmerón, L., Cerdán, R., Gilabert, R., Gil, L., ... Ferris, R. (2011). Recording on-line processes in task-oriented reading with Read&Answer. Behavior Research Methods, 43, 179-192. https://doi.org/:10.3758/s13428-010-0032-1
Ignacio Máñez
Universitat de València, España
© 2020. This work is licensed under https://creativecommons.org/licenses/by-nc-nd/4.0/deed.es_ES (the “License”). Notwithstanding the ProQuest Terms and Conditions, you may use this content in accordance with the terms of the License.