Gonzalo Evidosol 2009

Importancia del feedback automático como apoyo al aprendizaje en el Moodle Gonzalo Abio (Centro de Educação – UFAL) [email_address] IV EVIDOSOL (IV Encontro Virtual de Documentação em Software Livre) - I CILTEC Online (Congresso Internacional de Linguagem e Tecnologia Online) - http://evidosol.textolivre.org Internet, 3 a 5 de junio de 2009 1

“ Una acción sin feedback es completamente improductiva para el alumno” (LAURILLARD, 1993, p. 61).

Algunos c omentarios de alumnos de español después de una actividad de lectura con feedback automático:

¿Por qué les gustó la actividad de lectura que hicimos hoy?

Porque nos obliga a pensar.

Por que nos obliga a leer el texto.

Porque vemos que no todo lo que pensamos que es, es así mismo en la realidad.

2

Introducción: Problemática y contextualización ………….

Objetivos …………………...

Metodología ………………..

Algunos resultados ………..

A modo de conclusión …….

Bibliografía …………………

PARTES DE ESTA PRESENTACIÓN 4 21 28 3 20 36 38

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN

Brasil ha dado importantes pasos para la democratización de la enseñanza por la vía de la EaD. Fruto de ello ha aumentado el número de alumnos que estudian bajo esa modalidad.

De 2004 a 2008 las matriculas presenciales sólo aumentaron 17%, mientras que en la modalidad a distancia fue de 1.175% (GLOBO, 2009). Sólo en la UAB, para 2009 habrá 562 polos y se deben matricular cien mil estudiantes (MEC, 2008).

La lectura sigue siendo hasta ahora la herramienta fundamental en el proceso de enseñanza formal. La asimilación y comprensión que un lector tendrá de la información que debe aprender provocará un fuerte impacto en su rendimiento académico.

¿Verdad?

4

Son pocas las acciones realizadas en la universidad para la creación de destrezas productivas de lectura o reflexión sobre estrategias adecuadas de lectura y comprensión de textos académicos.

Ese problema es aún mayor en los cursos a distancia en que el alumno con frecuencia lee y estudia los textos solo.

5 INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.)

Los textos científico-técnicos y académicos que el alumno encuentra al entrar en la universidad tienen un contenido que es básicamente nuevo. Por eso, el lector normalmente no puede aplicar los esquemas de contenido que ya conoce (MALDONADO y SEQUEDA, 2002).

Si algo caracteriza al lenguaje científico-técnico es su léxico . El significado de un término científico debe ser aprendido de hecho. No tiene matizaciones. Un término puede aparecer muchas veces en un mismo texto, pero siempre tendrá el mismo significado y si el lector no lo conoce o no lo comprende, no podrá entender lo que lee.

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 6

Programas informáticos específicos pueden ayudar en la lectura y la comprensión de los textos, proporcionando feedback adecuado.

Un ejemplo:

El programa de autoría “ELO” ( Ensino de Línguas On-line ) (LEFFA, 2003; 2006) [1] .

Permite preparar actividades de lectura en que el feedback automático proporcionado [2] varía de acuerdo con las respuestas del usuario.

Ese feedback facilita el establecimiento de un diálogo que ayuda en la auto-corrección de las hipótesis realizadas, así como en la focalización de los elementos principales del texto y puede orientar la utilización de las habilidades de lectura adecuadas para un mejor aprovechamiento de la lectura realizada.

[1] Sitio web do projeto ELO: http :// elo.ucpel.tche.br

[2] En este contexto, el término en inglés feedback me parece más adecuado que

su equivalente en español retroalimentación .

¿Qué es ese feedback automático? Un antecedente, a modo de ejemplo : actividad de lectura con pregunta de opción múltiple preparada con el programa “ELO”. Texto de lectura obligatoria en “Estágio supervisionado de español” (ABIO, 2006). 8 INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.)

Feedback positivo proporcionado al marcar la opción correcta 9 INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) En este caso se está trabajando las diferencias entre métodos y enfoques , que son conceptos de difícil comprensión por parte de los profesores de lenguas extranjeras (ABIO, 2006).

Respuesta al marcar la opción incorrecta con orientación hacia el conocimiento adecuado. 10 INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.)

11 INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) Otra pregunta con el mismo texto

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 12 Feedback positivo proporcionado al elegirse la opción correcta

Respuesta al accionar el botón “Dica” (de ayuda) INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 13

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 14 La retroalimentación es también parte integrante de los modelos cognitivos de adquisición de segundas lenguas (L2). Adaptado de Ellis (1994) por Yagüe (2004).

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) Y antiguamente (en la década del 90) los profesores sólo podían preparar actividades de CALL con feedback de primero o segundo nivel de interactividad (usando, por ejemplo, scripts de java). 15

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) Otro ejemplo de actividad en Internet con script de java y feedback de bajo nivel (preparado por el autor en el 2000 y dirigido especialmente a brasileños) 16

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 17 Aunque sean un poco menos sofisticadas que las posibilidades brindadas por el ELO , el profesor que trabaja preparando actividades en el MOODLE también puede ofrecer varios tipos de feedback automático formativo, con la ventaja de que ya están integrados al propio M OODLE . ELO

Pero percibo que en algunos cursos a distancia (usando un AVA como el Moodle ), la preferencia de los autores de esos cursos es para que el trabajo sea fundamentalmente con las herramientas de construcción colaborativa del conocimiento (forum, chat, y en menor medida, wiki y glosario) mientras que muchas veces se ignoran totalmente las posibilidades de evaluación con feedback automático que ese mismo AVA ofrece y que pueden complementar el trabajo realizado y las propuestas de aprendizaje.

INTRODUCCIÓN: PROBLEMÁTICA Y CONTEXTUALIZACIÓN (cont.) 19 Un buen proceso de enseñanza en EaD no depende sólo de construir materiales con explicaciones claras y de ofrecer oportunidades para la construcción colaborativa del conocimiento. Debemos proporcionar también oportunidades para la evaluación y, preferiblemente, autoevaluación del alumno, de modo que éste pueda comprobar el nivel de los conocimientos adquiridos y orientarse mejor en ese proceso de aprendizaje. No es el único elemento, pero la calidad y rapidez del feedback que se proporcione es también fundamental.

20 Objetivos de este trabajo

Preparar un cuestionario de respuesta múltiple en el Moodle , donde se configurará un feedback automático con respuestas (positivas o negativas) de acuerdo a la opción que el estudiante marque, donde se trate de ayudar en la comprensión de una serie de conceptos de difícil asimilación, proporcionando las explicaciones necesarias.

Observar el rendimiento general en la realización del cuestionario por parte de los alumnos.

Analizar la aceptación y opiniones personales emitidas por los alumnos sobre la importancia percibida de ese tipo de actividad de evaluación formativa (cuestionario y feedback automático proporcionado.

Metodología

En el material de estudio (impreso y virtual) de la disciplina “Educação e Novas Tecnologias da Informação e da Comunicação”, dado en el curso de Pedagogía (UFAL-UAB), existe un subcapítulo que posee una carga conceptual grande, pues en él se muestran algunos conceptos considerados importantes y que el alumno debe conocer en esa disciplina de introducción:

Las diferencias entre EaD , e-learning y educación online ;

Las diferencias entre hipertextos e hipermedia ;

Conocer qué es un LMS y un Ambiente Virtual de Aprendizaje ( AVA );

Las diferencias entre los conceptos de cooperación y colaboración ;

El concepto de distancia transaccional (MOORE, 1993).

21

22 Metodología (cont.) Sobre el material Fragmento del material impreso y virtual del curso “Educação e NTIC” (ABIO, 2007), con la parte inicial del subcapítulo de presentación de los conceptos.

23 Otro fragmento del mismo material, mostrando aquí los conceptos de cooperación y de colaboración. Metodología (cont.) Sobre el material

24 Metodología (cont.) Sobre el cuestionario Después de estudiar el texto y realizar otras actividades sugeridas (como la actividad 5 observada en la lámina anterior), los alumnos podían hacer el cuestionario hasta tres veces, sin límite de tiempo.

Metodología (cont.) Sobre el cuestionario Fragmento de cuestionario preparado con el AVA Moodle donde se proporciona un feedback de acuerdo con la opción marcada. Feedback correctivo Feedback positivo 25

Metodología (cont.) Sobre el cuestionario Feedback correctivo 26

Metodología (cont.) Sobre el cuestionario En esta presentación, lo que más nos interesa es analizar las respuestas a las preguntas finales del cuestionario aplicado (8, 9a y 9b), que se pueden ver aquí debajo: 27

28

Respondieron el cuestionario 177 alumnos de los 211 matriculados en el curso de Pedagogía (UFAL-UAB) (2009) en cinco polos de educación a distancia durante el periodo de análisis.

De los 242 intentos de rellenado del cuestionario, 20 no fueron completados ( N= 222 ).

Varios alumnos hicieron uso de la posibilidad de repetir hasta 3 veces el cuestionario.

32 alumnos hicieron el cuestionario 2 veces.

13 alumnos hicieron el cuestionario 3 veces.

Algunos resultados

29 Algunos resultados (cont.) En la mayoría de los casos de repetición del cuestionario, el tiempo empleado en la segunda o tercera ocasión era menor que el usado para completarlo por primera vez, como se puede observar aquí debajo:

30 ¿Qué respondieron los alumnos, específicamente en esas dos preguntas finales (8 y 9), donde se les pedía la opinión sobre la actividad y sobre el feedback recibido? (vea las preguntas en la lámina 27) Algunos resultados (cont.)

31 De los 177 alumnos, sólo uno (1) dio una respuesta negativa a la pregunta 8 (“ Você acha que completar este questionário te ajudou a compreender melhor os conceitos estudados. ”). En su explicación (pregunta 9b), escribió: “ Não é útil, porque é muito rápido e não permite a aprendizagem .” Esa respuesta es aparentemente incomprensible, porque el cuestionario no tenía límite de tiempo para su realización. Ya en la pregunta 9b, respondió: “ Pode, porque torna-se mais clara a compreensão .” Algunos resultados (cont.)

32

El resto de los alumnos (176) respondieron las preguntas 8 y 9 de forma positiva. Veamos algunas de esas respuestas:

PREGUNTA 9a:

Muito útil. Eu, por exemplo, deslizei em algumas coisas básicas que eu sei que agora não deslizarei mais. Considero que os testes não são as melhores formas de conhecimento, mas sempre nos ajuda a compreender um fenômeno mais profundo, ainda mais quando tem algumas "cascas de banana".

- Certamente essa forma de avaliação estimula o raciocínio e mexe com a memória visual do aluno , uma vez que apresenta uma resposta verdadeira e outra falsa.Mostra também que não basta ler uma só vez , é preciso fazer várias releituras , pois cada vez que lemos um texto sempre descobrimos novas informações.

Realmente é bastante útil e prático esse tipo de interação, onde logo após uma leitura extensa, visamos um questionário que sintetiza o as palavras, os conceitos mais importantes, isso faz com que a fixação seja mais precisa.

Sim, porque ler todos esses texto já nos ajuda a conhecer os assuntos abordados, mas nunca temos a certeza de até onde sabemos sobre o que estudamos se não formos questionados.

Algunos resultados (cont.)

33

Respuestas a la pregunta 9a (cont.):

Gostei muito deste questionário,claro que ele é útil, ele serve para uma auto-avaliação dos assuntos estudados por nós alunos.

Sim, sou totalmente a favor de questionários para que haja uma melhor compreensão do texto estudado.

Sim ,pois é possível determinar se o conteúdo estudado foi realmente assimilado , sendo também uma forma de testar o conhecimento adquirido.

Sim as questões de múltipla escolha elas nos faz pensar mais sobre o que estudamos e percebemos se realmente aprendemos o que estudamos.

Tenho mais convicção de minhas respostas agora, seria bom que toda tarefa fosse disponibilizado um questionário assim, pois só nos ajuda e esclarece, dando assim uma segurança maior no que estudamos, nos tornado alunos convictos do que falamos e debatemos a respeito, tanto no moodle, quanto fora dele.

- muito interessante!! Este questionário ajudou muito na compreensão destes conceitos, a leitura do texto também foi ótima, mas o questionário foi uma maneira prática de colocar a prova todos os conhecimentos adquiridos com essa leitura.

34

Veamos ahora algunas de las respuestas a la pregunta 9b:

Claro que sim. Pois a interacao " tete a tete" nos faz refletir sobre nossa resposta. Muito interessante!!!

- O feedback é uma ferramenta que contribui muito para a memorização e traz um novo comentário acerca do foi estudado , fazendo com que o aluno aprenda ainda mais. Gostei bastante desse questionário, mostrou que tenho que fazer mais leituras antes de me submeter a esse tipo de avaliação.

Acho que qualquer feedback é útil, pois a troca de informações, modos de arguir, questionar, isso desperta e aguça a interação na EaD.

A correção instantânea foi muito bom, na hora pude perceber meu erro e corrigí-lo, conceitualmente claro, me familiarizando um pouco mais sobre os termos mais importantes ligados a proposta do curso. Valeu!...

Sim Tudo é válido no que se refere a aprendizagem. Apesar do meu medo em responder por não ter tanta certeza, achei ótimo, bem elaborado, bem melhor do que a prova.

- O feedback automático explica todas as dúvidas e ajuda muito. A questão de nº 4 eu respondi SIM, pois no meu ver qualquer curso de curta duração, independente de ser um ambiente escolar ou um ambiente empresarial se enquadrava no conceito de e-learning. A resposta do feedback tirou todas as minhas dúvidas. Obrigada!

Otras respuestas a la pregunta 9b (cont.):

Acho que sim. Porque nós vemos a resposta de imediato.

O feedback foi muito importante na hora de tirar minhas dúvidas e na hora de confirmar o que eu já sabia, é uma ferramenta fundamental para ajudar o aluno neste tipo de atividade. parecia até que o professor estava do meu lado na hora da atividade. Abraços!

Com certeza, como eu havia comentando na pergunta anterior, esse feedback automático, nos dá uma sensação de que não estamos sozinhos, pelo menos para mim, essa sensação é muito importante.

Acho que sim! Esse tipo de atividade além de ser bem objetivo é mais descontraído e nos dá a possibilidade de sabermos o porquê dos erros e acertos de nossas respostas imediatamente. Automaticamente nos ajuda a tirar nossas dúvidas em determinado assunto fazendo com que diminua ainda mais a Distância Transacional entre nós!

35 Algunos resultados (cont.)

36 A modo de conclusión

A partir de las últimas preguntas (8, 9a y 9b) pudimos observar que este cuestionario (tanto en sus preguntas, como en el feedback automático proporcionado) y bajo las condiciones ofrecidas, fue bien aceptado por la gran mayoría de los alumnos participantes, donde algunos llegaron incluso a pedir una frecuencia mayor de realización de este tipo de actividad de autoevaluación.

Algunas de las ventajas descritas por los alumnos fueron: rapidez en el ofrecimiento de las respuestas, mejor orientación, simulación de diálogo con el profesor, sensación de cercanía, motivación para seguir estudiando, etc.

37 A modo de conclusión (cont.)

A pesar de que todavía es necesario realizar un análisis detallado del rendimiento general en cada una de las preguntas realizadas, pudimos constatar que no hubo diferencias entre grupos de alumnos (divididos por polos).

Cuando un alumno optaba por realizar de nuevo el cuestionario, la tendencia era a disminuir el tiempo total empleado para terminarlo, lo cual es lógico, aunque en algunos casos esto no ocurrió, probablemente por causas diversas).

Los resultados obtenidos nos incitan a seguir introduciendo este tipo de actividades de autoevaluación formativa en los cursos a distancia.

BIBLIOGRAFÍA ABIO, Gonzalo. Lecturas interactivas con el sistema de autoría “ELO”. 2o Encuentro de Educación y Software Libre. Biné/EDUSOL, UNAM, 2006. Disponible en: <http://www.cedu.ufal.br/professor/ga/Lecturas_interactivas_con_sistema_ELO-BINE-EDUSOL-UNAM-2006.pdf>. Consultado el 18.05.2009. AGENCIA GLOBO. Graduação a distância quase dobra no Brasil em um ano . 12 de maio de 2009. Tomado del portal de la ABED. Disponible en: < http://www2.abed.org.br/noticia.asp ? Noticia_ID =429 > Consultado el 21.05.2009. BASOREDO LEGO, Carmelo. ¿Cómo formular objetivos para el aprendizaje y el desarrollo de competencias? Quaderns Digitals , n. 58, 30 de mayo de 2009. Disponible en: <http://www.quadernsdigitals.net/index.php?accionMenu=hemeroteca.VisualizaArticuloIU.visualiza&articulo_id=10860> Consultado el 03.06.2009. CHAMARELLI, , Renata. Modalidade de ensino evolui, conquista alunos e vence resistências . MEC, Brasil. Disponible en: < http://portal.mec.gov.br/index . php ? option =com_content&task=view&id=11699 > Consultado el 25.11.2008. ELLIS, Rod. The Study of Second Language Acquisition . Oxford: Oxford University Press, 1994. LAURILLARD, D. Rethinking University Teaching . London: Routledge, 1993. 38

BIBLIOGRAFÍA (cont.) LEFFA, Vilson J. Uma ferramenta de autoria para o professor: o que é e o que faz. Letras de Hoje , Porto Alegre, v. 41, n. 144, p. 189-214, 2006. Disponible en: <http://www.leffa.pro.br/textos/trabalhos/ferramentas_de_autoria.pdf> Consultado el 12.01.2009. LEFFA, Vilson J. Interação simulada: um estudo da transposição da sala de aula para o ambiente virtual. In: ______. (Org.). A interação na aprendizagem das línguas . Pelotas: EDUCAT, 2003, p. 175-218. Disponible en: <http://www.leffa.pro.br/textos/trabalhos/simulada.pdf> Consultado el 12.01.2009. MALDONADO, Luis F.; SEQUEDA, Juan B. Representaciones múltiples y comprension de documentos en el dominio de la tecnología. Revista TED , n. 11, 2002. Disponible en: < http://www.pedagogica.edu.co/storage/ted/articulos/ted11_05arti.pdf > Consultado el 12.07.2006. MEC. Educação a distância multiplica vagas. Portal MEC, Brasilia. 17.12.2008. Disponible en: < http://portal.mec.gov.br/index . php / tvmec /arquivos/ pdf / index . php ? option =com_content&task=view&id=11814 > Consultado el 18.05.2009. YAGÜE BARREDO, Agustín. El cederrón en la enseñanza del ELE: entre la realidad y el deseo. revista RedELE , n. cero, marzo de 2004. Disponible en: < http :// www.educacion.es / redele /revista/ yague.shtml > Consultado el 23.03.2006. 39

MUCHAS GRACIAS Gonzalo Abio [email_address]