Efeito Retroativo Trabalho apresentado na disciplina Avaliação em PLE. CEFET-MG

1. CENTRO FEDERAL DE EDUCAÇÃO TECNOLÓGICA DE MINAS GERAIS
Departamento de Linguagem e Tecnologia
Mestrado em Estudos de Linguagens
Testing for Language Teachers
Achieving beneficial backwash
Fernanda Ricardo Campos

2. Arthur Hughes
• Ensinou linguística aplicada na University of Reading por
25 anos
• Criou e dirigiu Testing and Evaluation Unit.
• Dirigiu projetos de teste de Inglês na Bosphorus
University, Istambul (1982-4) e no Ministério de Ensino
Secundário, Marrocos (1992-3).
• Ele foi o fundador-editor da revista internacional
Language Testing.
• Publicou amplamente nessa área, realizou consultorias
no Reino Unido e em vários países no exterior.
• Mesmo aposentado, ele continua a escrever e atuar
como consultor

3. Alcançando um efeito
retroativo benéfico
BACKWASH
área de educação
WASHBACK
área de educação
linguísitica
“É o efeito que os testes tem no ensino e
aprendizagem”

4. Efeito
Retroativo
Ação no
passado Impacto
Ex.: Avaliação
Ocorre no fim
do processo

5. Impacto
EXAMES RELEVANTES:
- Ensino;
- Aprendizagem;
- Currículo;
- Material didático;
- Atitudes dos envolvidos.
Avaliação =
Momento Construtivo
Avaliação =
Julgamento ou Classificação

6. Habilidades e Incentivo
• Encorajar habilidades orais, testar habilidades orais;
• Uma tendência testar o que é mais fácil do que é mais
importante;
Razões para não testar habilidades específicas:
1. Confiabilidade: não pode ser obtida quando o
formato do teste (entrevista oral) requer pontuação
subjetiva; (Capítulo 9 e 10)
2. Custo: tempo e dinheiro (Capítulo 7)
• Importância de outras habilidades a serem testadas;
• A certas habilidades devem ser dado “peso” suficiente
em relação a outras habilidades.

7. Amostras
Imprevisibilidade
• Um teste pode medir uma amostra da língua, é
importante que essa amostra colhida represente, tanto
quanto possível, o escopo completo do que está
especificado;
• Se a amostra é retirada de uma área restrita das
especificações, o efeito retroativo tende a ser sentido
apenas nessa área;
• Por exemplo, se a parte escrita do TOEFL, ao longo dos
anos, for apenas comparar/contrastar;
descrever/interpretar, então o resultado provável será
uma preparação limitada a apenas esses dois tipos de
tarefa, enquanto outras seriam ignoradas.

8. • O efeito retroativo não seria benéfico com uma
amostra pequena;
• Sempre que o conteúdo de um teste se torna
previsível, o ensino e a aprendizagem são susceptíveis
de se concentrar no que pode ser previsto;
• Um esforço deve ser feito para testar toda a gama
de especificações.

9. Teste Direto
• O Teste Direto implica em testar precisamente a
habilidade que o candidato deseja que seja avaliada,
com textos e tarefas o mais autêntico possível;
• Testar diretamente as habilidades significa a prática
dessas habilidades;
• Exemplo1: Produção textual = saber se o aluno sabe
escrever um texto.
• Exemplo2: Elaboração de um texto = uso de conectivos
como referencial para avaliar um texto no que diz
respeito à coesão e coerência.

10. • Testar as habilidades ‘superiores’ diretamente;
• Testar as ‘micro-habilidades’ (tornando essas
habilidades maiores) indiretamente;
• Os alunos começam a praticar da maneira que
os professores querem esperam.

11. Referência em critérios
• Se os alunos sabem o que têm que fazer terão uma
imagem clara do que precisam fazer para alcançar;
• Se executarem as tarefas dentro do nível de critérios,
então eles serão bem sucedidos no teste,
independentemente de como os outros alunos o
realizarem;
• Também é possível ter uma série de testes com
referência em critérios, cada um representando um
nível diferente de proficiência;
• Os alunos devem completar a maioria das tarefas
com êxito, a fim de "passar" no teste e passar para o
próximo nível de proficiência.
• Exemplo: General Certificate of Secondary Education

12. Testes Objetivos
• Proporciona uma imagem mais verdadeira do
que foi realmente alcançado Capítulo 3);

13. Compreensão
do Teste
• Para um efeito retroativo benéfico, professores e
alunos devem entender as exigências do teste;
• Justificativas, fundamentos, especificações e itens
de amostra de um teste deverão ser
disponibilizados para todos os envolvidos para
uma melhor preparação para o teste;
• Aumentar a confiabilidade do teste.(Capítulo 5)

14. Assistência aos
professores
• A introdução de um novo teste pode fazer novas
exigências aos professores, por exemplo:
Teste
Tradicional
Teste
Comunicativo

15. • Razão de um teste comunicativo pode ter sido
introduzido para encorajar o ensino de uma
abordagem comunicativa.
• Os professores também precisam de orientação e
formação sobre como e porque fazer isso;
• Se estas orientações não são dadas, o teste não
vai conseguir o efeito desejado e resultado
poderá causar um mal-estar;
• Novos testes são feitos para ajudar a mudar o
ensino;
• O apoio tem de ser dado para ajudar no efeito de
mudança.
• RL.162

16. Custos
• Produção, distribuição de amostras de testes e
formação de professores;
• Tempo e dinheiro;
• Procedimento impraticável;
• Incompreensão do que está envolvido;
(Novo)
Desperdício
com o Teste
(Velho)
Atividades
inadequadas
(Velho)
Profissional
competente

17. Questionamentos
• Qual será o custo de não se atingir um efeito
retroativo benéfico?
• Como você melhoraria o efeito retroativo para os
testes que você conhece?
• Crie argumentos, que você usaria para convencer
um cético, sobre a importância de se fazer as
mudanças que você recomenda.

18. Leitura Complementar
• ALDERSON, J. C., & WALL, D. (1991). The Sri Lankan O-Level
Evaluation Project: Third Interim Report. Lancaster University.
• HUGHES. A. (1993). Backwash and TOEFL 2000. Unpublished
manuscript, University of Reading.
• SHOHAMY, E, DONITSA-SCHMIDT, S., & FERNAM, L. (1996). Test
impact revisited: washback effect over time. Language Testing
13 (3), p. 298-317.
• WATANABE, Y. (1996). Does grammar translation come from
the entrance examination? Preliminary findings from classroom-based
research. Language Testing 13 (3), p. 318-333.
------------------------------------------------------------------------------------------------
• SCARAMUCCI, M.V.R. (2004). Efeito retroativo da avaliação no
ensino/aprendizagem de línguas: o estado da arte. Trabalhos
em Linguística Aplicada 43 (2): 203-226

19. Referências Bibliográficas
• HUGHES. A. (1989). Testing for Language
Teachers. Cambridge University Press.