A validade segundo psicometristas e linguistas aplicados e as entrevistas de proficiência oral

Laura Márcia Luiza Ferreira

doi:10.23925/2318-7115.2020v41i5a2

Authors

Laura Márcia Luiza Ferreira Professora Adjunta na Universidade Federal da Integração Latino-Americana (UNILA) https://orcid.org/0000-0001-7632-0834

DOI:

https://doi.org/10.23925/2318-7115.2020v41i5a2

Keywords:

validade, avaliação em línguas, entrevistas de proficiência oral

Abstract

Psicometristas e linguistas aplicados colaboram para o debate sobre as avaliações de línguas; os primeiros são especialistas em como medir; e os segundos, em o quê medir. Neste artigo, argumento que há uma tensão entre os dois grupos em torno da definição do conceito de validade. Apresento uma breve revisão do conceito de validade a partir da perspectiva da psicometria de forma a relacioná-lo com as definições de validade apresentadas por linguistas aplicados, especialistas em avaliação de línguas. Em seguida, exemplifico o debate sobre a validade no contexto das avaliações de proficiência oral a partir dos conceitos de autenticidade, teste direto e indireto nos dois maiores exames de larga escala da América do Sul: o Celpe-Bras e o Celu. Ao final, argumento que os linguistas aplicados tendem a debater a validade a partir do desenho dos instrumentos, eclipsando a necessidade de levantar evidências empíricas sobre como o desenho da prova interage com outros aspectos do teste.

Downloads

Download data is not yet available.

Metrics

Metrics Loading ...

Author Biography

Laura Márcia Luiza Ferreira, Professora Adjunta na Universidade Federal da Integração Latino-Americana (UNILA)

É professora na Universidade Federal da Integração Latino-Americana (UNILA) em Foz do Iguaçu, Paraná. Doutora em Estudos de Linguagens pelo Programa de Pós-graduação do Cefet-MG, mestre em linguística aplicada pela UFMG e licenciada em Letras (Português/Francês) pela mesma instituição. Foi Professora-Leitora de Língua Portuguesa e Cultura Brasileira junto ao Programa de Leitorado do Ministério das Relações Exteriores na Universidade de Chulalongkorn, na Tailândia. Foi Professora de Língua Portuguesa Instrumental em Timor-Leste no âmbito do programa brasileiro de cooperação educacional.

References

AMERICAN EDUCATIONAL RESEARCH ASSOCIATION; AMERICAN PSYCHOLOGICAL ASSOCIATION; NATIONAL COUNCIL ON MEASUREMENT IN EDUCATION. 2014 Standards for educational and psychological testing. Nova Iorque: AERA.

BACHMAN, Lyle F. 1990 Fundamental considerations in language testing. Oxford: Oxford University Press.

BACHMAN, Lyle F.; PALMER, Adrien S. 1996 Language testing in practice: designing and developing useful language tests. Oxford: Oxford University Press.

BRASIL. 2016 Ministério da Educação. Secretaria de Ensino Superior. Certificado de Proficiência em Língua Portuguesa para Estrangeiros: Roteiro de Interação. Brasília.

BROWN, H. Douglas; ABEYWICKRAMA, Priyanvada. 2010 Language Assessment: principles and classroom practice. Nova Iorque: Longman Pearson.

BROWN, Annie. 2005 Interviewer variability in oral proficiency interviews. Frankfurt: PeterLang.

BYGATE, Martin. 2011 Teaching and testing speaking. In: LONG, Michael H.; DOUGHTY, Catherine J. The handbook of language teaching. Chichester: Wiley-Blackwell. p.411-440

CHAMBERS, Francine. 1997. What do we mean by fluency? System, v.25, n.4, p.535-544.

CONSOLO, Douglas A. 2005 Postura sobre avaliação de proficiência oral do professor de língua estrangeira: implicações para o cenário brasileiro. IN: FREIRE, M.M.; VIERA-ABRAHÃO, M.H.; BARCELOS, A.M.F. Linguística Aplicada e contemporaneidade. São Paulo: ALAB, Pontes Editores.

DELL’ISOLA, Regina L. Péret; SCARAMUCCI, Matilde V.R.; SCHLATTER, Margarete; JÚDICE, Norimar. 2003 A avaliação de proficiência em português língua estrangeira: o exame CELPE-Bras. Revista Brasileira de Linguística Aplicada, Belo Horizonte, v.3, n.1, p.153-184.

ECKES, Thomas. 2015 Introduction to many-facet rasch measurement: analyzing and evaluating rater-mediated assessments. Frankfurt: PeterLang.

ELSE, Consorcio Español como Lengua Segunda y Extranjera. 2019 Dispõe informações sobre: exame CELU, Certificado de Español Lengua y Uso. Disponível em: https://www.celu.edu.ar/es/content/actividades-del-examen- Acesso em: 11 jun. 2019.

FERREIRA, Laura Márcia Luiza. Avaliação da proficiência oral: uma análise fatorial e de discriminação de itens do exame Celpe-Bras. Tese de Doutorado. 244f. Belo Horizonte: CEFET-MG, 2018.

_________. Validade de conteúdo e especificação das propostas de interação oral dos exames Celpe-Bras e CELU. IN: BARROSO, Silvina; DANDREA, Fabio. X Coloquio CELU: enseñanza y evaluación ELSE: aportes para una politica orientada a la integración regional. Río Cuarto: UniRío Editora (Universidad Nacional de Río Cuarto), 2019. p.23-37

FULCHER, Glenn. Testing second language speaking. Londres: Routledge, 2003.

FULCHER, Gleenn; DAVIDSON, Fred. 2007 Language testing and assessment: an advanced resource book. Routledge: Nova Iorque. p.91-114

GRABE, William; STOLLER, Fredricka L. 2002 Teaching and researching reading. Harlow, England: Pearson Education, Longman.

HYMES, D. 1972 On Communicative Competence. In PRIDE, J. B. e HOLMES, J. Sociolinguistics. England: Penguin Books. 381 p.

HUGHES, Arthur. 1989 Testing for language teachers. Cambridge: Cambridge University Press.

JOHNSON, Marysia. 2001 The art of non-conversation: a reexamination of the validity of the oral proficiency interview. Yale Haven & London: Yale University Press.

LUCKESI, Cipriano Carlos. 2011 Avaliação da aprendizagem escolar: estudos e proposições. 22ed. São Paulo: Editora Cortez.

NATION, Paul. 1989 Improving speaking fluency. System, v.17, n.3, p.377-384.

McNAMARA, Tim. 2000 Language Testing. Oxford: Oxford University Press.

McNAMARA, Tim. 2004 Language Testing. In: DAVIES, Alan; ELDER, Catherine. The handbook of applied linguistics.

MCNAMARA,Tim. 2008 Language assessment as social practice. IN: IV COLOQUIO CELU, Universidad de San Martín, Buenos Aires. Anais eletrônicos...Buenos aires: Universidad de San Martín, 2008. Disponível em: https://www.celu.edu.ar/sites/www.celu.edu.ar/files/images/stories/pdf/McNamara_conferencia_.pdf Acesso em: 01 de mai. 2019

MESSICK, Samuel. 1987 Validity. Nova Jersey: Educational Testing Service Princeton.

MESSICK, Samuel. 1996 Validity and Washback in Language Testing. Language Testing, v. 13, n.3, p.241–256., nov., p.241–256. Doi:10.1177/026553229601300302

NEVES, Liliane Oliveira. 2018 Confiabilidade e comportamento avaliativo na prova oral do exame Celpe-Bras: um estudo longitudinal. Tese de Doutorado. Belo Horizonte: CEFET-MG.

SCARAMUCCI, Matilde. V. R.. 2001 O Projeto Celpe-Bras no Âmbito do Mercosul: contribuições para uma definição de proficiência comunicativa. In: ALMEIDA FILHO, J.C.P (Org.) Português para Estrangeiros Interface com o Espanhol. 2.ed. Campinas: Pontes. p. 77-90

SCHLATTER, M. ; Scaramucci, Matilde V. Ricardi ; PRATI, S. 2008 Celpe-Bras and CELU proficiency exams as political acts in Brazil and Argentina. In: ALTE 3rd - International Conference Cambridge 2008, Cambridge. Programme of the ALTE 3rd - International Conference Cambridge 2008. Cambridge, 2008. v. 1.

SCHOFFEN, Juliana Roquele. 2009 Gêneros do discurso e parâmetros de avaliação de proficiência em português como língua estrangeira no exame Celpe-Bras. Tese de Doutorado. Porto Alegre: UFRGS.

SHOHAMY, Elana. 2000 Assessment. IN: CELCE-MURCIA, Marianne; OLSHTAIN, Elite. Discourse and context in language teaching: a guide for language teachers. Cambridge: Cambridge University Press. p. 201-215.