A validade do Enade para avaliação decursos superiores
Uma abordagem multinível
Palavras-chave:
aprendizagem, definição de pontos de corte, competências e habilidades, qualidade da escolaResumo
O presente estudo se propõe a identificar qual parcela da variância da prova
do Enade está associada ao que se pretende medir e, assim, identificar a sua
capacidade de se tornar um indicador da qualidade dos cursos. Foram utilizados
dados de 71.838 ingressantes e 58.428 concluintes do curso de Administração
no Enade de 2006, além de informações sobre as instituições e
o perfil socioeconômico dos respondentes. Os resultados demonstram
que as notas do Enade decorrem de diferenças importantes
de níveis de habilidade no momento de entrada no curso, e que a
maior parte da variabilidade das notas do Enade está dentro dos
cursos, explicada pelos perfis socioeconômicos.
Referências
AERA; APA; NCME. Standards of Educational and Psychological testing. Washington, DC: American Educational Research Association, 1999.
ANTONAKIS, J. et al. On making causal claims: a review and recommendations. The Leadership Quarterly, v. 21, n. 6, p. 1086-1120, 2010.
BROOKE, N.; SOARES, J. F. (Org.). Pesquisa em eficácia escolar: origem e trajetórias. Belo Horizonte: Editora UFMG, 2008.
CARROLL, J. B. A model of school learning. Teachers College Record, v. 64, p. 723-733, 1963.
FERRAO, M. E. Introdução aos modelos de regressão multinível em educação. Campinas, São Paulo: Komedi, 2003.
FERRAO, M. E.; FERNANDES, C. O efeito-escola e a mudança – dá para mudar? Evidências da investigação brasileira. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación (Reice), v. 1, n. 1, 2003. Disponível em: <http://www.ice.deusto. es/rinace/reice/vol1n1/FerraoyFernandes.pdf>. Acesso em: 8 jun. 2009.
GOLDSTEIN, H. The difficulty of ranking schools: the limits to ‘value-added’. New Economy, v. 27, n. 4, p. 391-405, 2001.
GOLDSTEIN, H. et al. A multilevel analysis of school examination results. Oxford Review of Educacion, v. 19, n. 4, p. 425-433, 1993.
GOLDSTEIN, H.; WOODHOUSE G. Pesquisa sobre eficácia escolar e politicas educacionais. In: BROOKE, N.; SOARES, J. F. (Org.). Pesquisa em eficácia escolar: origem e trajetórias. Belo Horizonte: Editora UFMG, 2008. p. 411-424.
JESUS, G. R.; LAROS, J. A. Eficácia escolar: regressão multinível com dados de avaliação em larga escala. Avaliação Psicológica, v. 3, n. 2, p. 93-106, 2004.
LANDEIRA-FERNANDEZ, J.; PRIMI, R. Comparação do desempenho entre calouros e
formandos no Provão de Psicologia 2000. Psicologia: Reflexão e Crítica, v. 15, n. 1, p.
219-234, 2002.
MESSICK, S. Validity of psychological assessment: validation of inferences from persons' responses and performances as scientific inquiry into score meaning. American Psychologist, v. 50, n. 9, p. 741-749, 1995.
PRIMI, R. Evidências de validade das provas do Enade – 2004. In: RISTOFF, D.; LIMANA, A.; BRITO, M. R. (Org.). Enade: perspectiva de avaliação dinâmica e analise de mudanças. Brasília: Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Inep), p. 59-76, 2006a.
PRIMI, R. A validade do Enade para avaliação da qualidade dos cursos de instituições de ensino superior. Projeto de Pesquisa. Itatiba: Universidade São Francisco, LabAPE, 2006b.
PRIMI, R.; FERNANDEZ, J.L.; ZIVIANI, C. O provão de psicologia: objetivos, problemas, consequências e sugestões. Psicologia: Teoria e Pesquisa, v. 19, n. 2, p. 109-116, 2003.
PRIMI, R; MUNIZ, M.; NUNES, C. H. S. S. Definições contemporâneas de validade de testes psicológicos. In: Claudio Simon Hutz. (Org.). Avanços e polêmicas em avaliação psicológica. São Paulo: Casa do Psicólogo, p. 243-265, 2009.
RAUDENBUSH, S. W. Schooling, statistics, and poverty: can we measure school improvement? New Jersey: Educational Testing Service, 2004a.
RAUDENBUSH, S. W. What are value-added models of estimating and what does this imply for statistical practice. Journal of Educational and Behavioral Statistics, v. 29, n. 1, p. 121-129, 2004b.
RAUDENBUSH, S. W.; BRYK. A. S. Hierarchical linear models: applications and data analysis methods (advanced quantitative techniques in the social sciences). London: Sage Publications, 2002.
RUBIN, D. B. Estimating causal effects of treatments in randomized and nonrandomized studies. Journal of Educational Psychology, v. 66, n. 5, p. 688-701, 1974.
SILVA, M. C. R. et al. Teoria de Resposta ao Item: equalização da prova de Administração do Enade. In: CAPOVILLA, F. C. (Org.). Transtornos de aprendizagem: progressos em avaliação e intervenção preventiva e remediativa, v. 1. São Paulo: Memnon, 2010. p. 239-246.
SNIJDERS, T. A. B.; BOSKER, R. Multilevel analysis: an introduction to basic and advanced multilevel modeling. London: Sage Publications, 2003.
SOARES, J. F. O efeito da escola no desempenho cognitivo de seus estudantes. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educacion (Reice), v. 2, n. 2, p. 83-104. 2004. Disponível em: <http://www.ice.deusto.es/rinace/reice/vol2n2/Soares.pdf>. Acesso em: 20 mai. 2008.
SOARES, J. F. O efeito da escola no desempenho cognitivo de seus alunos. In: SOUZA, A. M. (Org.). Dimensões da avaliação educacional. Petrópolis: Vozes, 2005, p. 174-204.
SOARES, J. F., CASTRO, C. M.; RIBEIRO, L. M. O Provão: os cursos A são os que mais oferecem aos estudantes? Belo Horizonte: UFMG. Texto não publicado, 2000.
SOARES, J. F., RIBEIRO, L.; CASTRO, C. M. Valor agregado de instituições de ensino superior em Minas Gerais para os cursos de Direito, Administração e Engenharia Civil. Dados, v. 44, n. 2, p. 363-396, 2004.
URBINA, S. Essentials of psychological testing. New Jesey: John Wiley & Sons Inc., 2004.
ANTONAKIS, J. et al. On making causal claims: a review and recommendations. The Leadership Quarterly, v. 21, n. 6, p. 1086-1120, 2010.
BROOKE, N.; SOARES, J. F. (Org.). Pesquisa em eficácia escolar: origem e trajetórias. Belo Horizonte: Editora UFMG, 2008.
CARROLL, J. B. A model of school learning. Teachers College Record, v. 64, p. 723-733, 1963.
FERRAO, M. E. Introdução aos modelos de regressão multinível em educação. Campinas, São Paulo: Komedi, 2003.
FERRAO, M. E.; FERNANDES, C. O efeito-escola e a mudança – dá para mudar? Evidências da investigação brasileira. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación (Reice), v. 1, n. 1, 2003. Disponível em: <http://www.ice.deusto. es/rinace/reice/vol1n1/FerraoyFernandes.pdf>. Acesso em: 8 jun. 2009.
GOLDSTEIN, H. The difficulty of ranking schools: the limits to ‘value-added’. New Economy, v. 27, n. 4, p. 391-405, 2001.
GOLDSTEIN, H. et al. A multilevel analysis of school examination results. Oxford Review of Educacion, v. 19, n. 4, p. 425-433, 1993.
GOLDSTEIN, H.; WOODHOUSE G. Pesquisa sobre eficácia escolar e politicas educacionais. In: BROOKE, N.; SOARES, J. F. (Org.). Pesquisa em eficácia escolar: origem e trajetórias. Belo Horizonte: Editora UFMG, 2008. p. 411-424.
JESUS, G. R.; LAROS, J. A. Eficácia escolar: regressão multinível com dados de avaliação em larga escala. Avaliação Psicológica, v. 3, n. 2, p. 93-106, 2004.
LANDEIRA-FERNANDEZ, J.; PRIMI, R. Comparação do desempenho entre calouros e
formandos no Provão de Psicologia 2000. Psicologia: Reflexão e Crítica, v. 15, n. 1, p.
219-234, 2002.
MESSICK, S. Validity of psychological assessment: validation of inferences from persons' responses and performances as scientific inquiry into score meaning. American Psychologist, v. 50, n. 9, p. 741-749, 1995.
PRIMI, R. Evidências de validade das provas do Enade – 2004. In: RISTOFF, D.; LIMANA, A.; BRITO, M. R. (Org.). Enade: perspectiva de avaliação dinâmica e analise de mudanças. Brasília: Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Inep), p. 59-76, 2006a.
PRIMI, R. A validade do Enade para avaliação da qualidade dos cursos de instituições de ensino superior. Projeto de Pesquisa. Itatiba: Universidade São Francisco, LabAPE, 2006b.
PRIMI, R.; FERNANDEZ, J.L.; ZIVIANI, C. O provão de psicologia: objetivos, problemas, consequências e sugestões. Psicologia: Teoria e Pesquisa, v. 19, n. 2, p. 109-116, 2003.
PRIMI, R; MUNIZ, M.; NUNES, C. H. S. S. Definições contemporâneas de validade de testes psicológicos. In: Claudio Simon Hutz. (Org.). Avanços e polêmicas em avaliação psicológica. São Paulo: Casa do Psicólogo, p. 243-265, 2009.
RAUDENBUSH, S. W. Schooling, statistics, and poverty: can we measure school improvement? New Jersey: Educational Testing Service, 2004a.
RAUDENBUSH, S. W. What are value-added models of estimating and what does this imply for statistical practice. Journal of Educational and Behavioral Statistics, v. 29, n. 1, p. 121-129, 2004b.
RAUDENBUSH, S. W.; BRYK. A. S. Hierarchical linear models: applications and data analysis methods (advanced quantitative techniques in the social sciences). London: Sage Publications, 2002.
RUBIN, D. B. Estimating causal effects of treatments in randomized and nonrandomized studies. Journal of Educational Psychology, v. 66, n. 5, p. 688-701, 1974.
SILVA, M. C. R. et al. Teoria de Resposta ao Item: equalização da prova de Administração do Enade. In: CAPOVILLA, F. C. (Org.). Transtornos de aprendizagem: progressos em avaliação e intervenção preventiva e remediativa, v. 1. São Paulo: Memnon, 2010. p. 239-246.
SNIJDERS, T. A. B.; BOSKER, R. Multilevel analysis: an introduction to basic and advanced multilevel modeling. London: Sage Publications, 2003.
SOARES, J. F. O efeito da escola no desempenho cognitivo de seus estudantes. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educacion (Reice), v. 2, n. 2, p. 83-104. 2004. Disponível em: <http://www.ice.deusto.es/rinace/reice/vol2n2/Soares.pdf>. Acesso em: 20 mai. 2008.
SOARES, J. F. O efeito da escola no desempenho cognitivo de seus alunos. In: SOUZA, A. M. (Org.). Dimensões da avaliação educacional. Petrópolis: Vozes, 2005, p. 174-204.
SOARES, J. F., CASTRO, C. M.; RIBEIRO, L. M. O Provão: os cursos A são os que mais oferecem aos estudantes? Belo Horizonte: UFMG. Texto não publicado, 2000.
SOARES, J. F., RIBEIRO, L.; CASTRO, C. M. Valor agregado de instituições de ensino superior em Minas Gerais para os cursos de Direito, Administração e Engenharia Civil. Dados, v. 44, n. 2, p. 363-396, 2004.
URBINA, S. Essentials of psychological testing. New Jesey: John Wiley & Sons Inc., 2004.
Downloads
Publicado
2018-12-01
Como Citar
Primi, R., Rocha da Silva, M. C., & Bartholomeu, D. (2018). A validade do Enade para avaliação decursos superiores: Uma abordagem multinível. Examen: Política, Gestão E Avaliação Da Educação, 2(2), 128–151. Recuperado de https://examen.emnuvens.com.br/rev/article/view/89
Edição
Seção
Artigos