Affiliation:
1. Universidadde Estadual Paulista, Brazil
2. Universidade Estadual de Campinas, Brazil
3. USP, Brazil
Abstract
RESUMO O Teste de Progresso (TP) é uma ferramenta de avaliação cujo uso tem crescido em todo o Brasil na última década. O TP permite avaliar o ganho de conhecimento dos estudantes ao longo do curso de graduação e, para que suas interpretações sejam válidas, é preciso que seus itens (questões) tenham qualidade adequada do ponto de vista de validade de conteúdo e confiabilidade de resultados. Neste estudo, analisamos as características psicométricas dos itens e o desempenho dos estudantes na área de cirurgia do TP de 2017 a 2023. Para as análises, usamos os pressupostos da Teoria Clássica dos Testes, a taxonomia de Bloom e o coeficiente de fidedignidade alfa de Cronbach. Os itens se mostraram fáceis (índice de dificuldade média entre 0,3-0,4), com discriminação de regular a boa (índice de discriminação entre 0,3-0,4) e com predomínio de questões de média a alta taxonomia. A confiabilidade se manteve substancial ao longo dos anos (>0,6). O ganho de conhecimento dos estudantes em cirurgia é progressivo e mais importante a partir do 3º ano do curso de graduação, chegando a aproximadamente 70-75% no 6º ano. Este arcabouço de aferições pode ser replicado em outros contextos para melhor compreensão do aprendizado dos estudantes e para qualificação dos processos avaliativos.
Reference28 articles.
1. The use of progress testing;Schuwirth LW;Perspect Med Educ,2012
2. Fifteen years of experience with progress testing in a problem based learning curriculum;Van der Vleuten CPM;Med Teach,1996
3. The quarterly profile examination;Arnold L;Acad Med,1990
4. Beyond assessment feedback for individuals and institutions based on the progress test;Coombes L;Med Teach,2010
5. Origin bias of test items compromises the validity and fairness of curriculum comparisons;Muijtjens AM;Med Educ,2007