Avaliação do nível de satisfação discente de uma instituição de Ensino Superior: uma análise dos métodos da Teoria Clássica da Medida e da Teoria da Resposta ao Item Translated title: Evaluación de la satisfacción del estudiante de una institución de Educación Superior: un análisis de la Teoría Clásica de la Medición y la Teoría de la Respuesta al Ítem Translated title: Student satisfaction evaluation of a higher education institution: an analysis of the methods of the Classical Theory of Measurement and of the Item Response Theory

Abstract

Resumo O presente trabalho compara as informações geradas pelo processo de autoavaliação de uma Instituição Federal de Educação Superior (Ifes), no contexto do Sistema Nacional de Avaliação da Educação Superior (Sinaes), analisadas pela Comissão Própria de Avaliação da Ifes, ciclo de 2017, com as mesmas informações tratadas a partir do uso da Teoria da Resposta ao Item (TRI) no lugar da Teoria Clássica da Medida, com objetivo de demonstrar como o processo de análise pode se beneficiar com a utilização da TRI, sendo um instrumento mais robusto para a análise e o desenho de ações de melhorias na gestão institucional. Para isso, foi selecionado o extrato “categoria discente” da avaliação sobre a instituição, no segundo ciclo de 2017. Foram descritas e comparadas as duas teorias, a clássica e a TRI. Com os dados coletados da instituição, foram calculadas e explicadas as curvas de informação dos itens e do teste, por meio da análise propiciada pela TRI foi demonstrado o ganho que se pode obter com a sua utilização na autoavaliação institucional.

Translated abstract

Resumen Este trabajo compara la información generada por el proceso de autoevaluación de una Institución Federal de Educación Superior (Ifes), en el contexto del Sistema Nacional de Evaluación de la Educación Superior (Sinaes), analizada por la Comisión de Evaluación Propia de Ifes, ciclo 2017, con la misma información tratada a partir del uso de la Teoría de Respuesta al Ítem (TRI) en lugar de la Teoría Clásica de la Medida, con el fin de demostrar cómo el proceso de análisis puede beneficiarse del uso de la TRI, siendo un instrumento más robusto para el análisis y la diseño de acciones de mejora en la gestión institucional. Para ello se seleccionó el extracto “categoría discente” de la evaluación de la institución, en el segundo ciclo de 2017. Se describieron y compararon las dos teorías, la clásica y la TRI. Con los datos recolectados de la institución se calcularon y explicaron las curvas de información del ítem y de la prueba, mediante el análisis proporcionado por el TRI se demostró la ganancia que se puede obtener con su uso en la autoevaluación institucional.

Translated abstract

Abstract The present work compares the information generated by the Institutional Self-evaluation process of an Federal Institution of Higher Education (Ifes), in the context of the National Higher Education Evaluation System (Sinaes), and analyzed by the IFES Self-evaluation Committee, cycle of 2017, with the same information treated with the Item Response Theory (IRT) in place of the Classical Theory of Measurement, with the objective of demonstrating how the analysis process can benefit from the use of IRT, being a more robust instrument for the analysis and design of actions of improvements for institutional management. For this, we selected the “student category” extract from the evaluation about the institution, in the second cycle of 2017. The two theories, Classical and IRT, were described and compared. With the data collected from the institution, the information curves of the items and the test were calculated and explained, and through the analysis provided by the IRT was demonstrated the gain that can be obtained with its use in institutional management.