Plantear una prueba por competencias es una tarea docente compleja, pues la prueba debe reflejar el dominio educativo de forma adecuada, sobre todo porque el docente se ve obligado a reutilizar los exámenes de manera repetida. El estudio teórico de corte cuantitativo tiene como fin proponer la herramienta que permite diseñar la prueba de aula teniendo en cuenta tres niveles competenciales (conocimientos, habilidades y actitudes), basada en la tabla de especificaciones. A partir de esta se construye un modelo matemático determinista para ponderar los componentes del modelo. El modelo se validó con Análisis Factorial Exploratorio (AFE) en una muestra real de estudiantes con el propósito de evaluar la coherencia del modelo teórico con la aplicación de la prueba diseñada. El AFE permitió una redefinición empírica del modelo teórico utilizando las cargas factoriales como nuevos coeficientes β ajustando el modelo al comportamiento estadístico. Este ajuste implicó un cambio en los estimadores lo que impacta directamente en las puntuaciones finales para cada estudiante. En conclusión, este trabajo presenta un avance inicial en el diseño de instrumentos evaluativos a partir de un constructo con modelación matemática, asociando criterios curriculares con criterios empíricos en contextos escolares reales. Esto permitirá presentar formas alternativas de pruebas, manteniendo la validez de constructo y contenido.
Designing a competency-based test is a complex task for teachers, as the test must adequately reflect the educational domain, especially because the teacher is forced to reuse the tests repeatedly. The purpose of this quantitative theoretical study is to propose a tool for designing a classroom test based on three levels of competence (knowledge, skills and attitudes), according to a table of specifications. From this, a deterministic mathematical model is constructed to weight the components of the model. The model was validated with Exploratory Factor Analysis (EFA) on a real sample in order to assess the consistency of the theoretical model with the application of the designed test. EFA allowed an empirical redefinition of the theoretical model using the factor loadings as new β coefficients adjusting the model to the statistical behaviour. This adjustment implied a change in the estimators which directly impacts the final scores for each student. In conclusion, this work presents an initial advance in the design of assessment instruments based on a mathematically modelled construct, associating curricular criteria with empirical criteria in real school contexts. This will make it possible to present alternative forms of tests, while maintaining construct and content validity.
Elaborar um teste baseado em competências é uma tarefa docente complexa, uma vez que o teste deve refletir adequadamente o domínio dos conteúdos educativos, sobretudo porque o professor é obrigado a reutilizar os exames repetidamente. O estudo teórico de natureza quantitativa tem como objetivo propor uma ferramenta que permita conceber o teste de sala de aula tendo em conta três níveis de competências (conhecimentos, habilidades e atitudes), com base na tabela de especificações. A partir desta, constrói-se um modelo matemático determinístico para ponderar os componentes do modelo. O modelo foi validado com Análise Fatorial Exploratória (AFE) numa amostra real de alunos, com o objetivo de avaliar a coerência do modelo teórico com a aplicação do teste concebido. A AFE permitiu uma redefinição empírica do modelo teórico, utilizando as cargas fatoriais como novos coeficientes β, ajustando o modelo ao comportamento estatístico. Este ajuste implicou uma alteração nos estimadores, o que tem um impacto direto nas pontuações finais de cada aluno. Em conclusão, este trabalho apresenta um avanço inicial na conceção de instrumentos de avaliação a partir de um construto com modelação matemática, associando critérios curriculares a critérios empíricos em contextos escolares reais. Isto permitirá apresentar formas alternativas de testes, mantendo a validade do construto e do conteúdo.