Mesurer et améliorer la qualité des évaluations avec Experquiz
Évaluer les connaissances et compétences, rien de plus facile: on pose des questions, et on additionne les points ? Beaucoup le penseraient, mais il n’en est rien, alors comment mesurer et améliorer la qualité des évaluations ?
Un petit focus sur la qualité d'une base de questions et comment elle peut être améliorée simplement.
L’évaluation est une science, vraiment. Et rien n’est plus dommageable qu’un dispositif qui produit une mesure dénuée de valeur, voire erronée.
Imaginez qu’en additionnant les points obtenus à chacune des questions posées, vous obteniez un score de 74%. Vous aviez fixé un seuil requis à 80%, l’évaluation est échouée. Mais il conviendrait de s’intéresser à la marge d’erreur, dite “erreur standard” de la distribution des scores.
Si votre test a trop peu de questions, ou bien si certaines questions sont de faible qualité, l’erreur standard peut être de plus de 10%, ce qui changera radicalement vos conclusions. Or une fois analysée statistiquement, la qualité d’une base de questions peut être améliorée assez facilement.
Alors comment définir le nombre de questions qui doivent être intégrer à une évaluation ? La réponse dans notre article dédié !
L'analyse statistique de la qualité d'une évaluation
L’analyse statistique d’un ensemble de tests passés permet de mesurer la qualité du test dans son ensemble, sa cohérence (le KR20), d’évaluer la marge d’erreur des scores produits, et d’identifier les questions de faible qualité. Ce sont des questions qui sont faiblement corrélées, ou négativement corrélées au test. Autrement dit : plus on est expert moins on réussit ces questions.
La question est peut-être mal formulée, un peu ambigüe, ou simplement erronée. Ce n’est pas une considération purement théorique : l’expérience nous montre que 2 à 4% des questions sont dans ce cas. Et ces questions dégradent la qualité de vos tests, c’est à dire qu’elles en accroissent la marge d’erreur. De telles questions doivent être modifiées.
Faire passer des évaluations qui ne sont pas fiables, ce n'est pas seulement une perte de temps, c’est une faute, envers les personnes dont les compétences seront mal jugées. C’est pourtant un sujet méconnu, souvent totalement négligé. Les formules statistiques peuvent effrayer, mais une bonne solution les prendra en charge de manière transparente, et vous donnera des analyses qualité prêtes à l’emploi.
Le LMS ExperQuiz et l'amélioration de la qualité des évaluations
C’est ce que fait ExperQuiz, qui vous permet de mener une analyse qualité sur un large ensemble de tests passés, et vous donnera l’indicateur général de cohérence, le KR20, dont se déduit l’erreur standard sur les scores, mais aussi permettra d’identifier les questions à réviser, avec deux algorithmes différents: l’écart des quartiles d’une part, la mesure de corrélation d’autre part.
À l’issue de ces analyses, une puce de couleur sera affectée à chaque question, vous permettant de facilement mener vos corrections.
Pour en savoir plus sur le traitement statistique des évaluations, téléchargez gratuitement notre livre blanc dédié sur le sujet !
En la misma categoría
Cómo la evaluación apoya el desarrollo de las habilidades de los empleados
A menudo utilizada como una herramienta para verificar los conocimientos y emitir certificaciones, los alumnos consideran que la evaluación es una prueba. Sin embargo, es una herramienta de aprendizaje rica y eficaz que ayuda a fomentar el desarrollo de las habilidades de los empleados.
.avif)
La formación y el desarrollo al servicio de la retención de clientes
En un mercado cada vez más competitivo, las empresas buscan constantemente soluciones innovadoras para mejorar la satisfacción de los clientes y retenerlos.
Aprendizaje y desarrollo (L&D), tradicionalmente reservada a la formación interna, está demostrando ser una palanca estratégica para lograr este objetivo. Al combinar plataformas digitales como ExperQuiz con las actividades de los equipos de ventas y marketing, las empresas pueden transformar su enfoque de las relaciones con los clientes.
.avif)
¿Cómo elijo una potente herramienta de cuestionarios en línea?
Los cuestionarios en línea son particularmente efectivos para evaluar los conocimientos, involucrar a los alumnos, recopilar datos para mejorar la capacitación o simplemente crear actividades divertidas.
Sigue siendo necesario contar con una herramienta digitalizada que permita responder con precisión a los objetivos de los cuestionarios.
Existen diferentes tipos de herramientas, más o menos completas y más o menos especializadas: por ejemplo, algunas solo crean cuestionarios divertidos, otras integran funcionalidades de evaluación en una solución de capacitación en línea más global.
Mejorar el aprendizaje con evaluaciones impulsadas por IA
Inteligencia artificial generativa se ha integrado en casi todas las plataformas de aprendizaje digital para ofrecer nuevos servicios, como la creación de cursos en línea, vídeos o incluso síntesis de voz. Pero, ¿qué pasa con la evaluación?
Entrenamiento Pro 2.0: cómo la IA generativa está cambiando las reglas del juego
El término IA generativa está en todas partes, especialmente desde la llegada de ChatGPT de OpenAI. Pero, ¿qué es en la práctica y qué impactos tiene esta nueva tecnología en el mundo de la formación profesional?
Mejores prácticas para diseñar un módulo de aprendizaje electrónico eficaz
El módulo de aprendizaje electrónico es una excelente herramienta de aprendizaje que permite impartir capacitación sobre casi cualquier tema y a gran escala.
Por lo tanto, las empresas, las organizaciones de formación y los formadores confían cada vez más en este formato digital que es efectivo, económico y accesible para capacitar a los empleados, clientes y socios.
Pero, ¿cuáles son las mejores prácticas para diseñar e implementar módulos de aprendizaje electrónico de calidad?
Evaluación de las habilidades interpersonales con ExperQuiz
En los últimos años, Habilidades blandas se han vuelto cada vez más importantes en las empresas.
Tanto en la fase de contratación para conocer mejor a los candidatos, como también durante la carrera de los empleados de la empresa, para determinar las áreas de mejora, la evaluación de las habilidades blandas se ha convertido en un tema tan importante como la evaluación de Habilidades duras.
LAS vs LMS: ¿qué solución para la digitalización de los cursos de formación?
Al igual que el LMS, un LAS es una solución SaaS de evaluación y aprendizaje electrónico que permite a las empresas, los centros de formación y las instituciones educativas ofrecer itinerarios de formación integrales hasta la evaluación de la formación.