Comment définir le niveau des questions d’un questionnaire ?

May 8, 2022Évaluation | Questionnaires

Blog home

Définir le niveau des questions pour garantir la fiabilité et la pertinence d'un test ou d'une évaluation peut être une opération compliquée. Heureusement des outils statistiques sont disponibles pour faciliter l'attribution des niveaux aux questions.

comment définir le niveau des questions d'un questionnaire ?

Pourquoi est-il important de définir le niveau des questions ?

Quelle que soit la thématique, il pourra être utile de définir le niveau de difficulté de chacune des questions. Cela permet d'accompagner la progression de chacun, de ne pas écraser les débutants avec des questions d'expert, ni d'ennuyer les experts avec des questions de débutants.

Il faut donc écrire des questions correspondant aux différents niveaux, mais aussi affecter correctement les niveaux à chaque question.

Apporter de l’importance à la définition du niveau de difficulté des questions permet d’accroître la fiabilité et la pertinence des questionnaires, tests et évaluations.

Vous souhaitez en savoir plus sur les bonnes pratiques pour créer un questionnaire ? Vous pouvez consulter notre article sur le sujet.

Utiliser les statistiques pour définir objectivement le niveau d’une question

Celui qui rédige la question pourra faire une première affectation, il peut évaluer qu’une question est “plutôt difficile”, mais il lui est difficile de quantifier avec précision et objectivité cette difficulté : “est-ce un 4/5 ou un 5/5 ?”.

C’est pourquoi les outils statistiques permettent une affectation des niveaux des questions plus précise et plus exacte.

Le principe est le suivant (après qu'un nombre significatif d'utilisateurs, au moins une vingtaine et si possible de niveaux variés et représentatifs, ont répondu aux questions):

  • On divise la population en 4 quartiles, sur la base de leur score global, comme vu plus haut. Le quartile Q1 correspond aux utilisateurs ayant le meilleur score global, les experts; le quartile Q4 correspond aux utilisateurs ayant le moins bon score global, les débutants,

  • Pour chaque question, on dispose du taux de succès de chaque quartile sur la question. Normalement il est globalement croissant de Q4 à Q1,

  • Une question difficile, (ou plus exactement on devrait dire 'destinée aux experts') est une question qui a un taux de succès faible sur Q4, Q3, Q2, et sensiblement meilleur sur Q1,

  • Réciproquement, une question qui a un taux de succès élevé sur Q3, Q2, Q1, et sensiblement moins bon sur Q4 est une question dont on connaît la réponse lorsqu'on a atteint un certain niveau global d'expertise,

  • C'est donc une distinction importante: plutôt que d'étudier le taux de succès global, il est préférable d'étudier les taux de succès par quartile en analysant à quel seuil il s'élève,

  • Il faut viser une bonne répartition des niveaux, et la meilleure manière de définir les niveaux avec pertinence est de se baser non pas sur le jugement du rédacteur, mais sur les statistiques de passage.

À noter également que si une question est telle que le score obtenu par les utilisateurs de Q1 (les  plus experts) est inférieur au score obtenu par les utilisateurs de Q4, alors cette question est probablement erronée, ou au minimum ambiguë. Dans tous les cas, elle dégrade la qualité de votre base.

Le LMS/LAS ExperQuiz vous accompagne

La plateforme LMS/LAS ExperQuiz propose une fonctionnalité qui permet de redéfinir facilement le niveau de difficulté des questions d’une base. L’objectif est de permettre aux formateurs d’accroître simplement la qualité et la fiabilité de leurs questionnaires.

L’outil ExperQuiz, grâce à un algorithme intelligent, se base sur les taux de succès observés pour proposer et effectuer des ajustements : les 20% de questions ayant le taux de succès le plus élevé se verront attribuer un niveau de difficulté 1 (facile), les 20% suivants un niveau 2, et ainsi de suite jusqu'au niveau 5.

Une fois les niveaux définis de manière fiable, vous pourrez définir des questionnaires dynamiques qui sélectionnent des questions de manière à viser un certain niveau de difficulté. C’est le moyen d’accompagner la progression des apprenants, et d’optimiser la courbe d’apprentissage.

La plateforme ExperQuiz propose aussi une solution qui permet d’analyser et contrôler la qualité et la fiabilité des questions pour pouvoir ensuite les améliorer.

Le e-learning : définition
Le terme e-learning désigne l’apprentissage ou “formation en ligne”. Depuis maintenant plusieurs années, le terme "e-learning" est devenu courant notamment grâce à l’arrivée et la démocratisation des technologies de digital learning.
Mesurer et améliorer la qualité des évaluations, avec ExperQuiz
Évaluer les connaissances et compétences, rien de plus facile: on pose des questions, et on additionne les points ?  Beaucoup le penseraient, mais il n’en est rien, alors comment mesurer et améliorer la qualité des évaluations ?
Qu’est-ce que le blended learning ?
Le blended learning (formation hybride ou formation mixte en français) est un mode de formation qui allie présentiel et outils numériques (comme ceux du e-learning).
La mémoire et l’apprentissage
La mémoire est évidemment indispensable à tout apprentissage. C'est un sujet qui a fait l'objet de recherches depuis toujours, la mémoire étant plus essentielle encore avant l'écriture et l'imprimerie.
Évaluation et pédagogie
Beaucoup de travaux ont analysé les modèles pédagogiques performants. Leur connaissance et l’analyse de leurs enseignements permettent d’enrichir l’apprentissage notamment en adressant la problématique d’évaluation objective en entreprise.
La digitalisation de la feuille d’émargement
La digitalisation et la dématérialisation du processus d'émargement est maintenant un sujet incontournable pour de nombreux acteurs de la formation à la fois pour répondre aux obligations légales tout en en proposant des expériences optimales pour les stagiaires et formateurs.
Les tests pour améliorer les formations
Découvrez comment les tests, les évaluations et les QCM permettent d'améliorer les formations de manière ludique et efficace grâce aux outils digitaux comme les LMS et LAS.
Outil de sélection des candidats : le test de recrutement
L’évaluation des compétences des candidats dans le cadre d’un recrutement est un cas de figure majeur de l’évaluation qui permet d’appliquer un 1er filtre de sélection.
Auto-enregistrement avec un code
Pour faciliter l'accès à des formations ou évaluations, ExperQuiz a récemment mis en place la connexion par code à 6 chiffres. Cette fonctionnalité a été enrichie pour permettre aux administrateurs de demander plus d'informations aux personnes qui se connectent.
L'adaptive learning grâce aux soft skills
ExperQuiz enrichie ses fonctionnalités d'adaptive learning pour permettre maintenant d'utiliser les résultats des questions de type Soft Skills
Évaluation multi-dimensionnelle et adaptive learning
L'adaptive learning se base sur les évaluations pour définir des parcours de formation personnalisés aux progrès de chaque apprenant. Les évaluations multidimensionnelles permettent de créer des parcours encore plus précis.
Micro-learning et adaptive learning avec ExperQuiz
Découvrez comment ExperQuiz offre des outils d'adaptive learning et de micro-learning dans une démarche personnalisée optimisant l'apprentissage.
L’évaluation des soft-skills avec ExperQuiz
Ces dernières années, les softs skills ont pris de plus en plus d’importance au sein des entreprises. À la fois dans la phase de recrutement pour mieux connaître les candidats, mais aussi pendant le parcours des salariés dans l’entreprise, pour déterminer des axes d’amélioration, l’évaluation des soft skills est devenu un enjeu tout aussi important que l’évaluation des hard skills.
Présenter un fichier PDF sans lien de téléchargement
Une nouvelle option d’entreprise présente dans la section “médias” des réglages, permet d’opter pour un autre mode de restitution des fichiers PDF limitant ainsi la possibilité de les télécharger.
S'inscrire à une formation avec un code
Dans la continuité de la dernière mise à jour, vous pouvez maintenant préciser si les stagiaires peuvent s’enregistrer directement en utilisant le code d'une formation sans qu'ils soient pré-enregistrés et invités.
Les enquêtes en mode public
Vous pouvez maintenant créer et soumettre des enquêtes publiques accessibles à toutes les personnes disposant de l'url ou du QR code.
Remplacement des médias avec mises à jour automatique
Pour mettre à jour un média utilisé dans plusieurs modules, vous pouvez maintenant échanger son contenu sans avoir à en créer un nouveau.
Les "soft skills" pour élargir les champs d'utilisation d'ExperQuiz
Découvrez un nouveau type de questions pour tester les soft skills et des champs à sélection multiple dans les enquêtes. Et aussi de nouvelles fonctionnalités autour de la correction de question ainsi qu'une utilisation élargie des conséquences.
Créer des quiz en ligne facilement avec ExperQuiz
Le LMS/LAS ExperQuiz est une solution SaaS qui vous permet de concevoir vos quiz en ligne facilement puis de les diffuser rapidement aux personnes à interroger.
La fonctionnalité de Text-to-speech
Text-to-speech : la plateforme de digital learning ExperQuiz gère la lecture des questions, des médias et des modules en accès public. Cette fonctionnalité permet d'adresser des apprenants en situation d’illettrisme, des très jeunes publics ou faire entendre la prononciation correcte d’une langue étrangère.
De l’évaluation de formation à la formation augmentée
La mise en place d’un dispositif complet et efficace pour l’évaluation de formation fait appel à un ensemble important de fonctionnalités. ExperQuiz implémente chacune d’elles de manière particulièrement aboutie, ergonomique et simple d’usage.
Digitalisation de la formation : démocratisation ou déshumanisation ?
Le numérique et la digitalisation de la formation ne remplacent pas l’humain mais offrent l’opportunité de créer des expériences de formation personnalisées à l’accompagnement plus précis.
Un nouveau mode de connexion simplifiée
Cette nouvelle fonctionnalité permet aux administrateurs de donner accès à la plateforme à des apprenants et stagiaires qui n'auraient pas d'adresse email ou de numéro de téléphone portable.
Renouvellement automatique des évaluations & certifications grâce aux cycles
Le statut de renouvellement est maintenant pris en compte dans les cycles pour envoyer automatiquement une invitation à l'apprenant pour l'informer qu'il doit à nouveau passer une évaluation ou une certification.
Personnalisation des vignettes d'aperçu des médias
Vous pouvez maintenant choisir la vignette qui sera affichée lors du partage d'un média lorsque ExperQuiz n'est pas en mesure de générer l'aperçu automatiquement (pour les modules SCORM par exemple).
Les bonnes pratiques pour créer un questionnaire
Découvrez toutes nos bonnes pratiques pour créer un questionnaire à la fois efficace et pertinent qui permet de répondre à vos enjeux d'évaluation.
Définir le nombre de questions dans un questionnaire
Comment déterminer le nombre de questions à avoir lorsqu'on paramètre un questionnaire ? Plus un test comporte de questions, plus il est fiable !
Comment définir le niveau des questions d’un questionnaire ?
Définir le niveau des questions pour garantir la fiabilité et la pertinence d'un test ou d'une évaluation peut être une opération compliquée. Heureusement des outils statistiques sont disponibles pour faciliter l'attribution des niveaux aux questions.
L’évaluation comme outil d’apprentissage
L’évaluation est souvent perçue comme une épreuve par les apprenants alors qu’elle peut être un véritable outil de travail. En plus de ses usages à des fins de mesure de la connaissance, l’évaluation peut être un outil d’apprentissage extrêmement efficace.
L’évaluation adaptative pour accompagner la montée en compétences et la mobilité
L’évaluation adaptative s'inscrit dans une démarche d'adaptive learning et permet de définir des parcours personnalisés répondant aux attentes, besoins et capacités de chacun.
Pour une réelle culture de la connaissance en entreprise
Développer une réelle culture de la connaissance au sein des entreprises et organisation est une véritable opportunité pour développer la productivité, l'innovation et la confiance des salariés.
Comment banaliser l’évaluation en entreprise ?
Banaliser l'évaluation en entreprise est essentiel pour en tirer tous les bénéfices. Découvrez la démarche pour dédramatiser l'évaluation.
La culture de l'évaluation en entreprise
Pas de mesure sans progrès : pour les entreprises, mettre en place une réelle culture de l'évaluation est un enjeu important et essentiel pour capitaliser sur les savoirs et connaissances des collaborateurs.
LAS vs LMS : quelle solution pour la digitalisation des formations ?
Un LAS est une solution SaaS d'évaluation et de e-learning qui permet aux entreprises, centres de formation et établissements d’enseignement de dispenser des parcours de formation complets allant jusqu'à l'évaluation de formation.
Extraction d’un fichier de QR-Codes pour les participants d’une évaluation

ExperQuiz ajoute une fonctionnalité qui permet aux administrateurs d'exporter l'ensemble des invitations à des évaluations sous format QR-code. L'objectif est de permettre aux personnes évaluées de scanner le QR-code avec leur téléphone et d'accéder à l'évaluation.

Importer et utiliser vos modules SCORM dans le LMS ExperQuiz
Importez vos modules SCORM 2004 venant d'autres outils et récupérez les résultats dans le LMS ExperQuiz.
Une nouvelle interface pour les stagiaires d’une formation

ExperQuiz améliore l'interface des stagiaires de la fonctionnalité formation pour la rendre plus ergonomique et plus intuitive.

Copie individuelle d’un test au format Word
En plus de l'export global au format Word des copies des évaluations des candidats, il est maintenant possible de faire des exports individualisés pour chaque candidat ayant passés l'évaluation.
Évaluation et démarche d’assurance qualité
La démarche d'assurance qualité est une garantie de succès des différents projets en s'assurant objectivement que les collaborateurs possèdent bien les compétences nécessaires.
Évaluer la fiabilité des tests, identifier les mauvaises questions ?
S’assurer de la fiabilité des tests est impératif. Et ce n'est pas très difficile : une démarche très simple permet d’améliorer la qualité de vos évaluations.
Quels outils pour votre certification Qualiopi ?
La certification Qualiopi est obligatoire pour tous les professionnels de la formation : quels sont les outils qui permettent de satisfaire les critères essentiels ?
#63 : Les nouvelles fonctionnalités arrivées en mars sur ExperQuiz

#63: Beaucoup de nouveautés sont à découvrir avec cette nouvelle version de la plateforme LMS/LAS ExperQuiz ! Des évolutions dans les enquêtes, de nouvelles fonctionnalités de pilotage, des nouveautés pour les conséquences, les webhooks qui viennent compléter l'offre d'API, l'authentification multi-facteurs pour plus de sécurité, sans oublier les exports enrichis avec notamment des graphiques.

Exportez vos questionnaires ExperQuiz au format SCORM
SCORM (Sharable Content Object Reference Model) est un format standardisé qui permet de partager des contenus pédagogiques entre plateformes LMS (Learning Management Solution).
Publication : ExperQuiz au top des meilleurs outils

Le site Startups Nation - Média des entrepreneurs et Start-ups en France parle d'ExperQuiz.

#61 : Émargement - RGPD - Activités utilisateur

#61 : ExperQuiz prend en charge l'émargement des stagiaires; validation des conditions RGPD pour les intervenants externes; enrichissement de la synthèse d'activité d'un utilisateur.

Publication : Learning & Assessment: l’évaluation au centre du LMS

L’évaluation est un sujet souvent négligé par les solutions LMS.  Certes, entre deux étapes d’un module e-learning, elles permettront d’insérer quelques questions avant de poursuivre.   Mais l’évaluation reste trop souvent une fonctionnalité annexe, de second ordre.  Au point que de nombreuses organisations, ayant déployé un LMS, restent en recherche d’outils permettant de mieux traiter la problématique d’évaluation.  Voyons pourquoi, et comment, l’évaluation doit être une fonctionnalité centrale du LMS.

#59 - Diplôme - Glossaire

#59 : Import d'un glossaire et Génération des diplômes

Cette nouvelle version ajoute une fonction d'import pour l'enrichissement du glossaire utilisé dans les questions. 
Elle intègre également des outils pour mieux partager vos tests (QR code) et pour personnaliser les diplômes générés pour les certifications et les attestations de suivi de module de e-learning.

#58 - Soft skills - Enquêtes - renouvellement

#58 : Soft skills, gestion des enquêtes et transfert de base 

ExperQuiz s'enrichit d'une fonction de transfert de base et élargit sa fonction de renouvellement périodique d'activité.

#57 - Journal des envois de mails et de sms

#57 : La nouvelle version propose un suivi de vos invitations grâce au journal des mails et sms envoyés, la possibilité de présenter une annonce sur le tableau de bord de vos utilisateurs une analyse supplémentaire des résultats de vos évaluations reposant sur les scores. Enfin, suite à l'annonce de la fin du support de IE11 par Microsoft, nous avons résolu également de mettre fin au support IE11  à partir de début octobre 2021.

#56 - Modules publics et recherche avancée

#56 : Les nouveautés de ce mois permettent l'enregistrement temps réel des enquêtes en cours, la duplication complète des bases (questions, questionnaires, médias) mais aussi le partage de modules de e-learning multibases ou une recherche globale et efficace dans toutes les entités de votre entreprise ...

#55 - Gestion des compétences et des qualifications

#55 : Gestion des cursus de formations et des compétences associées 

#54 - Module de pilotage (Business intelligence)

#54: Pilotage ou la Business intelligence au service de l'évaluation

#53 - Compétences - Questionnaire "papier" - Mailing

#53 : Communiquer par mail et par chat, obtenir une version docx des questionnaires ... Découvrez ces nouvelles fonctionnalités 

#52 - Activation des utilisateurs, exports de résultats, mails personnalisés et organisation du tableau de bord

#52 : Activation des utilisateurs, exports de résultats, mails personnalisés et organisation du tableau de bord...

#51 - Soft skills pondérées- Exports du livret de compétences et des groupes

#51 : Soft Skills pondérée, Player des modules sans menu, Relance automatique des enquêtes, export du livret de compétences

#49 - Parcours planifié

#49 : Planification des parcours et consolidation des résultats

#47 - Question de type 'classification'

#47 : le 11ème type de question permet de  'classer' des objets dans différentes catégories.

#46 - Habilitations, modules, tags, radar, vignettes

#46 : habilitations enrichies, modules sans connexion, tags page de score, graphes radar, vignettes de pdf

#45 - Envoi des SMS - Adresse émettrice - Question ouverte

#45 : Des fonctionnalités pour contrôler les accès à votre plateforme, gérer les habilitations utilisateurs ou encore visualiser les réponses aux questions ouvertes.

#44 - Numérotation des questions

#44 : Numéroter et re-numéroter les questions, envoi automatique des attestations de suivi, correction des questions avec pièces jointes, ... les nouveautés du printemps.

#43 - Les enquêtes s'ouvrent au public

#43 : Les modules sont accessibles aux contacts de l'entreprise, les enquêtes sont ouvertes au public, les exports sont enrichis, les questions avec des réponses numériques offrent des contrôles avancés.

#42 - Réglages entreprise et conditions combinées dans les enquêtes

#42 : Les réglages d'entreprise ont été réagencés pour une meilleure lisibilité et un accès plus rapide à chacune des options. Les champs conditionnels dans les formulaires d'enquêtes acceptent des conditions combinées .

#41 - Enquêtes sous conditions et Certifications par voie de conséquence

#41 : Les enquêtes s'adaptent dynamiquement à certaines conditions portant sur les champs du formulaire.
La certification peut être validée sur des conditions plus précises qu'un seuil de succès global à l'évaluation. 
Et aussi,

  • une mise à jour enrichie pour les tags des questions,
  • un export des compétences
  • la prise en compte de fichiers zip dans les médias.
#40 - Glossaire et nouveau tableau de bord utilisateur

#40 : Des images pour en mettre plein la vue avec le glossaire intégré au questionnaire et le nouveau tableau de bord .

#39 - Recherche unifiée, Module monobase, Export de résultats de parcours

#39 : Recherche unifiée, modules mono-base, nouveaux exports de données, ... les nouvelles fonctionnalités du mois de septembre 2019.

#38 - Marque blanche, enquêtes anonymes, évaluations sans connexion

#38 : En été, les travaux continuent: marque blanche personnalisée, enquêtes anonymes, évaluation sans connexion, utilisation élargie des conséquences, plus d'options dans le chargement de fichiers de questions, évaluations sans connexion, ... un lot de les nouvelles fonctionnalités pour préparer la rentrée

Tableau de bord apprenant : de nouvelles options

Design simplifié . Vous pouvez choisir d'alléger le tableau de bord de l'apprenant, tout en lui donnant un design plus engageant.   La page d'accueil de l'apprenant ne comportera plus que les éléments en attente ou bien en accès libre, et les étiquettes seront agrémentées d'un grand visuel et d'une description complète.

# 37 - Gestion des médias: sous-dossiers et tags

# 37 : Créer des sous-dossiers, déplacer des médias, définir ou supprimer des tags

Presse : Le site OutilsTICE examine ExperQuiz

Presse : Le site outilstice.com est une référence sur tout ce qui touche aux technologies pour la formation, avec plus de 27 000 abonnés.   Le 20 mars dernier, Fidel Navamuel s'est intéressé à ExperQuiz.  Son verdict: "Dans la jungle des outils d’évaluation, bien peu sont aussi complets qu’ExperQuiz".

Un nouveau type de question: texte à trou avec sélecteur

La question de type sélecteur est un outil particulièrement puissant.  Elle demande de sélectionner une réponse au moyen d'une liste déroulante.   Plusieurs champs de type sélecteur peuvent être insérés dans un même texte.

#35 - Spécifier les conséquences d'une évaluation

#35 : La fonctionnalité de conséquences permet de décrire, à l'aide d'une syntaxe extrêmement puissante, ce qui se passera à la suite d'une évaluation.

TICE-Education aime ExperQuiz
Presse : Le site TICE-EDUCATION s'est intéressé à ExperQuiz, et nous a fait l'honneur d'un article particulièrement complet et approfondi, qui passe en revue les principales fonctionnalités de la solution.
"ExperQuiz est avant tout une solution d'évaluation, mais dont les fonctionnalités touchent à bien d'autres aspects du LMS (Learning Management System). Au-delà des fonctionnalités proprement dites, ExperQuiz est apprécié pour sa facilité d'utilisation, avec des pages sobres et claires, des principes d'ergonomie constants, et de l'aide omniprésente."
Presse : Aguettant choisit ExperQuiz

Presse : AGUETTANT choisit ExperQuiz pour répondre aux exigences de certification du secteur pharmaceutique

Publication : Zéro vulnérabilité

Publication : La sécurité de notre plateforme est notre priorité et une préoccupation permanente.   Voyons comment cela se traduit.

Big Data and Innovative Learning

Événement : Le Big Data Club de ESCP Europe nous a invité à parler des nouveaux outils au service de l'éducation, que ce soit en entreprise ou dans les établissements d'enseignement.

Modules e-learning, mode d'emploi

Mode d'emploi : Comment créer et déployer des modules e-learning, en assemblant des étapes de média et des étapes de tests