Ce que CEFRHub évalue
Une production : un texte écrit, ou un enregistrement oral, monologue ou échange.
La même grille s'applique au français et à l'anglais : seuls les marqueurs recherchés changent, chacun propre à sa langue.
Outil d'évaluation pédagogique, non certifiant. Les résultats ne sont acceptés pour aucune démarche d'immigration, de citoyenneté ou d'admission.
L'échelle : le CECR et ses sous-niveaux
Le Cadre européen commun de référence pour les langues (CECR), publié par le Conseil de l'Europe en 2001 et complété par son Volume complémentaire en 2020, décrit six niveaux, de A1 à C2, par des descripteurs « peut faire » communs à toutes les langues.
- A1introductif ou de découverte
- A2intermédiaire ou de survie
- B1niveau seuil
- B2avancé ou utilisateur indépendant
- C1autonome
- C2maîtrise
CEFRHub coupe A2, B1 et B2 en deux sous-niveaux : .1, le niveau atteint ; .2, le niveau consolidé. A1, C1 et C2 restent entiers. Le CECR, lui, décrit entre certains niveaux des niveaux « plus » (A2+, B1+, B2+).
Le niveau C2 n'est pas celui d'un locuteur natif : le CECR le précise lui-même. Il décrit la précision, l'adéquation et l'aisance des apprenants de haut niveau.
Ce qui est noté
Le CECR décrit la compétence à communiquer en trois composantes : linguistique, sociolinguistique et pragmatique. Le rapport de CEFRHub analyse les trois. Le score, lui, repose sur trois notes :
| Ce qui est noté | Ce qui est observé | Écrit | Oral |
|---|---|---|---|
| Compétence pragmatique | Organisation du discours, cohérence, cohésion, efficacité ; à l'oral, gestion de l'échange | Écrit 52 % | Oral 48 % |
| Compétence linguistique | Étendue et correction du lexique et des structures | Écrit 36 % | Oral 32 % |
| Maîtrise orthographique (écrit) ou phonologique (oral) | Orthographe et ponctuation ; à l'oral, contrôle d'ensemble, articulation des sons et prosodie | Écrit 12 % | Oral 20 % |
| Compétence sociolinguistique | Registre, politesse, adaptation à la situation | analysée dans le rapport, hors du score | |
Dans le CECR, la maîtrise orthographique et la maîtrise phonologique font partie de la compétence linguistique. CEFRHub les note à part parce que leur poids diffère : la prononciation pèse davantage sur l'intelligibilité à l'oral que l'orthographe sur la lisibilité à l'écrit.
Le calcul
Chaque dimension reçoit une note de 1 à 10. Le score est leur moyenne pondérée :
Écrit
pragmatique × 0,52 + linguistique × 0,36 + orthographe × 0,12
Oral
pragmatique × 0,48 + linguistique × 0,32 + phonologie × 0,20
Transcription d'un oral, soumise comme texte
pragmatique × 0,60 + linguistique × 0,40 ; l'orthographe n'est pas notée
Le CECR ne prescrit aucune pondération chiffrée. Celle-ci est une interprétation opérationnelle de la hiérarchie du Volume complémentaire, qui place la compétence pragmatique comme surordonnée.
Exemple, un texte écrit
7,5 × 0,52 + 6,8 × 0,36 + 5,2 × 0,12 = 6,97
B2.1bande 6,8 – 7,4
Du score à la bande
| Score pondéré | Niveau | Largeur |
|---|---|---|
| 2,5 – 3,4 | A1 | 0,9 |
| 3,5 – 4,2 | A2.1 | 0,7 |
| 4,3 – 4,9 | A2.2 | 0,6 |
| 5,0 – 5,9 | B1.1 | 0,9 |
| 6,0 – 6,7 | B1.2 | 0,7 |
| 6,8 – 7,4 | B2.1 | 0,6 |
| 7,5 – 8,2 | B2.2 | 0,7 |
| 8,3 – 9,2 | C1 | 0,9 |
| 9,3 – 10,0 | C2 | 0,7 |
Sous 2,5, la production ne permet pas encore d'attribuer A1 ; le rapport l'indique.
Pourquoi les bandes ne sont pas de largeur égale
Elles sont resserrées aux extrémités et élargies au milieu, parce que la progression réelle ne l'est pas non plus : passer de A1 à A2 demande moins qu'aller de B2 à C1. Un plateau large en B1 reflète le temps qu'un apprenant y passe ; une bande B2.2 élargie reflète le fait qu'une aisance apparente y est souvent prise pour une maîtrise C1.
Les garde-fous
Le score fixe une bande, pas le niveau attribué. La consigne d'évaluation impose trois règles, qui peuvent abaisser le résultat du calcul :
- Sans au moins deux marqueurs C1 attestés dans la production, un score ≥ 8,3 est plafonné à B2.2.
- Une maîtrise orthographique ou phonologique élevée ne justifie jamais à elle seule un passage à C1 — principe « range over accuracy » du CECR : la correction sans complexité syntaxique reste B2.2.
- Chaque frontière de niveau possède sa propre liste d'exclusions à vérifier avant attribution.
Le calcul est donc compensatoire, les garde-fous ne le sont pas : une compétence faible ne se rachète pas indéfiniment par une autre.
Ce que le code mesure
Le TTR et le MTLD sont calculés par le code, et non par le modèle, sur chaque texte écrit. Ils sont affichés dans le rapport détaillé, avec le nombre de mots, à titre d'information : calculés après l'analyse, ils n'entrent pas dans le score.
Le rôle de l'IA et ses limites
Le modèle d'IA
Lit la production et applique la grille publiée ici : les notes, la pondération, les bandes et les garde-fous.
Le code
Calcule les mesures lexicales et refuse une production trop courte ; il ne recalcule pas le niveau.
Le résultat est un diagnostic pédagogique. Une production courte ou éloignée de la tâche donne moins d'indices : le résultat y est moins sûr. Données stockées et analysées au Canada.
Références
- Conseil de l'Europe (2001). Cadre européen commun de référence pour les langues : apprendre, enseigner, évaluer. site du Conseil de l'Europe
- Conseil de l'Europe (2020). CECR — Volume complémentaire. site du Conseil de l'Europe
- McCarthy, P. M. et Jarvis, S. (2010). MTLD, vocd-D, and HD-D: A validation study of sophisticated approaches to lexical diversity assessment. Behavior Research Methods, 42(2), 381-392.
- Halliday, M. A. K. et Hasan, R. (1976). Cohesion in English. Londres : Longman.
- Brown, P. et Levinson, S. C. (1987). Politeness: Some Universals in Language Usage. Cambridge : Cambridge University Press.
- Byram, M. (1997). Teaching and Assessing Intercultural Communicative Competence. Clevedon : Multilingual Matters.
Les trois dernières sont citées dans les consignes de l'analyse détaillée.
Questions fréquentes
Le niveau CEFRHub est-il un niveau officiel ?
Non. CEFRHub est un outil d'évaluation pédagogique, non certifiant : il situe une production sur l'échelle du CECR. Les résultats ne sont acceptés pour aucune démarche d'immigration, de citoyenneté ou d'admission.
Qui attribue le niveau : une IA ou une personne ?
Un modèle d'IA, qui applique la grille de cette page. La méthode a été conçue par Réda Haiat ; la page Transparence IA décrit les limites du modèle et la supervision humaine.
Pourquoi mon niveau est-il plus bas que ce qu'annonce mon score ?
Parce que le score fixe une bande et que les garde-fous peuvent l'abaisser. Par exemple, un score de 8,3 ou plus reste B2.2 si la production ne montre pas au moins deux marqueurs de C1.
Que veulent dire A2.1 ou B1.2 ?
Ce sont les sous-niveaux de CEFRHub : .1 pour le niveau atteint, .2 pour le niveau consolidé. A2, B1 et B2 en ont deux ; A1, C1 et C2 n'en ont pas.
Quelles langues CEFRHub évalue-t-il ?
Le français et l'anglais, à l'écrit et à l'oral.