Appel à projet pour réaliser des évaluations comparatives avec le logiciel “Je Lève La Main”

Par Thierry, lundi 25 avril 2016
Catégories : API, Evaluation, Je Lève La Main - version virtuelle

Comme je l’ai plusieurs fois expliqué dans ce blog, le logiciel d’évaluation “Je Lève La Main” a été conçu comme un “tube à essai” pédagogique et l’objectif principal du logiciel est de recueillir des données permettant d’améliorer la pédagogie. Ces données peuvent être recueillies au niveau de chaque élève, de chaque classe, de chaque école, mais aussi de chaque région et de chaque nation, car, par nature, ces données sont stockées dans le “cloud” et disponibles pour toute analyse, quelle que soit la taille de l’échantillon observé.

L’API du logiciel est sortie il y a quelques semaines et nous sommes en train de finaliser le premier environnement de test, qui va permettre de mener à bien deux types d’analyse particulières.

Test de progression

L’idée est d’évaluer un échantillon T1 à partir d’un groupe de quiz Q1 (permettant de définir un niveau initial), puis à partir d’un autre groupe de quiz Q2, définissant le niveau final.
L’opération est répétée sur un échantillon T2, à qui on posera les mêmes groupes de quiz Q1 et Q2 (avant / après).

“Je Lève La Main” permet de travailler avec des échantillons de taille arbitraire et de gérer un nombre arbitraire d’échantillon T1, … Tn.

Quelques applications possibles :

Vous êtes prof d’allemand. Vous gérez 2 classes, dont l’une a accès au labo de langues et l’autre apprend à partir d’un logiciel sur tablettes. Vous comparez la progression des deux classes en fonction des deux méthodes. (Des outils statistiques puissants vous permettent de comparer les progressions, de voir quelle méthode a été la plus adaptée, de voir aussi si, au sens statistique, les résultats observés sont significatifs).
Vous êtes plusieurs profs de maths. Les “conservateurs” travaillent au tableau noir. Les “progressistes” travaillent au TBI et avec des tablettes. “Je Lève La Main” vous permet d’observer les niveau “avant” et “après” un module de cours, de comparer la progression de votre classe (normalisée) à celle des autres classes, de comparer la progression des élèves attachés aux professeurs “conservateurs” par-rapport aux “progressistes”.
Votre académie a équipé 20% des collèges en tablettes (chiffre évidemment pris au hasard). Vous définissez un ensemble de quiz avant / après, selon les matières, pour voir si les collèges numériques progressent plus ou moins vite que les autres (et l’année prochaine, vous investirez plus ou moins en fonction des résultats).
Vous dirigez une école supérieure de commerce et les cours de finance ont lieu soit à Nantes, soit à New-York. Toujours grâce à ce système, vous observez quels cours donnent les meilleurs résultats (et l’année prochaine, vous adapterez l’enseignement en fonction de ces résultats).
Vous êtes prof de latin. Il n’est malheureusement pas possible d’utiliser “Je Lève La Main”, votre matière n’étant plus enseignée. Mais à part ça, les applications du logiciel sont infinies. Vous pouvez évaluer toute méthode pédagogique ou comparer deux enseignements différents.

Cartes de niveau

La carte de niveau est obtenue en faisant passer un groupe de quiz Q à différents échantillons T1…Tn.

Différents graphes et différentes tables permettent ensuite d’observer les niveaux de façon comparative, en comparant un groupe, de taille arbitraire, à un autre groupe ou à l’ensemble de la population.

Applications possibles

Après avoir passé un quiz de maths, le petit Nicolas peut comparer son résultat à celui de sa classe, de son établissement ou de l’ensemble de la population sur ce même test.
L’Education Nationale (ou un département) demande à tout enseignant qui le souhaite de faire passer un groupe de quiz à ses élèves. Des outils statistiques très évolués permettent de comparer le niveau des élèves, des établissements ainsi que (grâce à la première fonction “de progression” décrite ci-dessus) leur progression. La carte de niveau peut se faire matière par matière, ville par ville ou même enseignant par enseignant. Des outils puissants de visualisation (sous forme de cartes ou de graphes) sont disponibles.

Les principes et objectifs de l’expérience

Aider l’Etat à guider, par les données, la politique pédagogique.

Alors que les évaluations actuelles (élaboration, mise en place, dépouillement) peuvent prendre des années (jusqu’à 10 ans dans certains cas), nous utilisons des techniques souples permettant de donner des résultats en quelques semaines à quelques mois. L’objectif est d’aider l’Etat à guider, par les données, les politiques publiques.

Transformer chaque enseignant en sociologue

“Je Lève La Main” utilise des techniques statistiques complexes qui n’étaient accessibles, jusqu’à présent, qu’aux statisticiens. En simplifiant drastiquement l’accès aux analyses, nous mettons dans les mains de chaque enseignant la possibilité d’évaluer ses propres pratiques et d’effectuer ses propres enquêtes, tout en laissant aux autres la possibilité de valider ou comparer les données obtenues. Nous espérons obtenir des expériences et des données de meilleure qualité grâce à notre système ouvert.

Multiplier les expériences, obtenir des résultats

Du fait de l’ouverture à tous de la technologie, de sa gratuité et de sa simplicité, nous pensons pouvoir générer 1000 fois plus d’expériences et de tests que par le passé, le tout dans un environnement rigoureux qui n’était que rarement mis en place même dans des expérimentations pourtant très coûteuses. De la multiplication des expériences, des tests, des tâtonnements jaillira la lumière.

Des techniques statistiques très avancées,aucune connaissance technique n’est nécessaire

L’implémentation statistique que nous avons implémentée repose sur le langage “R”, aujourd’hui un des outils informatiques les plus avancés dans le domaine des statistiques et du “big data”. “R” permet de réaliser de nombreux calculs statistiques et est ouvert, via le logiciel “Je Lève La Main” à tous ceux qui veulent étudier les données et qui savent programmer. L’usage de “Je Lève La Main” peut donc largement dépasser les deux cadres d’expérience décrits ci-dessus.

Pour les enseignants non geeks, nous avons défini les deux cadres d’expérience ci-dessus qui ouvrent le champ à un vaste domaine d’expérimentation. Si vous vous placez dans ce cadre, aucune connaissance technique n’est nécessaire.

L’appel à projets

Nos deux premiers “tubes à essai” seront disponibles entre fin mai et fin juin. Nous recherchons des enseignants passionnés, créatifs, ouverts pour définir avec nous des expériences pédagogiques et valider les principaux concepts de l’outil, à savoir:

un cadre d’expérimentation simple et compréhensible sans connaissance technique
une expérience permettant d’obtenir des résultats puissants et d’influencer les pratiques pédagogiques, localement (au niveau de la classe) et globalement (au niveau de l’Etat)
un cadre d’expérience qui respecte les données personnelles des élèves et des enseignants

Ce que j’ai écrit vous donne des idées ? L’appel à projets est disponible ici.

En savoir plus sur le logiciel “Je Lève La Main”