Acheminer un billet, en un appel
10 éléments notés
- Ce qu'il mesure
- Le modèle peut-il classer un billet de soutien dans la bonne file parmi 4 quand on le lui demande directement, et répondre seulement par le nom de la file?
- Comment il est noté
- Un point quand la réponse, épurée et en minuscules, est exactement la file de la clé de correction. 10 billets, un appel chacun.
- Où se perdent les points
- Un modèle perd le point s'il se trompe, ou s'il a raison sous la mauvaise forme : une phrase, une file entre guillemets ou en gras. Une lecture stricte compte les deux de la même façon, comme le ferait un programme.
- Comment faire mieux
- Demander un seul mot et nommer les mots permis. Mieux encore, utiliser une sortie typée, comme dans le troisième essai, pour que la forme ne puisse pas dériver.
- Jeu d'essai et clé:
- scripts/ch2_course_collapse.py