Joker
Les éléments me semblent suffisamment bons, Gloof semble le penser aussi, si tu n'es pas convaincu je n'y peux rien.
Je ne doute pas une seconde que tu sois convaincu de ta propre opinion. Mais on ne présente pas des faits avec simplement des "opinions" et des "il me semble que les éléments sont bons, surtout ceux qui vont dans le sens de mon affirmation" (nooooon, sans déconner ?).
J'ajouterai que les profs des prépas sciences ont sans doute aussi des centaines pour ne pas dire des milliers de copies d'élèves (= d'évaluation) sur lesquelles s'appuyer, tout comme moi et mes collègues en avons, mais bon, ça ne doit pas vous suffire, j'imagine...
J'ai hâte de savoir quel professeur de prépa a fait une évaluation sur le niveau global (qui concerne donc sans doute des matières pour lesquelles il n'est pas professeur), et de savoir où ses publications sont accessibles.
Qu'est ce qu'on en sait ? On s'appuie sur nos compétences et notre expérience dans la pratique de l'évaluation pour voir quelle évolution suit son cours, mais qu'est ce qu'on en sait ? Il suffit de venir dire "non", c'est tellement plus fort comme contre-exemple.
Sans méthode, comment fais-tu pour savoir que ton expérience du niveau en Français, surtout, et éventuellement en mathématiques, est significative à l'échelle nationale et pour le niveau global des élèves ?
Désolé Joker, mais non, l'expérience seule n'est pas suffisante, et c'est toi au contraire qui sombre dans la facilité et le manque de rigueur.
Des centaines/milliers de notes et d'écrits sont bien évidements des biais cognitifs. Oui. Sans aucune doute.
C'est surtout que là, comme ça, sans méthode, sans analyse, sans publication, des centaines et des milliers de notes, ça ne veut juste rien dire. Quant à considérer que les professeurs dans leur pratique et dans leur expérience y compris dans l'évaluation des élèves ont des biais cognitifs, ben oui, comme tout le monde en fait.
Gl0of
(Le système de peer-reviewing, pour ne citer que lui, est quand même de plus en plus daubé, au moins dans mes domaines (je cherche le point anecdote, décidément) ; le problème est l'absence d'alternative convenable, au moins pour le moment)
Ben c'est pas une anecdote, donc non, t'auras pas ton point. Oui le système actuel académique pose un tas de problèmes, et citer le peer-reviewing comme ça ne veut pas dire grand chose, mais c'est surtout pas le sujet.
En l'occurrence, un des points de ta publi de Fallis que j'avais trouvé intéressant est celui sur la 'Wisdom of crowds', qui pour le coup va dans mon sens
Non, il ne va pas dans ton sens. J'hésite limite à facepalm en fait tellement tu déformes complètement l'idée de Fallis. Il dit surtout que l'opinion d'un large groupe d'individus (edit: par rapport à un fait autrement connu, pas forcément pour établir un fait) a plus de chance d'être juste que l'opinion d'un seul individu, il dit aussi que pour que ça fonctionne bien, ce large groupe d'individus doit avoir certaines caractéristiques (indépendance, notamment), mais surtout à aucun moment il ne prétend que l'avis d'un large groupe serait meilleur que des études méthodiques ou l'opinion d'un groupe d'experts scientifiques dans un domaine.
D'ailleurs il dit aussi qu'il n'est pas certain que ce soit un effet de sagesse de masse qui permette à Wikipedia d'être assez fiable, notamment car la diversité des intervenants est difficile à établir et qu'on a sans doute des experts qui participent aux articles et en particulier aux affirmations factuelles.
Weeds.