Group items tagged

L'approche traditionnelle de l'évaluation semble inappropriée lorsqu'il est question de l'évaluation des innovations sociales. En effet, les auteures du présent rapport soutiennent que la rapidité des changements sociaux et la complexité de l'environnement social constituent des embûches à l'évaluation. À la suite de la description des limites des approches traditionnelles, elles proposent de faire appel aux évaluations développementales, évaluations qui permettraient de mieux tenir compte des innovations, de la reddition de comptes, de la rigueur et de l'adaptation. Via http://observgo.uquebec.ca/observgo/

Anya Kamenetz revient sur la proposition formulée par Bill Gates de mettre des caméras dans chaque classe pour évaluer les enseignants : http://www.fastcompany.com/3007841/tech-forecast/bill-gates-education-we-can-make-massive-strides Gates est revenu sur un programme pilote intitulé Mesures pour un enseignement efficace - http://www.metproject.org - qui a publié ses résultats en janvier 2013 sur un système d'évaluation pédagogique qui combine résultats des tests des enfants, évaluations par les élèves et évaluations en classe par des observateurs impartiaux. Bien évidemment, la proposition de Gates fait débat, même si, estime-t-il, "nos enseignants méritent une meilleure rétroaction". Reste que l'évaluation seule ne suffira pas à améliorer l'enseignement...

Bien qu'appliqué à la médecine, la réflexion de Dominique Dupagne, l'auteur de "La revanche du rameur", pourrait s'appliquer à bien d'autres choses. Il revient sur les théories de l'économiste américain Robert Lucas qui estimait que les statistiques n'aident pas à prédire les comportements futur des agents économiques. "Une corrélation observée peut devenir trompeuse si elle est utilisée dans un but de prévision ou d'évaluation." Pour Lucas, les agents ne modifient pas forcément leur comportement face à un nouvel indicateur qui les concerne. Charles Goodhart, allait même plus loin encore : "Lorsqu'un indicateur est choisi pour guider une politique économique, il perd du même coup la valeur informative qui l'avait qualifié pour remplir cette fonction. Pour le sociologue américain Donald Campbell : "Plus un indicateur quantitatif est utilisé pour prendre des décisions, plus il va être manipulé et plus son usage va aboutir à corrompre le processus qu'il était censé améliorer". Et Dominique Dupagne d'afficher son sceptiscisme face aux méthodes d'évaluation et de rémunération incitatives. Alors quelles évaluations mettre en place ? Pour Dupagne, la solution est d'avoir une palette d'indicateurs très large et de conserver le secret sur ces indicateurs.

Le lancement de la Big Society de James Cameron, premier ministre britannique, a consisté à créer un fonds public pour soutenir la création de start-up et de projets locaux pour compenser les coupes budgétaires et la fermeture de services publics. Une centaine d'écoles publiques gratuites ont ainsi été ouvertes avec forces critiques. Une centaine de bibliothèques bénévoles ont également été ouvertes alors que plus de 200 ont fermé. 3 municipalités ont mis en place en 2011 des programmes de services publics partagés... Celan n'empêche pas le bilan de la Big Society d'être décevant, selon une évaluation, la Big Society manque de stratégie. 7000 associations ont fermé dans le pays du fait des baisses de financement., particulièrement dans les quartiers les plus pauvres. La ville de Liverpool, pilote, a quitté le programme en 2011 pour protester contre la diminution des subventions. Reste que le programme a montré que dans un contexte budgétaire tendu, des initiatives innovantes peuvent voir le jour. Même s'il est difficile de faire toujours plus avec toujours moins de moyens.

Sur son blog, Jacques Testart revient sur l'étude de la toxicité des plantes transgéniques enterrée par l'Agence européenne de sécurité des aliments et la dépasse pour livrer une intéressante réflexion sur l'expertise et ses limites. "L'expertise est souvent sacralisée comme seule évaluation sérieuse, sans que soient interrogés préalablement, les conflits d'intérêts matériels ou idéologiques dont sont porteurs les experts ou la prise en compte par l'expertise d'autres facteurs toxicologiques comme l'environnement, l'économie..." Notre société doit concevoir d'autres outils que la seule expertise technique qu'encensent décideurs politiques et industriels. Pour Jacques Testart, il est essentiel que l'expertise intègre des avis différents que ceux des seuls experts dépendant d'institutions scientifiques. "L'expertise ne doit pas seulement être une production technique" mais doit aussi entendre, comprendre et respecter l'avis d'autres personnes. "En recherchant la variété (des disciplines comme des experts) on peut obtenir un tableau assez complet des avantages et inconvénients d'une innovation". Trop souvent, l'expertise est un document transformable en décision politique. Dans le cadre des plantes génétiquement modifiées, leur utilité sociale n'est jamais prise en compte : seul compte leur innocuité prétendue, le seuil de tolérance. Alors que le médicament intègre de plus en plus la mesure du bénéfice/risque, pourquoi ne fait-on pas pareil des autres technologies en débat ?  Et Testart de conclure : "il n'est plus satisfaisant de confier au pouvoir politique l'interprétation de l'expertise pas plus que de faire produire l'expertise par quelques spécialistes." C'est aux collectifs de citoyens d'agir et décider... 

Après avoir dressé un panorama de jeux sérieux récents et intéressants, David Larousserie repose la sempiternelle question de leur évaluation. Si la satisfaction est parfois au rendez-vous (enfants, enseignants et experts estiment que le jeu apporte quelque chose), les constats sont parfois plus mitigés, notamment parce que la perception ludique est souvent faible et que la transmission des connaissance peut ne pas réussir. Les retours sont parfois très négatifs des élèves eux-mêmes, attachés au rituel scolaire classique. Le Play Research Lab, de Julian Alvarez et Sylvain Haudegond devrait travailler à améliorer l'évaluation des jeux sérieux.

"Dans le cadre de sa politique d'austérité budgétaire, le gouvernement britannique sous-traite désormais la gestion des évaluations d'aptitude au travail des handicapés à la firme française de services informatiques Atos. Avec pour objectif quasi avoué de réduire drastiquement le nombre des bénéficiaires des minima sociaux. Depuis, l'entreprise se retrouve sous le feux des critiques pour le traitement implacable qu'elle semble réserver aux handicapés britanniques.

L'anonymat des commentateurs en ligne favorise ce que le psychologue John Suler a appelé "l'effet de désinhibition". Selon une étude, les commentateurs anonymes ont plus tendance à être inciviles que les intervenants non anonymes. Mais l'anonymat encourage également la participation - car on n'a plus a se démarquer individuellement - et stimule la pensée créative car favorise la prise de risque. Les études montrent aussi que si les commentateurs anonymes étaient plus susceptibles d'être à contre-courant ou plus extrêmes que les commentateurs non-anonymes, ils étaient beaucoup moins susceptibles de faire changer d'opinion ceux qui les lisent : l'anonymat rend moins influent et moins crédible. Comme l'a montré Alfred Bandura, la responsabilité personnelle devient plus diffuse dans un groupe ce qui encourage l'agressivité, les raccourcis mentaux... ce qui favorise les évaluations simplistes de problèmes complexes. Reste que commenter est une façon de partager une expérience ou une réalité.

L'université de Warwick lance un laboratoire politique - et un blog dédié hébergé par le Guardian : http://www.guardian.co.uk/public-leaders-network/policy - : le but, appliquer les meilleures pratiques après évaluation et favoriser l'innovation sociale. 

Pour Christina Bonnington, l'App Store, qui fête ses 5 ans,  a transformé le téléphone, mais également la distribution de logiciel (et leur évaluation, même si, nombre d'utilisateurs seront moins convaincus sur ce dernier point). 

"Depuis le début du XXe siècle, du cinéma aux jeux sérieux, en passant par la télévision et les MO7 du plan informatique pour tous, beaucoup de nouvelles technologies n'ont pas tenu leurs promesses éducatives. À chaque fois, on a cru pouvoir moderniser l'école grâce aux nouvelles technologies. Je crois qu'il est temps d'admettre que ce n'est pas une bonne façon de poser le problème. L'école a sans doute besoin d'être plus efficace et plus juste. Quand nous saurons comment faire cela, alors nous saurons en quoi les façons d'apprendre, d'enseigner et d'organiser l'école doivent être modifiées, alors seulement nous pourrons savoir quelle contribution telle technologie, nouvelle ou ancienne, peut apporter à cette amélioration. Dans l'attente, nous sommes condamnés à innover un peu au hasard, en essayant quelque chose dans l'espoir que ça marchera, et en nous préparant à être déçus.) Au cours des trente dernières années d'innovations « un peu au hasard », nous avons appris beaucoup de choses. Nous avons appris que les conditions d'intégration des nouvelles technologies à l'école dépendaient de leur utilité, de leur simplicité et de leur compatibilité avec ce qui se passe dans la classe. Nous avons appris que leur utilité résidait essentiellement dans leur effet positif sur la motivation, l'engagement, le plaisir des élèves ; sur la richesse et la complexité des contenus que l'on peut aborder ; sur l'interactivité et la possibilité de personnaliser l'apprentissage pour un élève singulier. Mais nous avons appris que ces plus-values en termes d'utilité s'obtenaient souvent au détriment de la simplicité. Nous avons dû admettre que les évaluations proposées par un ordinateur sont souvent rudimentaires mais qu'elles offrent la possibilité de mieux suivre l'activité d'un élève, d'augmenter le nombre d'évaluations et de favoriser l'autoévaluation. Nous a

La vie des femmes a toujours été soumise à la mesure, estime Amelia Abreu pour Model View Culture. La donnée a toujours été un sous-produit négligé de l'action et de l'interaction. Longtemps le domaine des femmes, la collecte, le stockage et l'analyse des données sont devenues le territoire des hommes, comme le montre les promoteurs du Quantified Self, une communauté largement masculine. Une grande promesse de la mesure repose sur la découverte et l'adoption de mesures "parfaites" ou "universelles", mais sans s'interroger sur les systèmes, leur évaluation, leur sélection... Pourrions-nous imaginer demain un avenir de données féministe ?

Pour le sociologue de la délinquance Sébastien Roché interviewé par les Cahiers dynamiques, on ne répondra efficacement à la délinquance qu'en évaluant mieux l'efficacité et l'impact des politiques publiques mis en place pour y répondre.