{"id":1319,"date":"2014-05-27T11:00:18","date_gmt":"2014-05-27T10:00:18","guid":{"rendered":"http:\/\/carrefour-numerique.cite-sciences.fr\/blog\/?p=1319"},"modified":"2015-02-24T16:31:11","modified_gmt":"2015-02-24T15:31:11","slug":"experimenter-cest-bien-evaluer-cest-mieux","status":"publish","type":"post","link":"https:\/\/cyberweb.cite-sciences.fr\/blog\/experimenter-cest-bien-evaluer-cest-mieux\/","title":{"rendered":"Exp\u00e9rimenter, c\u2019est bien, \u00e9valuer c\u2019est mieux !"},"content":{"rendered":"<p><b>M\u00e9diateur au Carrefour Num\u00e9rique\u00b2, Thierry Thibault est charg\u00e9 en particulier d\u2019\u00e9valuer l\u2019offre du Fab Lab et du Living Lab. M\u00e9thodologie, \u00e9chelle d\u2019<span lang=\"en\">Osgood<\/span>, r\u00e9cence, d\u00e9pouillage et rapport, il nous explique comment il fait ce travail parfois ingrat (ahhh, d\u00e9chiffrer les \u00e9critures patte de mouche\u2026 ) mais n\u00e9cessaire pour adapter les offres.<\/b> <\/p>\n<p>Apr\u00e8s un \u00e9v\u00e9nement au Carrefour Num\u00e9rique\u00b2, il y a le c\u00f4t\u00e9 sympa, genre boire une bi\u00e8re entre coll\u00e8gues. Et puis il y a un travail un peu moins dr\u00f4le, mais bien utile&nbsp;: d\u00e9pouiller les questionnaires d\u2019\u00e9valuation et en faire une synth\u00e8se dodue, une t\u00e2che assur\u00e9e par Thierry Thibault. Comme les autres centres de science du consortium <a href=\"http:\/\/inmediats.fr\/\" target=\"_blank\" title=\"Inmediats (nouvelle fen\u00eatre)\">Inmediats<\/a>, laur\u00e9at de l\u2019appel \u00e0 projet grand emprunt num\u00e9rique, le Carrefour Num\u00e9rique\u00b2 doit remplir des objectifs en termes de public atteint. Le combo id\u00e9al, c\u2019est la bacheli\u00e8re de ZEP car l\u2019\u00e9quipe vise 40% issus de ces trois cat\u00e9gories&nbsp;:<\/p>\n<ul>\n<li>les jeunes de 15 \u00e0 25 ans, alors qu\u2019ils ne sont que 20% en moyenne du public des centres de sciences&nbsp;; <\/li>\n<li>les femmes, qui ne sont <a href=\"http:\/\/www.20minutes.fr\/sciences\/1233583-20131008-carrieres-scientifiques-femmes-restent-inconnues-equation\" target=\"_blank\" title=\"20 minutes : Carri\u00e8res scientifiques, les femmes restent les inconnues de l'\u00e9quation (nouvelle fen\u00eatre)\">pas assez pr\u00e9sentes dans les fili\u00e8res scientifiques<\/a>, en particulier les sciences dures&nbsp;; <\/li>\n<li>le \u00ab&nbsp;public \u00e9loign\u00e9 des sciences et techniques&nbsp;\u00bb, c\u2019est-\u00e0-dire celles et ceux qui ne vont pas spontan\u00e9ment dans un centre de science pour des questions de capital culturel (<a href=\"https:\/\/fr.wikipedia.org\/wiki\/Capital_culturel\" target=\"_blank\" title=\"Wikip\u00e9dia : Capital culturel (nouvelle fen\u00eatre)\">point Bourdieu<\/a>).<\/li>\n<\/ul>\n<p><q>Il faut \u00e0 la fois savoir ce qui int\u00e9resse ces personnes et interroger tout le monde<\/q>, r\u00e9sume Thierry, le Graal \u00e9tant une animation qui satisfasse 100% du public. <\/p>\n<p>L\u2019\u00e9valuation syst\u00e9matique fait partie des nouvelles missions des centres de sciences d\u2019Inmediats. Si certain\u00b7e\u00b7s de ses coll\u00e8gues la d\u00e9couvrent, Thierry est d\u00e9j\u00e0 rod\u00e9, entre ses \u00e9tudes de psychologie cognitive et les \u00e9valuations qu\u2019il effectuait lors de son travail pr\u00e9c\u00e9dent au laboratoire <a href=\"http:\/\/www.lutin-userlab.fr\/site\/accueil\/\" target=\"_blank\" title=\"Lutin UselLab (nouvelle fen\u00eatre)\">LUTIN <span lang=\"en\">UserLab<\/span><\/a>. <\/p>\n<p>Les feuilles que les visiteur\u00b7se\u00b7s remplissent ont deux destinataires&nbsp;: la hi\u00e9rarchie, qui voit ainsi si le Carrefour Num\u00e9rique\u00b2 est dans les clous et l\u2019\u00e9quipe qui s\u2019appuie dessus afin d\u2019am\u00e9liorer le programme  (ou se congratuler si tout le monde est content). Le Carrefour Num\u00e9rique\u00b2 propose aussi d\u2019accompagner les utilisateurs\u00b7trice\u00b7s qui viennent au <a href=\"http:\/\/carrefour-numerique.cite-sciences.fr\/blog\/le-jargon#Living%20Lab\">Living Lab<\/a> sur cet aspect, car tous ne sont pas des chercheur\u00b7se\u00b7s d\u00e9j\u00e0 autonomes en la mati\u00e8re. <q>J\u2019aimerais dresser une liste d\u2019outils pour qu\u2019ils s\u2019\u00e9valuent eux-m\u00eames<\/q>, explique Thierry. <\/p>\n<h2>Questionnaires \u00e0 la vol\u00e9e, \u00e0 remplir en cinq minutes<\/h2>\n<p>Contrairement \u00e0 ce qu\u2019on pourrait penser, trop de questionnaires remplis tuent le questionnaire, et Thierry et ses coll\u00e8gues qui s\u2019\u00e9corchent les yeux sur des \u00e9critures pas toujours tr\u00e8s lisibles. <q>C\u2019est la loi des grands nombres&nbsp;: on obtient un r\u00e9sultat moyen. Au-del\u00e0 d\u2019une personne sur 10 qui r\u00e9pond, c\u2019est trop<\/q>. Bien s\u00fbr, il ne faut pas non plus qu\u2019il y ait trop peu de retours, sinon les r\u00e9ponses ne sont pas repr\u00e9sentatives. De m\u00eame, il \u00e9vite les questionnaires de trois pages, r\u00e9barbatifs&nbsp;: un recto-verso maximum, compl\u00e9t\u00e9 en cinq minutes et basta&nbsp;! Les feuilles sont plac\u00e9es en diff\u00e9rents endroits, \u00e0 la vol\u00e9e, prend qui veut. <\/p>\n<p>Si certains crit\u00e8res sont faciles \u00e0 \u00e9valuer &#8211; la tranche d\u2019\u00e2ge, le genre -, la notion de \u00ab&nbsp;public \u00e9loign\u00e9&nbsp;\u00bb est beaucoup plus difficile \u00e0 quantifier. <q>Je m\u2019interdis de demander s\u2019ils viennent de ZEP ou s\u2019ils sont CSP + ou -, <span>pr\u00e9cise Thierry.<\/span> C\u2019est d\u00e9licat \u00e0 manier, il faudrait des entretiens plus approfondis<\/q>. Il est possible d\u2019avoir une id\u00e9e \u00e0 travers le niveau d\u2019\u00e9tudes, leur domaine, l\u2019activit\u00e9, le code postal. <\/p>\n<p>Une partie des questions est standard &#8211; comment avez-vous d\u00e9couvert l\u2019\u00e9v\u00e9nement, l\u2019ann\u00e9e de naissance, etc. &#8211; et une moiti\u00e9, celle destin\u00e9e \u00e0 l\u2019usage interne, est adapt\u00e9e. Thierry utilise par exemple l\u2019\u00e9chelle d\u2019<span lang=\"en\">Osgood<\/span>&nbsp;: elle est constitu\u00e9e de deux termes antonymes, s\u00e9par\u00e9s par une demi-douzaine de degr\u00e9s et le visiteur \u00e9value l\u2019animation en pla\u00e7ant le curseur. Par exemple&nbsp;:<\/p>\n<p>Le chocolat, c\u2019est&nbsp;: <\/p>\n<p>Primordial I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I&#8212;&#8212;&#8212;&#8212;I  Sans importance<\/p>\n<h2><q>Le terme hackathon n\u2019\u00e9tait pas judicieux<\/q><\/h2>\n<p>Le d\u00e9pouillement donne parfois lieu \u00e0 des surprises. Par exemple, les visiteur\u00b7se\u00b7s du <a href=\"http:\/\/carrefour-numerique.cite-sciences.fr\/blog\/les-hackathoniens-ont-code-dur-pour-animer-nao\/\">hackathon interdisciplinaire Nao<\/a> ont surtout appr\u00e9ci\u00e9 l\u2019ambiance et non les robots, un point mesur\u00e9 avec la question \u00ab&nbsp;comment r\u00e9sumeriez-vous l\u2019\u00e9v\u00e9nement \u00e0 un proche&nbsp;\u00bb. <q>Les gens notent ce qui les a le plus marqu\u00e9s, c\u2019est ce qu\u2019on appelle <a href=\"https:\/\/fr.wikipedia.org\/wiki\/Effet_de_r%C3%A9cence\" target=\"_blank\" title=\"Wikip\u00e9dia : effet de r\u00e9cence (nouvelle fen\u00eatre)\">l\u2019effet de r\u00e9cence<\/a>. On aurait peut-\u00eatre eu le m\u00eame r\u00e9sultat avec une animation autour des betteraves, le th\u00e8me a \u00e9t\u00e9 occult\u00e9<\/q>, note Thierry. Il a aussi permis de valider une impression ressentie sur place&nbsp;: le terme <a href=\"http:\/\/carrefour-numerique.cite-sciences.fr\/blog\/le-jargon#Hackathon\">hackathon<\/a> n\u2019\u00e9tait pas judicieux&nbsp;: <q>il n\u2019est pas lisible, ne donnait pas envie, <span>poursuit-il.<\/span> C\u2019est trop technique, <a href=\"http:\/\/carrefour-numerique.cite-sciences.fr\/blog\/le-jargon#Hacker\"><span lang=\"en\">hacker<\/span><\/a> est mal connot\u00e9 encore. Il y a eu une petite d\u00e9ception sur le manque d\u2019activit\u00e9s sur place.<\/q><\/p>\n<p>La parit\u00e9 \u00e9tait aussi respect\u00e9e, alors que d\u2019habitude la Cit\u00e9 des sciences accueille plus de femmes, environ 58%&nbsp;: et oui, mais elles ne travaillent pas forc\u00e9ment dans les sciences, beaucoup accompagnent leurs marmots, ce qui incite l\u2019\u00e9tablissement \u00e0 <a href=\"http:\/\/femmes.gouv.fr\/signature-de-la-charte-universcience-pour-legalite-femmes-hommes-en-sciences-et-des-technologies\/\" target=\"_blank\" title=\"femmes.gouv : signature de la charte Universcience pour l'\u00e9galit\u00e9 femmes-hommes (nouvelle fen\u00eatre)\">travailler sur la parit\u00e9 homme-femme<\/a>. <\/p>\n<p>Le choix de ne pas faire de comp\u00e9tition a \u00e9t\u00e9 un point positif, appr\u00e9ci\u00e9 du public et des participant\u00b7e\u00b7s, un esprit de saine rivalit\u00e9 dominait&nbsp;: les \u00e9quipes se filaient des coups de main, renvoyaient le public vers les participant\u00b7e\u00b7s qui leur semblaient plus comp\u00e9tent\u00b7e\u00b7s sur certaines questions. <\/p>\n<p>Si le hackathon a plu \u00e0 tout le monde, les r\u00e9sultats sont d\u00e9cevants concernant le public recherch\u00e9&nbsp;: s\u2019il y avait un tiers de 15-25, le public \u00ab&nbsp;\u00e9loign\u00e9&nbsp;\u00bb n\u2019est pas venu, on n\u2019en comptait aucun\u00b7e\u00b7 dans les \u00e9quipes. Un point \u00e0 mettre en relation peut-\u00eatre avec le choix du mot \u00ab&nbsp;hackathon&nbsp;\u00bb qui parle surtout aux d\u00e9veloppeur\u00b7se\u00b7s. <q>Pourtant, il ne fallait pas savoir coder, juste avoir une sensibilit\u00e9 au sujet, l\u2019interface graphique est simple \u00e0 utiliser<\/q>, regrette Thierry. Rendez-vous au prochain hackathon pour voir comment le Carrefour Num\u00e9rique\u00b2 a dig\u00e9r\u00e9 les critiques pour affiner la formule.<\/p>\n<p align=right><b>Sabine Blanc<\/b><\/p>\n","protected":false},"excerpt":{"rendered":"<p>M\u00e9diateur au Carrefour Num\u00e9rique\u00b2, Thierry Thibault est charg\u00e9 en particulier d\u2019\u00e9valuer l\u2019offre du Fab Lab et du Living Lab. M\u00e9thodologie,&#8230;<\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":[],"categories":[2],"tags":[10,12,11,50,120,51],"_links":{"self":[{"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/posts\/1319"}],"collection":[{"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/comments?post=1319"}],"version-history":[{"count":15,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/posts\/1319\/revisions"}],"predecessor-version":[{"id":1334,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/posts\/1319\/revisions\/1334"}],"wp:attachment":[{"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/media?parent=1319"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/categories?post=1319"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/cyberweb.cite-sciences.fr\/blog\/wp-json\/wp\/v2\/tags?post=1319"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}