{"id":4122,"date":"2019-05-22T07:45:33","date_gmt":"2019-05-22T05:45:33","guid":{"rendered":"http:\/\/variances.eu\/?p=4122"},"modified":"2019-12-18T12:27:03","modified_gmt":"2019-12-18T10:27:03","slug":"comment-mesure-t-on-lequite-dun-systeme-educatif","status":"publish","type":"post","link":"https:\/\/variances.eu\/?p=4122","title":{"rendered":"Comment mesure-t-on l\u2019\u00e9quit\u00e9 d\u2019un syst\u00e8me \u00e9ducatif ?"},"content":{"rendered":"

Les premiers r\u00e9sultats de l\u2019\u00e9dition 2018 du Programme international pour le suivi des acquis des \u00e9l\u00e8ves (PISA) seront publi\u00e9s cette ann\u00e9e par l’Organisation de coop\u00e9ration et de d\u00e9veloppement \u00e9conomiques (OCDE). Si cette enqu\u00eate internationale a, au tout d\u00e9but, \u00e9t\u00e9 accueillie en France avec indiff\u00e9rence voire une certaine d\u00e9fiance, le \u00ab classement PISA \u00bb a depuis largement int\u00e9gr\u00e9 le d\u00e9bat public sur l\u2019\u00e9ducation dans notre pays. La principale source de pr\u00e9occupation chez nous porte sur l\u2019\u00e9quit\u00e9, ou plut\u00f4t l\u2019iniquit\u00e9 du syst\u00e8me scolaire. Lors des \u00e9ditions pr\u00e9c\u00e9dentes du PISA, les scores des \u00e9l\u00e8ves fran\u00e7ais \u00e9taient proches de la moyenne de l\u2019ensemble des pays de l\u2019OCDE mais le syst\u00e8me \u00e9tait jug\u00e9 comme l\u2019un des plus in\u00e9galitaires.<\/p>\n

Qu\u2019est-ce que le PISA ?<\/h3>\n

L\u2019int\u00e9r\u00eat du PISA d\u00e9passe \u00e9videmment la production d\u2019un \u00ab palmar\u00e8s \u00bb. Rappelons d\u2019abord qu\u2019il constitue la plus grande \u00e9tude internationale dans le domaine de l’\u00e9ducation. Administr\u00e9e tous les trois ans depuis 2000, l\u2019enqu\u00eate s\u2019est d\u00e9roul\u00e9e en 2018 dans pr\u00e8s de 80 pays, dont la liste ne se limite plus aux pays de l\u2019OCDE. En France, l\u2019\u00e9chantillon comprenait environ 7 000 \u00e9l\u00e8ves de 15 ans, appartenant \u00e0 environ 250 \u00e9tablissements scolaires \u2013 mais dans l\u2019ensemble des pays participants, c\u2019est plus d\u2019un million d\u2019\u00e9l\u00e8ves de cet \u00e2ge qui a \u00e9t\u00e9 interrog\u00e9.<\/p>\n

L\u2019une des originalit\u00e9s du PISA tient \u00e0 ce qu\u2019il ne se contente pas de mesurer des connaissances scolaires, mais vise \u00e0 \u00e9valuer la capacit\u00e9 des \u00e9l\u00e8ves \u00e0 mobiliser ces acquis scolaires dans des contextes vari\u00e9s. L\u2019enqu\u00eate se concentre sur plusieurs domaines cl\u00e9s \u2013 la compr\u00e9hension de l\u2019\u00e9crit, la culture scientifique et math\u00e9matique auxquels s\u2019ajoute, \u00e0 chaque \u00e9dition, un domaine novateur comme, en 2015, la capacit\u00e9 \u00e0 r\u00e9soudre des probl\u00e8mes de mani\u00e8re collaborative. Ce qui est mesur\u00e9, plut\u00f4t qu\u2019une simple restitution de connaissances scolaires, se rapporte \u00e0 la notion de \u00ab litt\u00e9ratie \u00bb (litteracy), c\u2019est-\u00e0-dire la capacit\u00e9 d\u2019exploiter des savoirs et savoir-faire [1]. Les exercices propos\u00e9s aux \u00e9l\u00e8ves sont donc ancr\u00e9s dans des situations concr\u00e8tes de la vie quotidienne ou interrogent leur culture scientifique ou math\u00e9matique. Les r\u00e9sultats des exercices conduisent \u00e0 donner un \u00ab score \u00bb \u00e0 chaque \u00e9l\u00e8ve, en utilisant un mod\u00e8le statistique dit de \u00ab mod\u00e8le de r\u00e9ponse \u00e0 l\u2019item \u00bb (ou Item Response Theory, IRT) [2]. Ce mod\u00e8le, propos\u00e9 initialement par le statisticien Raoul Rasch, consiste \u00e0 inf\u00e9rer le niveau (inobserv\u00e9) de l\u2019\u00e9l\u00e8ve en fonction du nombre de r\u00e9ponses correctes que l\u2019\u00e9l\u00e8ve a obtenues, en tenant compte de la difficult\u00e9 des exercices. La complexit\u00e9 des exercices est elle-m\u00eame estim\u00e9e simultan\u00e9ment en fonction du nombre d\u2019\u00e9l\u00e8ves qui sont parvenus \u00e0 les r\u00e9soudre. Ces mod\u00e8les permettent \u00e9galement de tester que les items \u00ab fonctionnent \u00bb de mani\u00e8re identique dans tous les pays \u2013 dit autrement, que le niveau de difficult\u00e9 des exercices per\u00e7u n\u2019est pas li\u00e9 \u00e0 des raisons linguistiques ou culturelles, de mani\u00e8re \u00e0 assurer la comparabilit\u00e9 des scores obtenus entre \u00e9l\u00e8ves de pays diff\u00e9rents [3].<\/p>\n

L\u2019objectif du programme est aussi de cerner les facteurs qui influent sur l\u2019acquisition des connaissances et des comp\u00e9tences et le d\u00e9veloppement des attitudes \u00e0 l\u2019\u00e9cole et dans le milieu familial, afin d\u2019\u00e9tudier leurs interactions et leurs implications pour l\u2019action publique. Le PISA permet en effet de mettre en relation les r\u00e9sultats des \u00e9l\u00e8ves avec un ensemble de variables contextuelles. Les tests cognitifs sont compl\u00e9t\u00e9s par plusieurs questionnaires renseign\u00e9s par les \u00e9l\u00e8ves ainsi que par les principaux des \u00e9tablissements dans lesquels ils sont scolaris\u00e9s. L\u2019enqu\u00eate interroge les \u00e9l\u00e8ves sur leur milieu familial (niveau d\u2019\u00e9ducation et m\u00e9tiers de leurs parents, possession de biens culturels, etc.). Il est donc possible de mettre en relation les niveaux de performances des \u00e9l\u00e8ves avec des informations sur leur milieu social, les caract\u00e9ristiques des \u00e9coles qu\u2019ils fr\u00e9quentent ou encore les sp\u00e9cificit\u00e9s du syst\u00e8me scolaire (usage du redoublement, pr\u00e9scolarisation pr\u00e9coce, etc.).<\/p>\n

Ce sont ces informations qui permettent d\u2019estimer les indicateurs relatifs \u00e0 l\u2019\u00e9quit\u00e9. Les publications de l\u2019OCDE appr\u00e9hendent cette notion complexe \u2013 que l\u2019\u00e9dition fran\u00e7aise traduit souvent par \u00e9galit\u00e9 \u2013 via deux dimensions compl\u00e9mentaires : \u00ab l\u2019inclusion \u00bb et la \u00ab justice \u00bb.<\/p>\n

Un syst\u00e8me \u00e9quitable : inclusif et offrant des chances \u00e9gales \u00e0 toutes et tous<\/h3>\n

L\u2019inclusion renvoie \u00e0 l\u2019objectif de \u00ab faire en sorte que tous les \u00e9l\u00e8ves acqui\u00e8rent des comp\u00e9tences fondamentales essentielles pour participer pleinement \u00e0 la vie de la soci\u00e9t\u00e9 \u00bb [4]. Il s\u2019agit donc de mesurer un niveau de performance minimal cens\u00e9 attester de la maitrise de comp\u00e9tences \u00e9l\u00e9mentaires n\u00e9cessaires \u00e0 une insertion r\u00e9ussie dans la vie d\u2019adulte. En 2015, 22 % des \u00e9l\u00e8ves fran\u00e7ais ne maitrisaient pas un niveau \u00ab suffisant \u00bb en science, soit l\u00e9g\u00e8rement plus que la moyenne de l\u2019OCDE (19 %). Dans une acception plus litt\u00e9rale, l\u2019inclusion est aussi d\u00e9finie comme la possibilit\u00e9 donn\u00e9e \u00e0 tous les \u00e9l\u00e8ves d\u2019\u00e9tudier ensemble ou, son contraire, par la s\u00e9lection dans certaines \u00e9coles en fonction du niveau scolaire ou de l\u2019origine sociale. Les indicateurs statistiques correspondants sont estim\u00e9s \u00e0 partir de la distribution, plus ou moins uniforme, des \u00e9l\u00e8ves dans les \u00e9coles.<\/p>\n

La deuxi\u00e8me dimension de l\u2019\u00e9quit\u00e9 mesur\u00e9e dans PISA, la justice, se rattache plut\u00f4t au courant de philosophie politique d\u00e9velopp\u00e9 par John Rawls, qu\u2019on peut parfois traduire sous le terme d\u2019\u00e9galit\u00e9 des chances. Il s\u2019agit non de viser \u00e0 ce que toutes et tous parviennent aux m\u00eames r\u00e9sultats, mais d\u2019assurer que les in\u00e9galit\u00e9s de score observ\u00e9es entre les \u00e9l\u00e8ves ne rel\u00e8vent pas de \u00ab circonstances \u00bb individuelles. Ces circonstances correspondent \u00e0 des facteurs sur lesquels les \u00e9l\u00e8ves n\u2019ont aucune prise, notamment leur sexe, leur milieu social ou leur statut au regard de l\u2019immigration. Dans les publications PISA, on d\u00e9finit ainsi que \u00ab les syst\u00e8mes d\u2019\u00e9ducation sont \u00e9galitaires s\u2019ils offrent \u00e0 tous les \u00e9l\u00e8ves, quel que soit leur milieu, autant de possibilit\u00e9s de r\u00e9ussir \u00e0 l\u2019\u00e9cole \u00bb [5]. En particulier, le \u00ab gradient socio-\u00e9conomique \u00bb dans PISA mesure la force du lien entre le score obtenu et un indicateur composite mesurant le niveau d\u2019\u00e9ducation des parents, leurs professions ainsi que des indicatrices de ressources financi\u00e8res et culturelles du foyer, l\u2019indice de statut \u00e9conomique, social et culturel (SESC). En pratique, ce gradient est simplement mesur\u00e9 par une r\u00e9gression lin\u00e9aire du score individuel des \u00e9l\u00e8ves sur l\u2019indicateur approchant leur milieu social. La force du gradient socio-\u00e9conomique correspond \u00e0 la part de la variance du score dans PISA expliqu\u00e9e par l\u2019origine sociale (le R2).<\/p>\n

Ainsi, en France, l\u2019origine sociale ainsi calcul\u00e9e expliquait 20 % du score individuel dans PISA en 2015, soit le plus haut niveau observ\u00e9 dans les pays de l\u2019OCDE (pour lesquels la moyenne s\u2019\u00e9tablit \u00e0 13 %). La pente du gradient social correspond au coefficient de cette m\u00eame r\u00e9gression : il capte donc l\u2019amplitude des in\u00e9galit\u00e9s de score moyennes entre des \u00e9l\u00e8ves d\u2019origine sociale diff\u00e9rente. Un autre indicateur de l\u2019\u00e9galit\u00e9 \u2013 ou de l\u2019in\u00e9galit\u00e9 \u2013 des chances est fourni par le rapport des risques entre deux sous-populations d\u00e9finies par des caract\u00e9ristiques individuelles. Comme illustr\u00e9 dans le graphique ci-dessous, les \u00e9l\u00e8ves d\u00e9favoris\u00e9s (d\u00e9finis dans PISA comme ceux dont l\u2019indice SECS est inf\u00e9rieur au premier quartile de la distribution de cet indice dans leur pays) avaient ainsi en France quatre fois plus de risque que des \u00e9l\u00e8ves plus favoris\u00e9s de ne pas atteindre le niveau des comp\u00e9tences de base en science en 2015, soit le ratio le plus \u00e9lev\u00e9 des pays de l\u2019OCDE.<\/p>\n

\"\"

Graphique : Risque relatif entre \u00e9l\u00e8ves issus de milieu d\u00e9favoris\u00e9 et \u00e9l\u00e8ves plus favoris\u00e9s de ne pas atteindre le niveau de comp\u00e9tences de base en science dans PISA en 2015<\/p><\/div>\n

De la description \u00e0 la prescription<\/h3>\n

Le PISA permet de mettre en relation politiques \u00e9ducatives et pratiques (s\u00e9lection pr\u00e9coce, usage plus ou moins intensif du redoublement, etc.) et r\u00e9sultats des \u00e9l\u00e8ves. Bien que la tentation soit souvent forte d\u2019expliquer les bons r\u00e9sultats observ\u00e9s dans tel syst\u00e8me scolaire par certaines de ces caract\u00e9ristiques, extrapoler des relations causales \u00e0 partir de simples corr\u00e9lations entre les caract\u00e9ristiques des syst\u00e8me scolaires et leurs scores dans PISA est hasardeux. Par exemple, dans de nombreux pays, il est fr\u00e9quent d\u2019all\u00e9ger les effectifs des classes rassemblant de nombreux \u00e9l\u00e8ves en difficult\u00e9s. De ce fait, on observe g\u00e9n\u00e9ralement une corr\u00e9lation positive entre le nombre d\u2019\u00e9l\u00e8ves d\u2019une classe et son niveau scolaire. Il serait n\u00e9anmoins hasardeux d\u2019en conclure qu\u2019une politique \u00e9ducative efficace consisterait \u00e0 augmenter la taille des classes. Plus g\u00e9n\u00e9ralement, chaque syst\u00e8me \u00e9ducatif a de nombreuses sp\u00e9cificit\u00e9s et il est impossible d\u2019isoler celui qui pourrait expliquer la r\u00e9ussite de ses \u00e9l\u00e8ves. Peut-on expliquer la r\u00e9ussite du \u00ab mod\u00e8le finlandais \u00bb, qui occupe r\u00e9guli\u00e8rement les premi\u00e8res places du \u00ab podium \u00bb dans PISA par la formation et la s\u00e9lection des enseignants, la faible s\u00e9lection, l\u2019\u00e2ge tardif de la scolarit\u00e9 obligatoire, la plus ou moins grande autonomie des \u00e9tablissements, la taille des classes\u2026 ou une combinaison de tout cela ? Toutes ces dimensions sont mesur\u00e9es en m\u00eame temps dans un cycle de PISA, et il sera tr\u00e8s complexe par des comparaisons internationales \u00ab en coupe transversale \u00bb d\u2019identifier celui qui fait vraiment la diff\u00e9rence.
\nL\u2019int\u00e9r\u00eat de PISA est cependant de montrer en quoi les syst\u00e8mes d\u2019\u00e9ducation se ressemblent et se diff\u00e9rencient, et de mettre en perspective les r\u00e9sultats des uns avec les pratiques des autres. \u00c0 rebours des fausses \u00e9vidences, il a par exemple permis de montrer que les syst\u00e8mes qui pratiquaient une s\u00e9lection pr\u00e9coce dans des voies d\u2019enseignement diff\u00e9renci\u00e9 (comme l\u2019Allemagne ou l\u2019Autriche) s\u2019av\u00e9raient \u00e0 la fois moins performants et plus in\u00e9quitables, quand certains syst\u00e8mes \u00ab inclusifs \u00bb, dans lesquels les \u00e9l\u00e8ves poursuivent tr\u00e8s longtemps une scolarit\u00e9 commune, affichaient d\u2019insolents bons r\u00e9sultats (la Finlande \u00e9tant l\u2019exemple le plus cit\u00e9). De fait, l\u2019un des enseignements r\u00e9currents du PISA, observ\u00e9 sur l\u2019ensemble des cycles pass\u00e9s, est que l\u2019excellence d\u2019un syst\u00e8me scolaire ne se fait pas n\u00e9cessairement au d\u00e9triment de l\u2019\u00e9quit\u00e9. De nombreux pays, dont les scores sont les plus \u00e9lev\u00e9s dans PISA, sont parvenus \u00e0 r\u00e9duire le poids de l\u2019origine sociale dans la r\u00e9ussite, \u00e0 d\u00e9gager une \u00e9lite performante et \u00e0 minimiser la part des jeunes ne maitrisant pas les comp\u00e9tences de bases, comme illustr\u00e9 dans le graphique suivant. L\u2019OCDE publiera en d\u00e9cembre de cette ann\u00e9e des mesures de l\u2019enqu\u00eate 2018 qui montreront si le syst\u00e8me scolaire fran\u00e7ais est parvenu \u00e0 progresser vers ces objectifs.<\/p>\n

\"\"

Graphique : Performance et \u00e9quit\u00e9 dans PISA en 2015<\/p><\/div>\n

Pauline Givord, apr\u00e8s avoir dirig\u00e9 une unit\u00e9 du d\u00e9partement des \u00e9tudes \u00e9conomiques et lanc\u00e9 le SSP Lab [6] au sein de l\u2019Insee, est actuellement analyste au sein de la direction de l\u2019\u00c9ducation de l\u2019OCDE, responsable des travaux sur l\u2019\u00e9quit\u00e9 dans l\u2019enqu\u00eate PISA 2018.<\/em><\/p>\n

Mots cl\u00e9s : PISA – \u00e9quit\u00e9 dans l\u2019\u00e9ducation – \u00e9galit\u00e9 des chances – \u00e9valuation des syst\u00e8mes \u00e9ducatifs – mesure des comp\u00e9tences<\/em><\/p>\n

\n

[1] On trouvera des exemples d\u2019exercices ainsi qu\u2019une documentation plus compl\u00e8te de l\u2019enqu\u00eate sur le site PISA de l\u2019OCDE : https:\/\/www.oecd.org\/pisa\/test-fr\/<\/span><\/span> (\u00e9dition 2012) ou https:\/\/www.oecd.org\/pisa\/test\/<\/span><\/span> (\u00e9dition 2015).<\/em>
\n[2] Pour une pr\u00e9sentation p\u00e9dagogique de ces m\u00e9thodes, voir par exemple Rocher (2015), \u00ab M\u00e9thodes psychom\u00e9triques utilis\u00e9es dans le cadre des \u00e9valuations des \u00e9l\u00e8ves \u00bb, Education et Formation n\u00b086-87. <\/em>
\n[3]Voir encore Rocher (Ibid.) ou pour une pr\u00e9sentation plus pr\u00e9cise du traitement de ces items dans PISA le PISA 2015 Technical Report (https:\/\/www.oecd.org\/pisa\/data\/2015-technical-report\/<\/span>), notamment les chapitres 9 et 12. <\/em>
\n[4] OCDE (2016), R\u00e9sultats du PISA 2015 (Volume I), L\u2019excellence et l\u2019\u00e9quit\u00e9 dans l\u2019\u00e9ducation. <\/em>
\n[5] Ibid. <\/em>
\n[6] Le SSP Lab est un centre de ressources et d’animation pour la recherche appliqu\u00e9e et le d\u00e9veloppement exp\u00e9rimental visant \u00e0 promouvoir l\u2019innovation et la nouveaut\u00e9 en mati\u00e8re de sources de donn\u00e9es, de technologies et de m\u00e9thodes de data science, relatives aux productions statistiques du syst\u00e8me de statistique publique (SSP).<\/em><\/p>\n","protected":false},"excerpt":{"rendered":"

Les premiers r\u00e9sultats de l\u2019\u00e9dition 2018 du Programme international pour le suivi des acquis des \u00e9l\u00e8ves (PISA) seront publi\u00e9s cette ann\u00e9e par l’Organisation de coop\u00e9ration et de d\u00e9veloppement \u00e9conomiques (OCDE). Si cette enqu\u00eate internationale a, au tout d\u00e9but, \u00e9t\u00e9 accueillie en France avec indiff\u00e9rence voire une certaine d\u00e9fiance, le \u00ab classement PISA \u00bb a depuis […]<\/p>\n","protected":false},"author":231,"featured_media":4127,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_et_pb_use_builder":"off","_et_pb_old_content":"","_et_gb_content_width":"","_exactmetrics_skip_tracking":false,"_exactmetrics_sitenote_active":false,"_exactmetrics_sitenote_note":"","_exactmetrics_sitenote_category":0,"footnotes":""},"categories":[185,206,133],"tags":[],"class_list":["post-4122","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-mesure-des-indicateurs-economiques","category-selection-2019-mai","category-themes","et-has-post-format-content","et_post_format-et-post-format-standard"],"_links":{"self":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts\/4122","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/users\/231"}],"replies":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=4122"}],"version-history":[{"count":0,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/posts\/4122\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=\/wp\/v2\/media\/4127"}],"wp:attachment":[{"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=4122"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=4122"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/variances.eu\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=4122"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}