PISA in Low and Middle Income Countries

This paper explores the participation of low- and middle-income countries in OECD’s Programme for International Student Assessment (PISA). It provides a detailed description of partner countries’ participation across PISA rounds and the challenges faced by low- and middle-income partner countries in effectively implementing and deriving policy value from PISA. Specific challenges are illustrated with examples from Tunisia and Kyrgyzstan. Many partner countries lag considerably behind OECD countries on various dimensions of social and economic development. Three OECD countries – Chile, Mexico, Turkey – also differ from higher-income OECD countries in regards to educational achievement and other indicators of social and economic development. After grouping countries based on income (GNI per capita), this paper shows that the cognitive performance of students in countries participating in PISA varies considerably not only between different country income groups but also within them. Analysis of PISA performance in relation to national wealth provides strong arguments for grouping countries according to their social and economic development when reflecting on challenges of participation and effective use of PISA. Lack of funding and governments’ fear of bad performance have been stated as potential deterrents to participation. Lack of institutional capacity and less relevant results due to a non-representative sample of 15 year-olds and clustering of students at low proficiency levels are discussed as main challenges for the effective use of PISA. The paper concludes with some considerations on how to improve the effective use of PISA results in these countries that may be particularly relevant in the context of the OECD’s recently launched initiative called PISA for Development. Ce document examine la participation des pays à revenu faible ou intermédiaire au Programme international de l’OCDE pour le suivi des acquis des élèves (PISA). Il étudie de façon détaillée la participation des pays partenaires aux différents cycles PISA et les enjeux rencontrés, notamment par les pays partenaires à revenu faible ou intermédiaire, pour mettre en oeuvre de façon efficace l’enquête PISA et en tirer les bénéfices escomptés en termes d’action publique. Ces enjeux spécifiques sont illustrés par des exemples tirés de l’expérience de la Tunisie et du Kirghizistan. De nombreux pays partenaires accusent un retard important par rapport aux pays de l’OCDE concernant différents indicateurs de développement économique et social. Trois pays de l’OCDE – le Chili, le Mexique et la Turquie – se distinguent également des pays de l’OCDE à revenu plus élevé de par leurs résultats éducatifs et d’autres indicateurs de développement économique et social. Après regroupement des pays sur la base de leur revenu (RNB par habitant), ce document montre que les performances cognitives des élèves des pays participant au PISA varient considérablement non seulement entre les différents groupes de pays regroupés par revenu, mais aussi au sein de ces derniers. L’étude de la relation entre la performance aux évaluations PISA et la richesse nationale apporte des arguments solides en faveur du regroupement des pays sur la base de leur développement économique et social lors de l’analyse des enjeux de la participation au PISA et de son utilisation efficace. Le manque de financement et la crainte des pays d’obtenir de mauvais résultats aux évaluations ont été identifiés comme des éléments pouvant dissuader les pays de participer au PISA. L’insuffisance des capacités institutionnelles et la moindre pertinence des résultats en raison de la non-représentativité de l’échantillon d’élèves de 15 ans et de la concentration des élèves aux faibles niveaux de performance sont examinés comme principaux obstacles à une utilisation efficace du PISA. Le document s’achève par une série de recommandations sur la façon d’améliorer l’efficacité de l’utilisation des résultats du PISA dans ces pays, recommandations qui pourraient s’avérer particulièrement pertinentes dans le cadre de l’initiative PISA pour le développement, lancée récemment par l’OCDE.