Improving the Evaluation of Rural Development Policy Pour une meilleure évaluation de la politique de développement rural Die Evaluation der Politik zur Entwicklung des ländlichen Raums verbessern

Improving the Evaluation of Rural Development Policy A previous EuroChoices (Vol. 7, No. 1) compared and contrasted approaches to rural development policy in the EU and US. This Special Issue focuses on the evaluation of these policies, drawing on a workshop held in June 2009 at OECD Conference Center in Paris. Evaluation is an activity that runs parallel with policymaking and is capable of contributing to effectiveness and efficiency at all stages. Evaluators, wherever they work and whatever aspect of rural development is their focus, face some common technical problems. These include multiple (and often ill‐defined) policy objectives, the choice of appropriate indicators (especially the need to distinguish between outputs and outcomes), how to establish baseline values, where to draw boundaries in terms of impact and time, and the identification of additionality and causality. Ensuring that lessons learned from evaluation are actually applied is problematic. Experiences covered in this Issue include the use of macro and case‐study approaches, and various schemes (investment in human and social capital, and agri‐environment and forestry). There is an inherent tension between using a common approach across countries and regions in the interests of comparability and the flexibility needed to capture all the relevant factors in the diverse situations in which rural development actions take place. Un précédent numéro de EuroChoices (Vol. 7, No. 1) comparait et mettait en regard les approches de l’Union européenne et des États‐Unis en terme de politique de développement rural. Ce numéro spécial est consacréà l’évaluation de la politique et tire parti d’un atelier qui s’est tenu en juin 2009 au Centre de Conférences de l’OCDE à Paris. L’évaluation va de pair avec l’élaboration des politiques et peut contribuer à améliorer l’efficacité et l’efficience à tous les stades. Quels que soient leur affiliation et l’aspect du développement rural sur lequel ils se concentrent, les évaluateurs sont confrontés à certains problèmes techniques communs. Il s’agit des objectifs multiples (et souvent mal définis) de la politique, du choix d’indicateurs pertinents (en particulier la nécessité de faire la différence entre produit et résultat), de la manière d’établir des valeurs de référence, de la fixation de limites en terme d’incidence et de durée, et de l’identification des effets additifs et de la causalité. Il est difficile de s’assurer que les leçons tirées des évaluations sont effectivement retenues. Les expériences rapportées dans ce numéro comprennent des approches macroéconomiques ou fondées sur des études de cas, et couvrent différents programmes (investissements dans le capital social et humain, mesures agroenvironnementales, mesures forestières). Il existe une tension évidente entre l’utilisation d’une approche commune entre chaque pays et région, qui vise la comparabilité, et la flexibilité qui permet de prendre en compte l’ensemble des différents facteurs des situations variées dans lesquelles les mesures de développement rural sont appliquées. In einer vorherigen Ausgabe von EuroChoices (7:1) wurden Herangehensweisen an die Politik zur Entwicklung des ländlichen Raums in der EU und in den USA verglichen und diskutiert. Diese Sonderausgabe beschäftigt sich auf der Grundlage eines Workshops, der im Juni 2009 am OECD‐Hauptsitz in Paris abgehalten wurde, mit Politikevaluation. Die Evaluation erfolgt parallel zur Politikgestaltung und kann in jeder Phase zur Steigerung von Wirksamkeit und Effizienz beitragen. Evaluatoren stehen einigen allgemeinen technischen Problemen gegenüber – ganz gleich, wo sie arbeiten und welchen Aspekten ländlicher Entwicklung sie sich widmen. Dazu zählen multiple (und oftmals unzureichend definierte) politische Ziele; die Auswahl von geeigneten Indikatoren (hier muss insbesondere zwischen Endprodukten und Ergebnissen unterschieden werden); die Frage, wie Ausgangswerte festzulegen und wo Grenzen im Hinblick auf Auswirkungen und den zeitlichen Rahmen zu setzen sind; sowie die Identifizierung von Additionalität und Kausalität. Es ist schwierig sicherzustellen, dass die Erkenntnisse aus der Evaluation auch umgesetzt werden. Die in dieser Ausgabe aufgegriffenen Erfahrungen berücksichtigen u.a. Makro‐ und Fallstudienansätze sowie verschiedene Maßnahmen (Investitionen in Human‐/Sozialkapital sowie Agrarumwelt und Forstwirtschaft). Es besteht eine grundsätzliche Spannung zwischen einer im Interesse der Vergleichbarkeit einheitlichen länder‐ und regionenübergreifenden Herangehensweise und einer Flexibilität bei der Erfassung aller relevanten Faktoren in den verschiedenen Situationen, in denen ländliche Entwicklung stattfindet.