ارزیابی اثر در عمل ۲۰۱۱
Impact Evaluation in Practice 2011

این کتاب، مقدمه‌ای ساده و قابل‌فهم بر موضوع ارزیابی اثر و کاربرد آن در توسعه ارائه می‌دهد. اگرچه مخاطبان اصلی کتاب، متخصصان توسعه و سیاست‌گذارانی هستند که در پی طراحی ارزیابی‌های اثر آینده‌نگر هستند، اما معتقدیم این کتاب منبع ارزشمندی برای دانشجویان و سایر علاقه‌مندان به استفاده از ارزیابی اثر نیز خواهد بود. ارزیابی‌های اثر آینده‌نگر باید به‌صورت گزینشی برای ارزیابی این‌که آیا یک برنامه به نتایج مورد نظر خود دست یافته است یا خیر، یا برای آزمایش گزینه‌هایی برای دستیابی به آن نتایج، استفاده شوند. ما معتقدیم که ارزیابی اثر بیشتر و بهتر، به تقویت مبنای شواهد برای سیاست‌ها و برنامه‌های توسعه در سراسر جهان کمک خواهد کرد. اگر دولت‌ها و متخصصان توسعه بتوانند تصمیمات سیاستی را بر اساس شواهد – از جمله شواهد حاصل از ارزیابی اثر – اتخاذ کنند، امیدواریم که منابع توسعه به طور مؤثرتری هزینه شوند و در نهایت تأثیر بیشتری بر کاهش فقر و بهبود زندگی مردم داشته باشند.

این کتاب شامل سه فصل است که مقدمه‌ای غیرفنی بر ارزیابی‌های اثر ارائه می‌دهد، از جمله “چرا ارزیابی کنیم؟” در فصل 1، “چگونه ارزیابی کنیم؟” در فصل 2 و “چگونه ارزیابی‌های اثر را اجرا کنیم؟” در فصل 3. این موارد، “ابزارهای” اساسی مورد نیاز برای انجام موفقیت‌آمیز یک ارزیابی اثر هستند. از منظر روش‌شناختی، رویکرد ما به ارزیابی اثر عمدتاً عمل‌گرایانه است: ما فکر می‌کنیم که مناسب‌ترین روش‌ها باید متناسب با زمینه عملیاتی شناسایی شوند، نه برعکس. این امر بهتر است در ابتدای برنامه، از طریق طراحی ارزیابی اثر آینده‌نگر که می‌تواند در اجرای پروژه گنجانده شود، حاصل شود. ما استدلال می‌کنیم که کسب توافق بین ذینفعان کلیدی و شناسایی یک طرح ارزیابی که متناسب با زمینه سیاسی و عملیاتی باشد، به اندازه خود روش مهم است. ما همچنین قویاً معتقدیم که ارزیابی‌های اثر باید در مورد محدودیت‌ها و احتیاطات خود صریح باشند.

در نهایت، ما قویاً سیاست‌گذاران و مدیران برنامه را تشویق می‌کنیم که ارزیابی‌های اثر را در یک چارچوب منطقی در نظر بگیرند که به وضوح مسیرهای علّی را که برنامه از طریق آن‌ها برای تولید خروجی‌ها و تأثیرگذاری بر نتایج نهایی کار می‌کند، مشخص کند، و ارزیابی‌های اثر را با نظارت و رویکرد ارزیابی مکمل منتخب ترکیب کنند تا تصویر کاملی از عملکرد به دست آورند. این کتاب بر اساس مجموعه‌ای اصلی از مواد آموزشی توسعه‌یافته برای کارگاه‌های “تبدیل وعده‌ها به شواهد” که توسط دفتر اقتصاددان ارشد توسعه انسانی (HDNCE) با مشارکت واحدهای منطقه‌ای و گروه تحقیقات اقتصاد توسعه (DECRG) در بانک جهانی سازماندهی شده است، بنا شده است.

This book offers an accessible introduction to the topic of impact evaluation and its practice in development. While the book is geared principally towards development practitioners and policymakers designing prospective impact evaluations, we trust that it will be a valuable resource for students and others interested in using impact evaluation. Prospective impact evaluations should be used selectively to assess whether or not a program has achieved its intended results, or to test alternatives for achieving those results. We consider that more and better impact evaluation will help strengthen the evidence base for development policies and programs around the world. If governments and development practitioners can make policy decisions based on evidence – including evidence generated through impact evaluation – our hope is that development resources will be spent more effectively, and ultimately have a greater impact on reducing poverty and improving people’s lives. The three chapters in this handbook provide a non-technical introduction to impact evaluations, including “Why Evaluate” in Chapter 1, “How to Evaluate” in Chapter 2 and “How to Implement Impact Evaluations” in Chapter 3. These elements are the basic ‘tools’ needed in order to successfully carry out an impact evaluation. From a methodological standpoint our approach to impact evaluation is largely pragmatic: we think that the most appropriate methods should be identified to fit the operational context, and not the other way around. This is best achieved at the outset of the program, through the design of prospective impact evaluation that can be built into the project’s implementation. We argue that gaining consensus between key stakeholders and identifying an evaluation design that fits the political and operational context is as important as the method itself. We also believe strongly that impact evaluations should be upfront about their limitations and caveats. Finally, we strongly encourage policymakers and program managers to consider impact evaluations in a logical framework that clearly sets out the causal pathways by which the program works to produce outputs and influence final outcomes, and to combine impact evaluations with monitoring and selected complementary evaluation approach to gain a full picture of performance.This book builds on a core set of teaching materials developed for the “Turning Promises to Evidence” workshops organized by the office of the Chief Economist for Human Development (HDNCE) in partnership with regional units and the Development Economics Research Group (DECRG) at the World Bank.