FAQ
logotypu Uniwersytetu Jagiellońskiego

Krytyczna analiza metody RCT w kontekście oceny efektywności polityk publicznych

Data publikacji: 16.06.2014

Zarządzanie Publiczne, 2014, Numer 1 (25), s. 15 - 28

https://doi.org/10.4467/20843968ZP.14.002.2175

Autorzy

Tomasz Dąbrowski
Instytut Kultury Uniwersytetu Jagiellońskiego
ul. prof. Stanisława Łojasiewicza 4, 30-348 Kraków, Polska
https://orcid.org/0000-0001-5376-7393 Orcid
Wszystkie publikacje autora →

Tytuły

Krytyczna analiza metody RCT w kontekście oceny efektywności polityk publicznych

Abstrakt

Critical analysis of research method based on RCT to evaluate effectiveness of public policies
The aim of this article is critical analysis of utilization of research method based on Randomized Controlled Trial to evaluate effectiveness of public policies. Due to the increase in importance of RCT method, resulting in more frequent elaborations presenting the recommended process of its implementation, this article represents an attempt which focuses more on describing the key issues related to utilization of the method and in particular: identity of the experimental group and the controlled group, selection bias, assigning individuals to groups, internal disruptions as well as the problem of utilizing devising the RCT method to evaluate multileveled policies.

Streszczenie
Celem niniejszego artykułu jest krytyczna analiza wykorzystania metody badań opartych na losowych grupach kontrolnych (Randomized Controlled Trial – RCT) do oceny efektywności polityk publicznych. Ze względu na rosnące znaczenie metody RCT, skutkujące coraz liczniej pojawiającymi się opracowaniami prezentującymi rekomendowany proces jej stosowania, w artykule skupiono się na przybliżeniu głównych problemów wiążących się z wykorzystaniem metody, w szczególności: tożsamości grupy eksperymentalnej i kontrolnej, obciążeń selekcyjnych, przydziału jednostek do grup, zakłóceń zewnętrznych oraz problemu wykorzystania RCT do oceny wielopoziomowych polityk.
 

Bibliografia

Bandiera O., Burgess R., Das N.C., Selim Gulesci S., Rasul I., Shams R. Sulaiman M. (2012), Asset Transfer Programme for the Ultra Poor: A Randomized Control Trial Evaluation, BRAC Centre, Bangladesh.

Barrera-Osorio F., Linden L.L. (2009), The Use and Misuse of Computers in Education: Evidence from a Randomized Controlled Trial of a Language Arts Program, http://www. povertyactionlab.org/publication/use-and-misuse-computers-education-evidence-ran- domized-controlled-trial-language-arts-pr (dostęp: 10.05.2013).

Bienias S., Sudak S. (red.) (2008), Proces ewaluacji polityki spójności w Polsce, Ministerstwo Rozwoju Regionalnego, Warszawa.

Bloom H.S. (2006), The Core Analytics of Randomized Experiments for Social Research, http://www.mdrc.org/sites/default/files/full_533.pdf (dostęp: 09.05.2013).

Brass C.T., Nuñez-Neto B., Williams E.D. (2006), Congress and Program Evaluation: An Overview of Randomized Controlled Trials (RCTs) and Related Issues, Congressional Research Service Library of Congress, Washington.

Cartwright N., Hardie J. (2012), Evidence-Based Policy: A Practical Guide to Doing It Better, Oxford Univerity Press, Oxford.

Duflo E., Glennerster R., Kremer M. (2006), Using Randomization in Development Economics Research: A Toolkit, National Bureau of Economic Research, Cambridge.

Ferraro P.J. (2009), Counterfactual Thinking and Impact Evaluation in Environmental Policy „New Directions for Evaluation”, special issue „Environmental program and policy evaluation”, M. Birnbaum, P. Mickwitz (eds.), (122), 75–84, Wiley Periodicals.

Górniak J., Worek B., Krupnik S. (2007), Zastosowanie podejścia badań jakościowych w ewaluacji ex-post [w:] A. Haber (red.), Ewaluacja ex-post. Teoria i praktyka badawcza, Polska Agencja Rozwoju Przedsiębiorczości, Warszawa.

Haber A. (red.) (2007), Ewaluacja ex-post. Teoria i praktyka badawcza, Polska Agencja Rozwoju Przedsiębiorczości, Warszawa.

Haynes L., Service O., Goldacre B., Torgerson D. (2012), Test, Learn, Adapt: Developing Public Policy with Randomised Controlled Trials, The Cabinet Office Behavioural Insights Team, London.

Head B. (2010), Evidence-based Policy: Principles and Requirements, „Strengthening Evidence-Based Policy in the Australian Federation”, Vol. 1: Proceeding, Roundtable Proceedings, Productivity Commission, Melbourne.

Huber M. (2011), Identification of Average Treatment Effects in Social Experiments under Alternative Forms of Attrition, „Journal of Educational and Behavioral Statistics”, Vol. 37(3), 443–474.

Hübner D. (2008), Foreword [w:] EVALSED: The Resource for the Evaluation of Socio-Economic Development, Office for Official Publications of the European Communities, Luxemburg.

Jackiewicz J., Czech P., Barcik J. (2010), Polityka transportowa na przykładzie aglomeracji śląskiej, „Zeszyty Naukowe Politechniki Śląskiej”, Seria Transport, z. 69, 53–62, Wydawnictwo Politechniki Śląskiej, Gliwice.

Jadad A.R. (1998), Randomised Controlled Trials. A Users’ Guide, BMJ Books, London.

Kaplan A. (2004), The Conduct of Inquiry: Methodology for Behavioral Science, Transaction Publishers, New Brunswick.

Kirkpatrick D.L. (2006), Evaluating Training Programs the Four Levels, Berrett-Koehler, San Francisco.

Komisja Europejska (2010), Ewaluacja – jakie stosować metody?, „Panorama Inforegio.Ewaluacja polityki spójności. Kierunki i wyniki”, Vol. 33, 18–19, Bruksela.

Lach D.E. (2011), Zasada równego dostępu do świadczeń opieki zdrowotnej, Lex Wolters Kluwer Business, Warszawa.

Ministerstwo Rozwoju Regionalnego (2013), Raport z wykonania ekspertyzy na temat źródeł danych wykorzystywanych do realizacji badań kontrfaktycznych w ramach ewaluacji EFS, Warszawa.

Mulgan G. (2011), Foreword [w:] A. Shillabee, T.F. Buss, D.M. Rousseau (ed.), Evidence- based Public Management: Practices, Issues, and Prospects, Shape Inc., New York.

Niżankowski R., Bała M., Broda M., Dubiel B., Hetnał M., Kawalec P., Łanda K., Plisko R., Podmokły A., Wcisło J., Wójtowicz E. (2002), Analiza efektywności, Uniwersyteckie Wydawnictwo Medyczne VESALIUS, Kraków.

Rosenbaum P.R. (2005), Observational Study [w:] Encyclopedia of Statistics in Behavioral Science, John Wiley & Sons, Hoboken N.J.

Olejniczak K. (red.) (2012), Organizacje uczące się. Model dla administracji publicznej, Wydawnictwo Naukowe Scholar, Warszawa.

Pylak K. (2009), Podręcznik ewaluacji efektów projektów infrastrukturalnych, Ministerstwo Rozwoju Regionalnego, Warszawa.

Spillane J.P., Pareja A.S., Dorner L., Barnes C., May H., Huff J., Camburn E. (2010), Mixing Methods in Randomized Controlled Trials (RCTs): Validation, Contextualization, Triangulation, and Control, Springer Science Business Media, http://www.sesp.north- western.edu/docs/publications/8689892294c2cf93a26468.pdf (dostęp: 9.05.2013).

Trzciński R. (2009), Wykorzystanie techniki propensity score matching w badaniach ewaluacyjnych, Polska Agencja Rozwoju Przedsiębiorczości, Warszawa.

Ustawa (2004), Ustawa z dnia 20 kwietnia 2004 r. o promocji zatrudnienia i instytucjach rynku pracy, t.j. Dz.U. 2008 Nr 69, poz. 415 z późn. zm.

Weber A. (2002), The Hawthorne Works, http://www.assemblymag.com/articles/88188-the- hawthorne-works (dostęp: 16.05.2013).

West S.G., Duan N., Pequegnat W., Gaist P., Des Jarlais D.C., Holtgrave D., Szapocznik J., Fishbein M., Rapkin B., Clatts M., Mullen P.D. (2008), Alternatives to the Randomized Controlled Trial, „American Journal of Public Health”, Vol. 98. No. 8, 1359–1366.

White H. (2013), An Introduction to the Use of Randomised Control Trials to Evaluate Development interventions, „Journal of Development Effectiveness”, 5(1), 30–49.

White H., Phillips D. (2012), Addressing Attribution of Cause and Effect in Small n Impact Evaluations: Towards an Integrated Framework, International Initiative for Impact Evaluation, New Delhi.

Informacje

Informacje: Zarządzanie Publiczne, 2014, Numer 1 (25), s. 15 - 28

Typ artykułu: Oryginalny artykuł naukowy

Tytuły:

Polski:

Krytyczna analiza metody RCT w kontekście oceny efektywności polityk publicznych

Angielski:

Critical analysis of research method based on RCT to evaluate effectiveness of public policies

Autorzy

https://orcid.org/0000-0001-5376-7393

Tomasz Dąbrowski
Instytut Kultury Uniwersytetu Jagiellońskiego
ul. prof. Stanisława Łojasiewicza 4, 30-348 Kraków, Polska
https://orcid.org/0000-0001-5376-7393 Orcid
Wszystkie publikacje autora →

Instytut Kultury Uniwersytetu Jagiellońskiego
ul. prof. Stanisława Łojasiewicza 4, 30-348 Kraków, Polska

Publikacja: 16.06.2014

Status artykułu: Otwarte __T_UNLOCK

Licencja: Żadna

Udział procentowy autorów:

Tomasz Dąbrowski (Autor) - 100%

Korekty artykułu:

-

Języki publikacji:

Polski