New Running experiments in innovation and growth policy: What can we learn from recent experience?

Firpo, Teo and Phipps, James (2019) New Running experiments in innovation and growth policy: What can we learn from recent experience? fteval Journal for Research and Technology Policy Evaluation, 47. pp. 46-50. ISSN 1726-6629

[thumbnail of Journal_47_10.22163_fteval.2019.328.pdf]
Preview
Text
Journal_47_10.22163_fteval.2019.328.pdf

Download (142kB) | Preview

Abstract

Obwohl Experimente für die Politik im Allgemeinen nichts Neues sind (Oakley, 1998), werden sie erst seit kurzem in der Innovations- und Wachstumspolitik eingesetzt. Die Argumente für die Verwendung robuster Experimentiertechniken wie randomisierter kontrollierter Studien (RCTs) sind klar (Bravo-Biosca, 2016), und dennoch hat das Feld andere wie die Entwicklung oder die Ausbildung hinter sich gelassen (Dalziel, 2018). Die Zahl der Folgenabschätzungen, bei denen das RCT-Konzept in den Bereichen Innovation, Unternehmertum und Unternehmenswachstum zum Einsatz kommt, ist jedoch gestiegen. Die IGL-Datenbank, die versucht, alle RCTs in diesem Bereich zu sammeln, zählt derzeit 130 solcher Experimente, von denen mehr als zwei Drittel im letzten Jahrzehnt stattgefunden haben. Die IGL hat durch das IGL-Stipendienprogramm, das in den letzten fünf Jahren über 30 randomisierte Folgenabschätzungen in diesem Bereich finanzierte, eine Rolle bei diesem Wachstum gespielt und eine Reihe von Regierungsbehörden auf ihrem eigenen Weg zum Experimentieren unterstützt. Dieses Papier ist ein Versuch, die Ergebnisse dieser Experimentierwelle zusammenzufassen, wobei der Schwerpunkt auf innovationspolitisch relevanten Versuchen liegt. Dies geschieht im Kontext der Arbeit von IGL, wobei sowohl Lehren aus Experimenten gezogen werden, an denen unsere Organisation beteiligt war, als auch aus der Arbeit, die sie direkt mit Regierungsbehörden auf der ganzen Welt geleistet hat. Ziel ist es, einen ersten Einblick in die Lehren zu geben, die Entscheidungsträger und Forscher aus der Verwendung von Experimenten zur Bewertung der Innovations- und Wachstumspolitik ziehen können. Es ist in zwei Teile gegliedert. Der erste Abschnitt gibt einen Überblick über die jüngsten Experimente auf diesem Gebiet und liefert einen Bericht über die Beweise, die sie erbracht haben. In einem zweiten Abschnitt wird untersucht, was uns die jüngsten Erfahrungen über die Durchführung von Experimenten zum Testen von Interventionen in der Innovations- und Wachstumspolitik lehren können.

Abstract (english)

Although experimentation is not new to policy in general (Oakley, 1998), it has only recently started to be used in the field of innovation and growth policy. The case for using robust experimentation techniques, such as randomised controlled trials (RCTs), is clear (Bravo-Biosca, 2016), and yet the field has lagged others, such as development or education (Dalziel, 2018). Nevertheless, the number of impact evaluations using the RCT design in the field of innovation, entrepreneurship and business growth policy has grown. The IGL Database, which attempts to collect all RCTs in this field, currently counts 130 such experiments, of which over two thirds took place in the past decade. IGL has played a role in this growth, through the IGL grants programme, funding in the past five years over 30 randomised impact evaluations in this field, and also assisting a number of government agencies in their own journey to experimentation. This paper is an attempt to synthetize the findings from this wave of experimentation, with a focus on trials relevant to innovation policy. It does so in the context of IGL’s work, drawing lessons both from experiments our organisation has been involved with and the work it has done directly with government agencies around the world. It aims to provide a primer on the lessons that policymakers and researchers can draw on the use of experiments to evaluate innovation and growth policies. It is structured in two parts. The first section reviews recent experiments in this field and provides an account of the evidence that they have generated. A second section investigates what these recent experiences can teach us about the practice of running experiments to test interventions in innovation and growth policy.

Funders: fteval - Österreichische Plattform für Technologiepolitikevaluierung
Subjects: Policy, Fields & Systems Evaluation
Divisions: -- Other
Identification Number: 10.22163/fteval.2019.328
Date Deposited: 14 Jun 2019 10:01
URI: https://repository.fteval.at/id/eprint/414

Actions (login required)

View Item View Item