The limits of learning: Policy evaluation and the Ontario Ministry of Research and Innovation

Authors

  • Markus Sharaput


  • The author is assistant professor, Department of Politics and Public Administration, Ryerson University. He thanks David Wolfe and Neil Bradford for comments on an earlier draft of this paper, and his wife, Lee Tennier, for her ongoing support.

Abstract

This article reviews recent efforts by the Ontario Ministry of Research and Innovation (MRI) to measure and evaluate the success of its policies. It argues that these efforts have been inhibited by changes in the ministry's political context and the inherent complexity of the issues that innovation policies seek to address. The innovation strategy pursued by the ministry incorporates an element of mediated causality in its program logic, which complicates efforts to determine policy outcomes. When compounded by a changing normative context for judging success, this inherent complexity makes it very difficult to accurately determine and learn from the MRI's policy outcomes. The article concludes by suggesting a preliminary process of inquiry that might address some of these difficulties.

Sommaire

Cet article examine les initiatives prises récemment par le ministère de la Recherche et de l'Innovation de l'Ontario (MRI) pour mesurer et évaluer le succès de ses politiques. Il soutient que ces efforts ont été entravés à la fois par les changements dans le contexte politique du ministère et par la complexité inhérente des questions que les politiques d'innovation tentent de résoudre. La stratégie d'innovation suivie par le ministère comporte dans la logique de son programme un élément de causalité assistée qui complique les efforts déployés pour déterminer les résultats en matière de politique. Quand un contexte normatif changeant pour évaluer la réussite vient s'ajouter à cette complexité inhérente, il devient extrêmement difficile de déterminer avec exactitude les effets de la politique du MRI et donc d'en tirer par la suite des enseignements. L'article se termine en suggérant un processus d'enquête préliminaire qui pourrait régler certaines de ces difficultés.

Ancillary