Evaluación de impacto ex ante de proyectos de investigación caso: proyectos financiados por Colciencias en malaria en el programa de ciencia y tecnología de la salud

Abstract

¿Cómo medir el impacto de la inversión en proyectos de investigación y desarrollo? y ¿Cómo podemos evaluar, en forma ex ante, los efectos de una política pública de financiamiento a la investigación? Este problema tiene gran importancia para los formuladores de políticas públicas y para los tomadores de decisiones que quieren basar sus decisiones en evidencias sólidas. El tema se ha tratado habitualmente con la evaluación por proyecto pero rara vez se han estudiado los efectos de las políticas públicas sobre la investigación de forma integrada y teniendo en cuenta la naturaleza del proceso de generación de conocimiento. En este orden de ideas, se propone un análisis basado en series de tiempo que considera que el proceso de generación de conocimiento es acumulativo y caracterizado por efectos de largo plazo, resultantes de la financiación de proyectos de investigación. También, se diseña un modelo basado en agentes que permite establecer las relaciones dinámicas entre los investigadores y los grupos de investigación en el desarrollo de una investigación y sus efectos sobre la producción académica y científica. Adicionalmente, se desarrolla el estudio de caso de los proyectos financiados por Colciencias en malaria en Colombia, con el fin de validar los modelos de evaluación de impacto ex ante desarrollados. En esta tesis se presentan varios ejemplos para ilustrar los métodos descritos y se realizan diversas simulaciones que evidencian que las políticas de financiamiento sí tienen impactos duraderos sobre la producción científica y que demuestran que el proceso de investigación se puede modelar a través de un proceso estocástico. También se pudo comprobar la existencia de un cambio estructural en el sistema de investigación en Colombia, a partir del año 2012, lo cual coincide con la implementación del Sistema General de Regalías. Se espera que las aproximaciones metodológicas aquí presentadas lleguen a ser una herramienta básica para la evaluación de políticas públicas y para la evaluación de impacto ex ante de la financiación de la investigación.

Abstract. How do we measure the impact of investment on research and development projects? And how can we assess the effects of a public research funding policy ? This problem is of great importance to policymakers and decision makers who want to base their decisions on sound evidence. The subject has usually been dealt with through the evaluation of individual projects, but the effects of public policies on research have rarely been studied in an integrated manner, taking into account the nature of the knowledge generation process. In this order of ideas, we propose a time series analysis methodology that takes into account that the process of knowledge generation is a cumulative one and characterized by long term effects resulting from investments in research projects. In addition, an agent-based model is designed with the purpose of establishing the dynamic relationships between the different participants in the research process and its effects on academic and scientific production. Moreover, to illustrate and validate the use of the impact assessment methodologies being proposed, a case study of the Colciencias-funded projects in Malaria was conducted. In this thesis several examples are presented to illustrate the methods described and several simulations are performed that support the idea that research funding policies do have long lasting impacts on scientific production. They also show that the research process can be adequately modeled through a stochastic process. In addition, the existence of a structural change in the structure of the National Research System was demonstrated, starting in 2012, a moment that coincides with the implementation of the General Royalty System. It is the author’s hope that the methodological approaches presented here could become part of the basic toolbox for public policy evaluation and for the ex ante evaluation of the impact of research funding.