¿Se puede calcular el rendimiento de la inversión de un proyecto de investigación sobre políticas?  Pues bien, el think tank de Indonesia SurveyMETER y la Knowledge Sector Initiative han iniciado un proyecto de investigación sobre políticas que examina los servicios y la infraestructura al servicio de la población de edad avanzada de la municipalidad de Balikpapan de Indonesia. Esto es lo que hicimos y lo que aprendimos en el proceso. 

[Nota del editor: esta entrada fue escrito por Tanty Nurhayati Djafar, Oficial de programas de la Knowledge Sector Initiative; Wayan Suriastini, Directora de SurveyMETER; y Arnaldo Pellini, Investigador docente senior, Overseas Development Institute y director de aprendizaje de la Knowledge Sector Initiative.]

Primero, debemos señalar algunos descargos de responsabilidad

Es la primera vez que empleamos esta metodología y por ende es un experimento y estamos aprendiendo a medida que avanzamos (Infographic). 

Es importante recordar que el cálculo del rendimiento de la inversión es solo una pieza del rompecabezas que nos permite comprender el impacto y la contribución de las investigaciones. Los datos obtenidos sirven de complemento para otros trabajos de supervisión, evaluación y aprendizaje. En el caso de SurveyMETER, también realizamos un estudio con tres episodios con el objetivo de describir cómo las actividades de investigación y participación contribuyen a la toma de decisiones en materia de formulación de políticas en tres municipalidades de Indonesia.

No es posible calcular el rendimiento de la inversión de todos los proyectos de investigación sobre políticas. En este estudio de caso, el cambio en las políticas públicas hizo que el gobierno añadiera nuevas asignaciones presupuestarias dirigidas a calcular la inversión de las investigaciones. 

El proyecto de investigación sobre políticas y su impacto

La población de edad avanzada de Indonesia (mayor de 65 años) está en rápido crecimiento. Se espera que este grupo etario aumente de 18 millones (7,5 % de la población) en 2010 a 41 millones (14 % de la población) para el año 2030.  Si consideramos la rápida tasa de urbanización de Indonesia (2,6 % por año), el número de ciudadanos de la tercera edad que viven en zonas urbanas aumentará considerablemente. Algunas municipalidades y gobiernos locales han comenzado a examinar cómo pueden prepararse para hacer frente a este cambio. En 2013, Balikpapan, una municipalidad en el suroeste de Kalimantan, comenzó a trabajar con la colaboración de SurveyMETER para producir datos de investigación y analizarlos con el objetivo de comprender mejor en qué medida las municipalidades abordan la cuestión del acceso a los servicios e infraestructura que afectan a los ciudadanos de edad avanzada, y de establecer qué tipo de inversión hará falta para proporcionar a estos ciudadanos una mejor calidad de vida.

Durante 2013, SurveyMETER colaboró con el Centro de Estudios de la Tercera de Edad de la Universidad de Indonesia. En conjunto, estas organizaciones realizaron un estudio en 14 ciudades de Indonesia para evaluar en qué medida dichas ciudades estaban preparadas para soportar el aumento de la población de edad avanzada. Como resultado, la municipalidad asignó unos 8,5 millones de dólares estadounidenses para el período 2015-2020 con el objeto de financiar mejores servicios e infraestructura para este grupo etario.

Estimación del rendimiento de la inversión

Para evaluar el rendimiento de la inversión con la participación de SurveyMETER, empleamos una metodología de cinco pasos que ha sido elaborada por el Redstone Strategy Group. Redstone empleó esta metodología en 2013 con tres organizaciones de investigación sobre políticas que reciben apoyo de la Iniciativa Think Tank: Research on Poverty Alleviation (REPOA) en Tanzania, Fundación ARU en Bolivia y el Institute of Economic Affairs (IEA) de Ghana (ver ejemplos de este ejercicio para obtener más información).

Los pasos 1 – 4 son relativamente directos:

  1. Definir el problema de política pública: en este caso, el problema estaba relacionado con la población de la tercera edad y la necesidad de formular políticas y crear en la ciudad programas para prestar servicios e infraestructura que sean adecuados.
  2. Definir cómo la investigación contribuirá a abordar el problema: la investigación proporcionó una evaluación comparativa del nivel de preparación de 14 municipalidades.
  3. Definir el "beneficio" del cambio de las políticas: sobre la base de los datos disponibles, establecimos cuáles eran los beneficios de la consignación presupuestaria de la municipalidad dirigida a financiar los servicios y la infraestructura.
  4. Estimar el costo de las actividades de investigación y participación en la formulación de políticas: esto fue calculado por el equipo de finanzas de la investigación.

El paso 5 es el que se torna más complejo. Tuvimos que estimar los beneficios a partir de los cuales podíamos demostrar una contribución.

Tomamos las seis condiciones para formular un cambio de política (ver imagen) sugerido por el Redstone Strategy Group y examinamos las condiciones antes y después de que se llevara a cabo la investigación. Luego estimamos en qué medida la investigación contribuyó a los cambios. Idealmente, este proceso incluiría la participación de partes interesadas externas y del proyecto, pero como este fue un primer intento experimental, los participantes se limitaron a los integrantes del equipo del proyecto. 

Por supuesto, sin la participación de partes externas, es inevitable que exista algo de parcialidad. Creemos que pudimos haber subestimado la contribución en favor de otros factores externos.

En un principio, tuvimos dificultades para relacionar las seis condiciones al contexto de la participación en la formulación de políticas de SurveyMETER en Balikpapan. Un documento de trabajo que realmente nos ayudó a comprender las definiciones de las condiciones y facilitar el debate fue el documento titulado Assessing Advocacy by Barkhorn et al. (2013) 

La proporción es la comparación de cantidades similares; para estimar los beneficios de la investigación y la participación en la formulación de políticas públicas hace falta contar con un buen acceso a datos y disponer de apoyo financiero o monetario tanto para los beneficios como los costos. Nos llevó algo de tiempo recopilar los datos relativos a la asignación presupuestaria de la municipalidad de Balikpapan. Lo que aprendimos es que si se toma la decisión de usar el retorno de la inversión en un proyecto de investigación y formulación de políticas, es mejor comenzar a planificar la recopilación de datos en las primeras etapas del proyecto.

Como suele ser el caso, el compromiso asumido por la dirección del instituto constituye un factor clave para formar un equipo y proporcionarle el espacio y los recursos necesarios para probar (y aprender) esta y otras herramientas dirigidas a evaluar la influencia que ejercer la investigación y la participación en la formulación de políticas. Esto permitió que el equipo de SurveyMETER adquiriera más experiencia en los métodos de investigación cualitativa y de relato de historias que son relativamente nuevos para el equipo.

Region: 

Etiquetas