Consorcio de Investigación Económica y Social (CIES)

Formato
Adobe Acrobat

Propensity Score Matching: Re- evaluando PROJoven


(Obtener documento)

María Cybele Burga Solís (CEDEP)


A partir de la década de los noventa, muchos de los programas sociales financiados por gobiernos latinoamericanos y por diversos organismos internacionales intervinieron no con proyectos o programas universales sino con programas focalizados; es decir, hubo una fuerte preocupación por la asignación eficiente de los recursos. A raíz de la restricción presupuestaria, no sólo se han empezado a realizar este tipo de intervenciones, sino también a evaluarlas en las distintas etapas de la ejecución.

En el Perú, las experiencias de capacitación para el trabajo se hacen cada vez más frecuentes, en parte, debido a la creciente preocupación en torno a los problemas de desempleo, subempleo y pobreza que afectan a grupos específicos, como por ejemplo, mujeres y jóvenes de hogares pobres. En la medida que muchos de estos programas funcionan con recursos públicos que podrían tener usos alternativos, se hace cada vez más importante conocer si las inversiones realizadas tienen los resultados esperados.

Uno de los proyectos más grandes y, hasta el momento, el que mejores resultados ha exhibido en términos económicos y el más eficaz en términos de cumplimiento de objetivos es el Programa de Capacitación Laboral Juvenil (PROJoven) del Ministerio de Trabajo y Promoción Social. Dicho programa tiene como objetivo fundamental incrementar la productividad y empleabilidad de los jóvenes pobres. Ha sido diseñado para garantizar no sólo la calidad técnica de los cursos de capacitación laboral, sino fundamentalmente su pertinencia, a través de la utilización de mecanismos guiados por la demanda (demand-driven), los que aseguran un adecuado encuentro entre las necesidades del sector productivo y la oferta de capacitación.

La magnitud del programa y la importancia de los objetivos que persigue constituyen la principal razón para que sea importante una estimación de sus beneficios. Ello permitiría una mejor toma de decisiones en cuanto a asignación de los fondos. Por otro lado, la disponibilidad de datos de corte transversal -tanto para el grupo de usuarios del programa como para el grupo de control- ofrece una oportunidad poco común para un estudio apropiado y completo del impacto de este tipo de programas.

Objetivos del Proyecto

¿Cuál es el impacto del programa sobre la probabilidad de encontrar el primer empleo? ¿Cuál es el efecto sobre ingresos laborales mensuales, horarios y horas trabajadas? Esta investigación pretende calcular el impacto real de PROJoven sobre el empleo y los ingresos. Para un análisis de costo-beneficio social completo sería necesario el acceso a información sobre los costos de implementación del programa, pero debido a la restricción de la información,,ello está fuera del alcance de este estudio.

PROJoven es una de las pocas experiencias que ha incorporado la práctica de evaluar los resultados de su trabajo. El Ministerio de Trabajo y Promoción Social ha realizado mediciones de base y de impacto. Sin embargo, pese all esfuerzo de incorporar técnicas modernas y rigurosas de análisis de impacto,, el que estas evaluaciones hayan sido realizadas por el propio equipo de trabajo de PROJoven, puede ser objeto de duda respecto a la neutralidad de sus conclusiones. Además, dichas evaluaciones estaban sujetas a limitaciones en la metodología y en cuanto a calidad y disponibilidad de datos.

El avance científico ha refinado las técnicas de evaluación a través de nuevos métodos estadísticos. Por ello, creemos pertinente la reevaluación del programa utilizando alguna de estas técnicas, pues permiten mejorar la precisión de los resultados. Por lo tanto, el objetivo principal de la investigación será constituir una mejora metodológica respecto a evaluaciones previas del programa. La metodología presentada nos permite obtener un cálculo del resultado que es más precisa en términos estadísticos, ya que se basa en una construcción muy rigurosa del grupo de control por medio del "propensity score".

Metodología

Como mencionamos anteriormente, un elemento fundamental para lograr nuestros objetivos es la estructuración de un grupo de control adecuado, utilizando la técnica del propensity score. Básicamente, la idea del propensity score consiste en reducir el problema de la multidimensionalidad de los vectores de características de los individuos que influyen en la afectación o no al tratamiento. El problema de calzar el vector de características para definir el grado de comparabilidad entre dos individuos, se reduce al calce (matching) de la probabilidad de que cada individuo participe en el programa (propensity score), que se trata de sólo un escalar. De este modo, se puede más fácilmente obtener el efecto promedio del tratamiento (de la participación en el programa) para los individuos afectos al mismo.

Una vez establecido el grupo de control adecuado, será posible la estimación del diferencial en ingresos y en la probabilidad de encontrar empleo para los individuos afectados. Para el cálculo de esta última probabilidad se plantea la utilización de un modelo de sobrevivencia.

Con estos pasos se cumple el primer objetivo del trabajo: realizar una estimación de los beneficios que habría generado el programa en variables de ingresos y empleo, la cual será más robusta en cuanto a la especificación econométrica escogida. Asimismo, las potenciales diferencias con las evaluaciones previas serán analizadas en términos de las diferencias metodológicas, es decir, de los supuestos y restricciones que cada tipo de estimación impone sobre los datos. Una vez realizados estos deslindes, se podrá tener una visión más completa y precisa de los verdaderos impactos del programa.

Adicionalmente, los resultados de la investigación permitirán potencialmente validar la implementación de una estrategia para la estimación de beneficios de programas sociales en general. La técnica utilizada permite la construcción de grupos de control adecuados estadísticamente, sin la necesidad de realizar asignaciones aleatorias. Los resultados del propensity score han sido validados como técnica cuasi-experimental por la literatura en cuanto a precisión con respecto a los resultados obtenidos por verdaderos experimentos aleatorios. Por este mismo motivo, la utilización de esta técnica permite la obtención de estimaciones suficientemente apropiados a un costo (de tiempo y monetario) menor.

Por último, con una re-estimación de los impactos del programa a través de un modelo de efectos fijos, se podrá tener un punto de referencia adicional, sobre la base de un modelo que controla por las características no observables de los individuos, pero que son constantes en el tiempo. Este método se basa en información del tipo panel; es decir, trabaja con información de tipo transversal y de series temporales

La investigación utilizará básicamente dos fuentes de información: para el grupo de beneficiarios o usuarios del programa se utilizarán los datos internos manejados por PROJoven, antes de ingresar al programa (línea de base) y después de culminado la fase de pasantías (línea de salida); para construir el grupo de control utilizaremos las bases de datos de las Encuestas Nacionales de Hogares (ENAHO) realizada por el INEI.