La Evaluacin De Polticas Pblicas En Colombia: Una Mirada Crtica A Partir De Las

Prcticas Evaluativas Oficiales De Los Programas De La Red De Apoyo Social.

Jesus Andrs Palomino Pedrozo

2081921
Psicologa del Desarrollo

Universidad Industrial de Santander

Licenciatura en Matemticas

Bucaramanga, 23 de octubre de 2013

Andr-Nol Roth Deubel

La evaluacin de polticas pblicas en Colombia: una mirada crtica a partir de las prcticas
evaluativas oficiales de los programas de la Red de Apoyo Social
Publicado en la Revista del CLAD Reforma y Democracia. No. 45. (Oct. 2009).

A lo que Evaluaciones de Poltica Ciudadana se refiere, ha venido tomando una importancia

que va creciendo, Colombia no ha sido la excepcin de este fenmeno. Siempre se ha buscado
establecer la cultura de evaluacin que permita facilitar y conocer el desempeo en las
instituciones educativas, empresariales, familiares, etc., y los efectos sobre stas, y as mismo
buscar soluciones a las falencias que se puedan presentar en las llamadas poblaciones.
Tomando como preocupacin central el control de gasto pblico y su efectividad se han
venido generando estas evaluaciones. Herramientas y tcnicas que han sido generadas, por las
ciencias sociales y econmicas, con el fin de lograr realizaciones objetivas del gobierno. Las
evaluaciones de instituciones y de polticas pblicas contribuyen a la discusin de las
capacidades de las ciencias sociales con el fin de dar conocimientos tiles a la sociedad. Existe
la necesidad de romper la perspectiva cientfica dominante mientras se busque desarrollar una
prctica evaluativa eficaz y democrtica.
Cuando se habla de los tipos de evaluacin se encuentran cuatro generaciones de evaluaciones,
que desde otro punto de vista se deduce que son modificaciones o actualizaciones a la primera
generacin de sta. Hablando de la primera generacin de evaluaciones, centrada en los
individuos y los sujetos centrales de la evaluacin. Esta nace con la necesidad en la educacin
de medir el intelecto o grado de aprendizaje y la eficiencia de los mtodos de enseanza. sta
se lleva a cabo con pruebas de memoria.
Existen dos factores que llevan al desarrollo de perspectivas de tipo sicomtricas,
sociomtricas, y economtricas, este primer factor de desarrollo se da en una ciencia social la
cual se basa en los mismos aspectos que la ciencia fsica y qumica. El segundo factor de
desarrollo, que emergen a partir de un movimiento de trabajo humano, que est basado en la
necesidad de eficiencia y efectividad en la produccin industrial y comercial.
Un gran ejemplo de evaluacin de primera generacin en la educacin Colombiana son las
pruebas ICFES para la obtencin de ttulo bachiller, y el ECAES para la finalizacin de
estudios profesionales, actualmente llamados prueba SABER y prueba SABER-PRO
respectivamente, ambas basadas en la clasificacin y medicin intelectual.

La segunda generacin que nace en el mbito escolar, con la consideracin de revisar adaptar
los currculos a las nuevas realidades cientficas, sociales y econmicas, proponiendo metas u
objetivos para hacer la evaluacin ms fcil. Roth (2009) lo menciona en su artculo:
Para ello, era evidente que los datos existentes no servan para estos objetivos. La
preocupacin por saber si los nuevos currculos permitan alcanzar los propsitos de
formacin llevaron a considerar estos propsitos como objetivos. Cmo saber si los
estudiantes asimilaban lo que los profesores intentaban ensear?
En busca de la solucin a esta problemtica, Ralph Tyler, miembro de la Oficina para la
Investigacin Educativa del Estado de Ohio, crea la evaluacin de programa, sta tuvo gran
aceptacin en el mbito institucional. Este tipo de evaluacin es considerada por Guba y
Lincoln (1989: 27-28) como descriptiva, debido a que el papel del evaluador se enfocaba en la
descripcin de fortalezas y debilidades en relacin con el logro de ciertos objetivos. Desde ese
momento, la medicin ya no poda ser asimilada a la evaluacin, sino que apareci como una
de las herramientas disponibles. La publicacin en 1949 de su informe hizo a Tyler (1949)
famoso y fue reconocido como el padre de la evaluacin.
Aunque en los Estados Unidos este tipo de evaluacin no fue muy eficaz, puesto que se
esperaba que ofreciera elementos de juicio y que comparara objetos estndares fueras del
programa.
Pasando a la tercera generacin, el evaluador empieza a ejercer un papel ms de juez que de
medidor y descriptor. Roth (2009) Eso implica que es necesario considerar tambin los
objetivos como problemticos y, por lo tanto, susceptibles de ser juzgados en relacin con
unos estndares externos al mismo programa: una evaluacin descriptiva de objetivos puede
mostrar que se logran de manera perfecta los objetivos, pero es muda en cuanto a la
pertinencia de los objetivos perseguidos. Introducir elementos valorativos en una empresa
cientfica, por naturaleza considerada como libre de valores (value free), era inaceptable para
evaluadores apegados a una perspectiva cientfica tradicional. A pesar de la reticencia de los
evaluadores, muchos terminaron aceptando este rol, ya que, entre todos los otros jueces
posibles, se consideraron como los que seran probablemente los ms objetivos. A final de
cuentas, la necesidad de juicio no pudo ser ignorada y aceptaron el reto.

Resumiendo un poco, la primera generacin recolectaba datos relativos a los individuos, la

segunda generacin se bas en objetivos de evaluacin, la tercera generacin empez a usar el
juicio a los objetivos por medio de criterios intrnsecos y extrnsecos. Todas las tres
generaciones presentaban sus falencias, en vista de esto se crea o se inicia una cuarta
generacin de evaluacin que segn Guba y Lincoln (1989: 31-32), permanecen en las
prcticas evaluativas de las tres generaciones desarrolladas anteriormente. En particular, se
trata de la fuerte tendencia al managerialismo, la difcil o imposible tenida en cuenta del
pluralismo de los valores y la tendencia a privilegiar el paradigma de investigacin cientfica
tradicional.
Esas debilidades que esta cuarta generacin busca suplir, hacen referencia a la relacin
evaluacin y evaluador, siendo el evaluador quien dispone de la orientacin del contenido y
forma de evaluacin. Otra debilidad es el desequilibrio de poder para facilitar las actitudes por
parte del evaluador en el programa. Era demasiado cerrado a los objetivos y no vean campos
de aplicacin para estos objetivos.
Roth comenta a la cuarta generacin de la siguiente manera, La evaluacin de cuarta
generacin, propuesta por Guba y Lincoln (1989: 38), y llamada por ellos responsive
constructivist evaluation, o evaluacin constructivista no focalizada (ECNF), se considera una
perspectiva alternativa a las tres anteriores, permitiendo superar las debilidades sealadas.
Esta cuarta generacin es llamada tambin evaluacin pluralista (Monnier, 1992). En esta
generacin al evaluador se le ve ms como un director que investigador, siendo la evaluacin
redefinida como actividad practica, deliberativa y situada, no aporta la verdad universal, solo
da una muestra que conlleva a una construccin para generacin de cambios institucionales.
En cuanto a estas actividades evaluativas en Colombia, que empiezan a tener su lugar en los
aos 90, instalandose como una prctica relativamente habiltual. Las ONG, las organizaciones
internacionales como las instituciones pblicas han llevado a cabo numerosas experiencias de
evaluaciones en el pas, Roth (2009).

En Colombia se encuentran la Contralora General de la Repblica como ente de control, sta

ha iniciado estudios sectoriales para mejorar los insumos en estas polticas. Dichos estudios
son de tipo descriptivo, toman del problema la descripcin, evolucin y lo referente al marco
institucional y operante. Por otro lado la Defensora del Pueblo hace su trabajo por medio de
Informes Defensoriales, que basan sus documentos evaluativos en visitas de campo,
entrevistas, etc.
Hasta marzo de 2009, el DNP ha publicado los resultados de este proceso a travs de ocho
nmeros de su serie Evaluacin de Polticas Pblicas. (Roth 2009)
Evaluacin
1. Programa Familias en
Accin: Condiciones
iniciales de los beneficiarios

Evaluadores
Unin temporal Institute of
Fiscal Studies - Econometra Sistemas Especializados de

e impactos preliminares
(marzo 2004).
2. Programa Empleo en
Accin. Condiciones
iniciales de los beneficiarios

Unin temporal Institute of

Fiscal Studies - Econometra Sistemas Especializados de

Cuasi-experimental
(comparacin entre
grupo beneficiario y
grupo de control).

Conceptualizacin y

focalizadas de la Direccin de

evaluacin de impacto

Evaluacin de Polticas Pblicas

(noviembre 2004).

del DNP.

4. Programa Familias en

Unin Temporal Institute of

Fiscal Studies - Econometra Sistemas Especializados de

de su ejecucin (mayo
2006).

grupo beneficiario y

Informacin S.A.
Grupo de evaluaciones

Programa a un ao y medio

(comparacin entre

Informacin S.A.

3. Red de Apoyo Social:

Accin: Impacto del

Cuasi-experimental

grupo de control).

e impactos a corto plazo

(octubre 2004).

Metodologa

Cuasi-experimental.

Cuasi-experimental
(comparacin entre
grupo beneficiario y
grupo de control).

Informacin S.A.

5. Programa Empleo en

Unin temporal Institute of

Accin: Impacto del

Fiscal Studies - Econometra -

Programa sobre los

Sistemas Especializados de

beneficiarios y sus familias

Cuasi-experimental
(comparacin entre
grupo beneficiario y
grupo de control).

Informacin S.A.

(enero 2008)
6. Programas Familias en
Accin: Impactos en capital
humano y evaluacin

Unin temporal Institute of

Fiscal Studies - Econometra Sistemas Especializados de

beneficio-costo del

Cuasi-experimental
(comparacin entre
grupo beneficiario y
grupo de control).

Informacin S.A.
Programa (febrero 2008).
7. Programa de Vivienda de

Centro de Estudios Regionales Cuasi-experimental

Inters Social Urbano:

Cafeteros y Empresariales.

(comparacin entre

Impactos en la calidad de

grupo beneficiario y

vida y evaluacin del

grupo de control).

proceso de focalizacin
(2007).
8. Evaluacin de impacto
del Fondo Colombiano de
Modernizacin y Desarrollo
Tecnolgico de las Micro,
Pequeas

Medianas

Empresas - FOMIPYME

Econometra S.A.

Aplicacin de
encuestas
(cuantitativas) a una
muestra de
operadores del
programa entre 2001
y 2004.

(octubre 2008).
Tomado del artculo.
Con respecto al cuadro anterior Roth explica, como consta en el Cuadro 1, la mayora de las
evaluaciones contratadas por el DNP fueron con la misma empresa, conformada por el
Institute of Fiscal Studies, IFS (un instituto de investigacin ingls especializado en el anlisis
de las polticas sociales y econmicas a partir de tcnicas microeconmicas), Econometra

(una empresa de consultora privada colombiana especializada en estudios econmicos) y otra

empresa de consultora nacional especializada en la recoleccin y tratamientos de datos. A
nivel metodolgico, los evaluadores han usado siempre la misma metodologa cuasi
experimental longitudinal (antes-despus), que compara la situacin de un grupo de
beneficiarios con un grupo de control en distintos momentos. Las dos evaluaciones que fueron
realizadas por otros evaluadores usaron una metodologa similar. Como se nota, esta
concepcin de la evaluacin se sita plenamente en la perspectiva cientfica tradicional
(tercera generacin).
Basndose en todo esto se tiene como conclusin que las evaluaciones son una gran
herramienta a la hora de tomar decisiones, de encontrar debilidades que deben ser suplidas,
Roth afirma que parece ser que son los evaluadores quienes integran y legitiman en sus
comentarios y recomendaciones las decisiones ya tomadas!