TEMA 1.

Introduccin al concepto de
evaluacin en
las Ciencias Sociales
Aplicadas.
Asignatura Evaluacin de Programas Sociales
Mster en Intervencin Social en las Sociedades de Conocimiento
Profesor Antonio lvarez Benavides

Esquema
1.

Introduccin.

2.

Perspectiva Histrica de la Evaluacin.

3.

La Evaluacin de Polticas y Programas: El Concepto de evaluacin

y objetivos.

4.

La Evaluacin de Polticas Pblicas y su institucionalizacin en

Espaa.

1. Introduccin

 Primer objetivo de la evaluacin: conocer si se hace un buen uso

de los fondos pblicos escasos y si las medidas adoptadas por los
mismos responden a las necesidades e intereses de los ciudadanos.

Sociedad

cambiante, transformacin de las identidades, necesidades y

demandas.
Paradoja de la crisis del Estado de bienestar. Aumentan las necesidades
y las demandas, disminucin de los recursos.

Segn

la Agencia Espaola de Evaluacin y Calidad: el proceso

sistmico de observacin, medida, anlisis e interpretacin encaminado
al conocimiento de una intervencin pblica, sea esta una norma,
programa, plan o poltica, para alcanzar un juicio valorativo basado en
evidencias, respecto de su diseo, puesta en prctica, efectos,
resultados e impactos. La finalidad de la evaluacin es ser til a los
4
decisores y gestores pblicos y a la ciudadana.

 Caractersticas de la evaluacin:
Multidisciplinaridad. Sociologa, Economa, Ciencia Polticas, etc.
Multiplicidad de tcnicas. Cualitativas, cuantitativas, participativas.
Busca

profundizar en el conocimiento de las Polticas Pblicas

implementadas por el Estado.

Para algunos autores es siempre la ltima fase de toda investigacin.

2. Perspectiva histrica de la evaluacin.

Precedentes de la evaluacin en Espaa.

La evaluacin desde el punto de vista del control del gasto.

o El Tribunal de cuentas: fiscaliza las cuentas del Estado y se coordina con
las CC.AA.
o Intervencin General del Estado: ejerce el control financiero de los
programas de gasto a travs del seguimiento de la ejecucin
presupuestaria y la verificacin del cumplimiento de los objetivos.

Evaluacin y calidad de los servicios

o

Direccin General de Inspeccin, Evaluacin y Calidad de los Servicios,

del Ministerio de Administraciones Pblicas: anlisis del impacto
regulatorio de las polticas pblicas.
6

 La inspeccin de los servicios.

o Inspeccin General de Servicios de la Administracin Pblica:

se
caracterizan por una cierta heterogeneidad en sus acciones, desde el
puro control del cumplimiento de las normas hasta la evaluacin de la
eficacia y la calidad de los servicios prestados, el seguimiento de
objetivos y el control de riesgos.

Experiencias sectoriales en Evaluacin.

o Educacin. ANNECA (Agencia Nacional de Evaluacin de la Calidad y

Acreditacin) y el INECSE (Instituto Nacional de Evaluacin y Calidad

del Sistema Educativo).
o Sanidad. Agencia de Calidad del Sistema Nacional de Salud.
o Empleo y cooperacin internacional al desarrollo. Subdireccin General
de Planificacin y Evaluacin de Polticas de Desarrollo.
7

Carencias de los sistemas de Evaluacin en Espaa.

Falta de homogeneidad: se parte de supuestos conceptuales muy diversos,

desde instancias organizativas muy heterogneas, y ello hace que el resultado

final sea disperso y desestructurado

Falta de aprendizaje: no se producen todos los efectos positivos sobre el

funcionamiento de las administraciones pblicas que podran generarse, ni
tampoco una capacidad suficiente de aprendizaje de las mismas para la
retroalimentacin en el proceso de decisin

Falta de impacto: esta situacin limita el necesario desarrollo de

evaluaciones de impacto de las polticas pblicas

Falta de transparencia: no es suficientemente visible para el conjunto de la

ciudadana, desdibujndose la funcin de rendir cuentas a la sociedad, que es

una de las funciones esenciales en la estructura de legitimidad de las
sociedades democrticas
8

Motivos para la creacin de una Agencia Nacional de Evaluacin.

Labor cultural, formativa y de comunicacin para la socializacin de la

evaluacin.

Compartir esfuerzos en el desarrollo de un marco metodolgico,

consensuar un bloque mnimo de criterios de valor y mejorar los sistemas de

informacin para la evaluacin.

Intercambiar experiencias sectoriales.

Desarrollar evaluaciones de polticas, ms all de la evaluacin de

proyectos o programas, con especial referencia a las polticas transversales

caracterizadas por afectar a varios sectores.

Potenciar los efectos y resultados de las evaluaciones, incluyendo el

anlisis del impacto de los indicadores.

Impulsar la relacin con organismos internacionales relacionados con la

evaluacin y su metodologa.

Creacin de la Agencia Estatal de Evaluacin de la Calidad de los

Servicios y de las Polticas Publicas.

En 2004 se crea un comisin de Expertos.

Se analiza la experiencia internacional: diversidad de modelos e inexistencia
de un modelo ideal.

Paso lgico de la evolucin del Estado y de las distintas Admos. Nuevas

exigencias ciudadanas: cambios en los modelos de control y evaluacin.

En 2006 se aprueba una ley Agencias estatales para la mejora de los

servicios pblicos.

Nuevo modelo de gestin pblica en lnea con los principios de gobernanza de

la Unin Europea: Responsabilidad, Eficiencia, Participacin, Apertura,
Coherencia.

10
En 2007 se crea la Agencia Estatal de Evaluacin de las Polticas Pblicas

y la Calidad de los Servicios.

Misin de la Agencia Estatal de Evaluacin de la Calidad de los

Servicios y de las Polticas Publicas.

Contribuir a la mejora de los resultados de las polticas pblicas y de la

calidad de los servicios, impulsando un compromiso amplio de las
administraciones pblicas en el fomento de las prcticas y la cultura de la
evaluacin.

Facilitar la incorporacin a dicho compromiso de forma cooperativa a la

pluralidad de actores e instituciones pblicas sectoriales y territoriales que

protagonizan la gestin y evaluacin de polticas y servicios, a travs de la
articulacin de un Sistema Pblico de Evaluacin.

Propiciar la incorporacin de la poltica de evaluacin en un lugar destacado

de la agenda de las instituciones.

Favorecer la transparencia en la informacin respecto de las decisiones del

sector pblico y la participacin de los actores sociales interesados en los
resultados de las polticas pblicas y sus diversos impactos.

11

 Contribuir a la mejora en el procedimiento de elaboracin y decisin

normativas, a travs de la aplicacin de evaluaciones de impacto normativo.

Desarrollar evaluaciones de polticas pblicas transversales y de mayor

impacto social que le demanden.

Propiciar un nuevo contrato con los ciudadanos por la calidad de los

servicios pblicos.

Favorecer el compromiso tico y la tica institucional.

12

3. La evaluacin de Polticas y Programas: el

concepto de evaluacin y objetivos

Definiciones de Evaluacin.

De una manera general la evaluacin es la ltima fase del anlisis de una

poltica.

Parte del ciclo de las polticas para general informacin sobre los resultados
de la accin de los gobiernos y los efectos de sus polticas.

El concepto de evaluacin ha evolucionado.

o Primeras etapas: consistan en identificar y medir los efectos y

resultados de una accin a travs de metodologas cuantitativas.

o Actualidad: sus lmites se extienden a todo el ciclo de la vida poltica,

a los procedimientos, a la metodologa utilizada, incorporando
metodologas cualitativas y participativas.

13

La evaluacin como actividad intelectual y cientfica.

Elaboracin de criterios de vala sobre los que juzgar las intervenciones

pblicas y unas nomas o estndares que indique el mrito de la intervencin.

Se deben aplicar procedimientos rigurosos.

Tiene que tener un orden lgico. El ciclo de la evaluacin.

14

Objetivos de la Evaluacin.

Fin ltimo: ofrecer informacin til que facilite el proceso de toma de

decisiones y mejorar la accin de los poderes pblicos a travs de los
programas y polticas pblicas.

Las tres grandes funciones de la evaluacin.

Mejora o perfeccionamiento. Mejorar la eficacia y eficiencia de los

programas (capacidad de modificar la planificacin). Necesidad de dar
respuesta a las necesidades. Va dirigida a los profesionales y est
condicionada por la rapidez de procedimiento.

Recapitulacin o rendimiento de cuentas. Facilitar informacin a los

responsables sobre la continuidad o no de los proyectos, la asignacin de
recursos o la modificacin del programa. Se informa sobre la delegacin de
poder como precepto democrtico.

15

Ejemplicacin o mejora del conocimiento para programas futuros.

4. La Evaluacin de Polticas Pblicas y

su institucionalizacin en Espaa

La evaluacin es uno de los elemento claves de la nueva gobernanza, capaz

de ofrecer una respuesta positiva a la necesidad de racionalizar el uso de los
recursos pblicos y mejorar la calidad del gasto, respondiendo simultneamente
a los retos de la ciudadana y de calidad democrtica de nuestras sociedades.

La institucionalizacin de la evaluacin es el proceso poltico por el que se

legitima un marco normativo adecuado para el desarrollo de la funcin de la
evaluacin, a partir de la estructuracin de espacios e instancias de la
administraciones a las que encargar tal funcin, ubicndolos en los distintos
niveles de gobierno y segn las distintas actividades o sectores a evaluar.

16

4.1 Perspectivas de la evaluacin.

Evolucin de la evaluacin.

1.

Aos 60. Estudios de polticas pblicas en EEUU bajo criterios de medicin

y cuantificacin de resultados de la gestin pblica para uso de los
gestores.

2.

Aos 70. Evaluacin como descripcin de los programas pblicos puestos

en marcha. Carcter interno.

3.

Aos 80. Juicio sobre las polticas y programas centrndose en los

objetivos y el impacto social tras la intervencin. Parlamentos.

4.

Finales 80. Evaluacin como el mtodo de investigacin sistemtica sobre

la configuracin de un programa o poltica, y sobre su implantacin y
efectividad, para mejorar el conocimiento de los mismos por la
Administracin pero tambin por la opinin pblica.
17

5.

En los pases europeos empieza a implantarse a finales de los 80 para

controlar la administracin de los Fondos Estructurales de la Comunidad
Europea.

6.

En los 90 empieza a relacionarse la evaluacin con el debate sobre los

nuevos valores e intereses de los distintos actores sociales.

7.

La metodologas de evaluacin evolucionan al mismo ritmo que el concepto

y los objetivos de la evaluacin.

8.

A da de hoy sigue siendo una asignatura pendiente por parte de las

administraciones pblicas.

18

4.2. La nueva gestin pblica, gobernanza y

evaluacin.

Retos de la nueva gestin pblica:

Cmo abordar desde la esfera pblica la intervencin del estado en la

sociedad y cmo maximizar el inters pblico en la relacin EstadoMercado.

Cmo abordar las demandas sociales de mayor calidad de vida,

extendiendo los contenidos y la calidad de los servicios pblicos y
adaptadlos a los retos demogrficos y de esperanza de vida.

Cmo impulsar una mayor calidad democrtica y mejores pautas de

gobernabilidad, con participacin de mltiple actores y con una demanda
cada vez mayor de participacin y de control por parte del ciudadano,
tanto a nivel nacional como internacional.

19

4.3. Sociedad del conocimiento y multiplicidad

de actores interesados en la evaluacin.

Sociedad de conocimiento:

Aumento exponencial de la informacin que hace difcil su gestin y

que ofrece a los ciudadanos ms capacidad de demanda.

Multiplicacin del
conocimiento cientfico, la evaluacin como
mecanismo estratgico de coordinacin de tcnicos y disciplinas.

Parteneriado pblico-privado en la gestin de lo pblico y en la evaluacin.

Multiplicacin de los actores y de los centros de poder.

20

Conclusiones
Principios de la evaluacin:
La evaluacin es algo ms que una herramienta terica para analizar
y conocer si las polticas pblicas, en general, y los programas sociales,
en particular dan respuesta a las demandas de la ciudadana.

La

evaluacin busca emplear los resultados obtenidos, es decir, ir

ms all del anlisis terico para conseguir una aplicacin sistemtica de
las distintas Ciencias.

Su

finalidad ltima ser mejorar el servicio a la sociedad con una

mayor eficacia del sector pblico y el perfeccionamiento de la calidad
democrtica.

Es

necesario diferenciar entre Evaluacin y otros conceptos tales

como auditora financiera, control interno, control presupuestario o
21
auditora de gestin.

La evaluacin es un concepto variable, polivalente y dinmico que se

ha ido modificando en funcin de la propia evolucin de la disciplina y de
las experiencias evaluadoras, as como de los diversos enfoques
profesionales y sus usos.

Evaluar

implica emitir juicios de valor basados en evidencias y

criterios referenciales, y que no cabra sustituir por una mera descripcin
o medicin.

Se

promueve su utilizacin como herramienta estratgica y

prospectiva y no slo operativa y retrospectiva como en ocasiones se
vino considerando en el pasado.

La evaluacin es una herramienta generadora de confianza y garanta

en la gestin de lo pblico y, al mismo tiempo, es un instrumento de buen
gobierno, de mejora continua de la gestin pblica, as como de las
22
polticas y servicios a los ciudadanos.