Evaluacin del impacto social de proyectos de Investigacin y Desarrollo tecnolgico (I+D): Una aplicacin en el sector de las comunicaciones industriales

D. MOUX G. ALEIXANDRE F.J. GMEZ S. CCERES L.J. MIGUEL E. VELASCO

MESA 6

Este trabajo presenta a modo de caso de estudio, la evaluacin de impacto social (EIS) de un Proyecto Integrado financiado por la Comisin Europea bajo el amparo del Sexto Programa Marco (6PM). Se trata de un proyecto de I+D de grandes dimensiones que todava se encuentra en fase de ejecucin, denominado Virtual Automation Network (VAN, red de automatizacin virtual). El objetivo del proyecto VAN consiste en la mejora de las comunicaciones industriales a partir de la promocin del uso intensivo de las Tecnologas de la Informacin y de las Telecomunicaciones (TIC). Las caractersticas del proyecto de cuatro aos de duracin y el compromiso mostrado por los participantes, ha permitido la constitucin de un equipo de trabajo dedicado ntegramente a la evaluacin del impacto social. Este equipo parte de una concepcin interdisciplinar de los procesos de evaluacin y, consecuentemente, est constituido por profesionales de distintas vinculaciones disciplinares: economistas, socilogos e ingenieros. El proceso de evaluacin del proyecto ha empleado hasta el momento una metodologa de listas de control similar a las utilizadas en los procesos de seleccin de proyectos. Tambin se ha realizado una adaptacin de la metodologa Delphi. El primer resultado del proceso evaluativo ha sido la elaboracin de un conjunto de recomendaciones prcticas dirigidas a realimentar el proceso de toma de decisiones y asegurar un impacto socioeconmico positivo de los resultados del proyecto VAN.

1. Introduccin
En la actualidad las actividades de Investigacin y Desarrollo Tecnolgico (I+D) e innovacin se caracterizan por una creciente relevancia de la sociedad como agente involucrado en el cambio tecnolgico y por un mayor protagonismo de los programas de ciencia y sociedad dentro de las acciones de promocin de la investigacin. Todo ello ha dado lugar a que aparezcan crecientes demandas de integracin de cuestiones sociales en la gestin de las actividades de I+D y, como consecuencia de esta situacin, se est incrementando la atencin hacia los impactos sociales de los proyectos de I+D, con la exigencia de desarrollar nuevas metodologas para su anlisis. En general, la necesidad de la evaluacin de impacto social (EIS) de proyectos de I+D se encuentra justificada desde una triple perspectiva: terica, poltica y empresarial. La justificacin terica se basa en que las diferentes aportaciones provenientes del estudio de la tecnologa y la vertiente evolucionista de la economa, insisten en la necesidad de incorporar criterios sociales en el diseo de la investigacin cientfica y la ingeniera. Estas contribuciones permiten establecer un nuevo concepto de cambio tecnolgico fundamentado en la co-evolucin de la tecnologa y la sociedad (Rip and Kemp, 1998; Kuhlmann, 1999; Smits, 2002). Desde la perspectiva poltica, la necesidad de vincular la ciencia y los sistemas tecnolgicos con la sociedad es un tema recurrente en las declaraciones polticas. As, es posible identificar una tercera fase en la evolucin de las polticas de I+D e innovacin, que se caracteriza por estar dirigidas prioritariamente hacia objetivos sociales (European Commission 2000; European Commission 2003a; OECD, 2001). Finalmente, desde una ptica empresarial, la responsabilidad social corporativa gana relevancia y las empresas buscan encontrar un adecuado balance entre su rentabilidad econmica y su responsabilidad social, existiendo un nmero cada vez mayor de colectivos/agentes involucrados que deben ser tenidos en consideracin. Adems, la inclusin de criterios sobre impactos sociales en la gestin de proyectos de I+D comienza a ser contemplada como una potencial fuente de beneficios, ya que incrementa el grado de confianza de los consumidores y reduce la probabilidad de

aparicin de conflictos entre los distintos grupos afectados (Carroll and Buchholtz, 1999; Halal, 2001, European Commission, 2001b, European Foundation for Quality Management, 2003). La Comisin Europea ha sido una de las fuerzas que ha dinamizado este proceso de integracin de los impactos de las actividades de I+D. Dentro de esta labor de dinamizacin, el Quinto Programa Marco (5PM) sirve como referencia de la incorporacin de los objetivos socioeconmicos como una prioridad esencial de la investigacin europea (European Commission, 1996). Ms recientemente y en este mismo sentido, en la evaluacin del 5PM se plantean afirmaciones como la siguiente:
El impacto socioeconmico no debera considerarse nicamente como un impacto ms junto a otros componentes en el marco de una evaluacin multicriterio (por ejemplo, tcnicas u organizativas), sino que es el criterio para valorar el xito (fracaso) ltimo de las actividades de investigacin, (European Commission, 2003b, p. 10)

Este mismo cambio de actitud y la toma de conciencia de la relevancia de la faceta social de las actividades de I+D tambin se puede apreciar en la introduccin de indicadores sociales e institucionales en el anlisis del desempeo de los sistemas de innovacin nacionales (European Commission, 2003b). Este compromiso poltico se ha trasladado en cierta medida al nivel de la gestin de proyectos. As, en los procedimientos de evaluacin previa de proyectos de la Comisin Europea se ha incluido un mayor nfasis en la necesidad de valorar la contribucin de los proyectos a los objetivos sociales de la Unin Europea (European Commission, 2001a). Dentro de esta lnea de actuacin, el Sexto Programa Marco (6PM) puso en marcha una nueva modalidad de instrumento los Programas Integrados con una concepcin encaminada al logro de un mayor impacto cientfico y socioeconmico. Al mismo tiempo, la creacin de proyectos de mayor dimensin permite dedicar recursos a una eficaz supervisin del progreso de los programas y a la valoracin de impacto de la dimensin no tecnolgica de las actividades de I+D, lo que al mismo tiempo permite mejorar la tarea de rendicin de cuentas (accountability). Aprovechando este escenario favorable, el consorcio del proyecto VAN decidi incluir en su programa de trabajo una tarea enfocada a la realizacin de una Evaluacin de Impacto Social (EIS) junto con un plan la mejora de aspectos relativos a gnero. El objetivo del Proyecto Integrado VAN consiste en:
dotar de soluciones innovadoras, estndares y mejoras en los entornos industriales, que reduzcan la distancia existente entre las tecnologas de oficina y las tecnologas de automatizacin industrial, orientadas a la configuracin de una red integrada y uniforme de procesos de produccin y manufactura. Con lo que se conseguira definir unas bases, aceptadas internacionalmente, para la gestin de plantas industriales y para la definicin de conceptos de servicios y controles avanzados (Figura 1).

Figura 1. La creacin de redes virtuales para los entornos industriales. El contenido del proyecto VAN
Dominios industriales remotos (subsidiarias, clientes,) Integracin de dispositivo aislado (telecontrol) Dominio en tiempo real Dispositivos mviles

Subdominios de oficina

Dominio conectado va radio

Tecnologas heterogeneas / internet (Redes pblicas) Dominio de oficina Dominio industrial Segmento industrial Estructura bsica industrial Dispositivos mviles

Dominio WLAN industrial

Dominio WLNA industrial Dominio intrinsecamente seguro Subdominiso industriales Dominio en tiempo real

Fuente: Proyecto VAN

En la presente comunicacin se sintetizan la primera fase de evaluacin del proyecto VAN proponindola como caso de aplicacin de evaluaciones socioeconmicas a proyectos de I+D. La estructura de la comunicacin est constituida por varias partes, la primera de ellas profundiza en la EIS, comentndose su propsito, metodologa, fases y el conjunto de impactos a considerar y su organizacin en dominios (Epgrafe 2). En segundo lugar, se explica el proceso desarrollado para lleva a cabo la evaluacin ex-ante, su estructura, la forma en que la informacin es recopilada y se exponen, por un lado, algunas recomendaciones que permitan mejorar de dicho proceso y, por otro, la informacin que puede extraerse de dicho proceso (Epgrafe 3). Finalmente, se plantean un conjunto de conclusiones asociadas al potencial que presenta la integracin de la EIS en la evaluacin de proyectos de I+D (Epgrafe 4).

2. La evaluacin de impacto social

El campo de la evaluacin de polticas tecnolgicas y cientficas cuenta con una larga tradicin de anlisis dedicada a comprender la dimensin social de la tecnolgica. Esta tradicin mantiene fuertes vnculos con el campo del saber de la Evaluacin de Tecnologas (Ende et al.; Rip, 2001; Schot, 1992; Schot and Rip, 1997), pero tambin con las tradiciones de evaluacin de impacto ambiental o con el desarrollo de indicadores. En esta lnea se han puesto en marcha experiencias orientadas al desarrollo especfico de indicadores sociales para la ciencia y la tecnologa como puede ser el caso de los seminarios organizados por la RICYT (La Red Iberoamericana de Ciencia y Tecnologa)1. Respecto a las metodologas de evaluacin ambiental, la tendencia reciente consiste en incluir categoras que recojan el impacto social de los proyectos considerando la relacin entre la dimensin social y ambiental de la realidad (Canter, 1996), pero sus resultados son todava difcilmente aplicables a proyectos de I+D e innovacin. Dentro de la literatura dedicada al campo de la evaluacin de proyectos se puede encontrar un significativo nmero de metodologas, tanto cuantitativas como cualitativas (Perlitz et al., 1999, Farrukh et al., 2000; Poh et al., 2001). Sin embargo, la amplia mayora de stas se centran en facilitar a las organizaciones innovadoras un instrumento prctico para la seleccin y jerarquizacin de proyectos y raramente se
1

Disponible en http://www.ricyt.edu.ar/

ocupan de aspectos relacionados con la mejora de decisiones tcnicas. Estas metodologas de mejora demandan planteamientos participativos y, en este sentido, son compatibles con los desarrollos de mtodos de evaluacin que tienen en consideracin a los distintos participantes del proyecto como una va para ampliar y mejorar los criterios de evaluacin (Elias et al., 2002), En este contexto, la evaluacin del proyecto VAN ha encontrado dificultades para localizar metodologas adaptadas a sus singularidades. En primer lugar, era necesario un enfoque micro para analizar los impactos sociales de las actividades de I+D, con la necesidad de discriminar los impactos derivados del proyecto de los impactos genricos de las TIC. Por otra parte, la evaluacin debe realizarse en tres momentos del ciclo de vida del proyecto, con la necesidad de utilizar metodologas y disponer de informacin muy diferente en cada caso. Como resultado de lo anterior, no se ha encontrado una metodologa estandarizada que sea suficientemente satisfactoria para tratar con la faceta social del proyecto VAN, motivo por el cual se ha intentado realizar un modelo de evaluacin ad hoc. La primera ocupacin ha sido la identificacin de los impactos previsibles lo que constituye una primera y necesaria etapa para llevar a cabo una evaluacin (Owen and Rogers, 1999). 2.1. El propsito de la EIS Fundamentalmente, la finalidad de la evaluacin de la EIS de un proyecto de I+D puede dividirse en tres elementos: 1) Ser una fuente de informacin adicional a los socios del proyecto para mejorar el impacto social de los bienes y servicios que se generen gracias a dicho proyecto. 2) Mejorar el grado de conciencia entre los gestores de actividades de I+D e innovacin sobre las consecuencias de los bienes y servicios que surgen del proyecto y de la utilidad de la evaluacin de impacto social. 3) Extender entre los responsables de proyectos la relevancia de la EIS como una buena prctica de gestin de las actividades e I+D e innovacin.

Al tratarse de un instrumento cualitativo, la EIS no pretende cuantificar los impactos esperados sino ser un apoyo para los socios del proyecto en su proceso de toma de decisiones para asegurar un mejor y mayor impacto social de los resultados de proyecto. 2.2. La metodologa de la EIS La metodologa de EIS propuesta para este proyecto se basa, en parte, en la experiencia previa del equipo de evaluacin en el desarrollo de listas de control estructuradas para la evaluacin previa de proyectos de I+D e innovacin de un centro tecnolgico (Moux et al., 2003), pero ajustada y mejorada a partir del anlisis de las repercusiones de las TIC en entornos industriales y contando con las posibilidades que brinda la metodologa Delphi para sintetizar informacin. El concepto de impacto social es definido de forma amplia aglutinando una multiplicidad de aspectos medioambientales socioeconmicos y cientficos que, con frecuencia, son dejados de lado en los mecanismos tradicionales de evaluacin de proyectos de I+D, quedando dichos aspectos fuera del proceso de toma de decisiones. En este sentido, la EIS persigue cubrir todos los potenciales impactos asociados a los nuevos

productos/procesos de un proyecto de I+D. Es importante destacar que el objetivo de la evaluacin no es analizar el impacto social del proyecto en s mismo, sino el de sus resultados (productos, procesos o estndares que mejoren las comunicaciones industriales utilizando las posibilidades tcnicas que proporcionan las TIC). Estos resultados, que sern utilizados en diferentes contextos y que deben cumplir diferentes exigencias industriales principalmente tiempo real, comunicaciones inalmbricas, seguridad y fiabilidad, utilizan una diversidad de combinaciones de alternativas tecnolgicas, que, por tanto, pueden tener diferentes impactos sociales. La metodologa de la EIS asume que todos los socios del consorcio del proyecto pueden y deben contribuir en el proceso de aportacin y sntesis de informacin, con la finalidad de obtener una visin lo ms amplia posible de las dimensiones del proyecto. Las encuestas que se utilizan para recopilar dicha informacin se fundamentan en una lista de control de los impactos que abarca un amplio conjunto de aspectos sociales, econmicos, medioambientales y tecnolgicos. En este sentido, se trata de un mtodo cuantitativo que es consistente con los mtodos de ponderacin y jerarquizacin propuestos para la evaluacin previa de proyectos de I+D, complementarios con otros mtodo cuantitativas (p.e. el anlisis coste beneficio) (Poh et al., 2001). La lista de impacto aprovecha aportaciones de estudios previos, aunque el nmero de trabajos que utilizan un enfoque de anlisis de los impactos similar al del presente trabajo no es muy elevado (Molas Gallart J. et al., 2000; TAP-ASSESS Consortium, 2000). 2.3. Las fases de la EIS La EIS se lleva a cabo a lo largo de tres etapas: exante, initinere y expost, teniendo en cada una un enfoque diferenciado. El ncleo de todas las fases, sin embargo, es la lista de impacto anteriormente mencionada. La evaluacin exante, que ha seguido un enfoque constructivista, identifica y valora los impactos socioeconmicos y los elementos crticos de las soluciones tecnolgicas a un nivel micro y meso- para realimentar el proceso de toma de decisiones con recomendaciones para asegurar un mayor impacto positivo de los resultados de proyecto. Este anlisis se ha realizado en los primeros seis meses del proyecto.

La evaluacin in-itinere, que debe ser realizada cuando el proyecto est todava en activo y manteniendo un nivel de ejecucin avanzado, en nuestro caso a mediados del segundo ao. Esta evaluacin persigue garantizar la supervisin de las actuaciones aplicadas para afrontar los impactos socioeconmicos identificados en la fase ex-ante. Un especial nfasis debe ser puesto en analizar el grado en que se han aplicado las recomendaciones del informe ex-ante, siempre teniendo en consideracin el grado de flexibilidad que los investigadores involucrados en el proyecto tienen para poder implementarlas. La evaluacin ex-post, que debe ser realizada una vez finalizado el proyecto, sirve para actualizar las conclusiones sobre el impacto del proyecto desde un punto de vista ms estratgico, permitiendo a la Comisin Europa tener evidencias sobre el impacto del proyecto. Adems, es este momento es posible obtener algunas consideraciones prcticas que pueden servir de pautas a considerar en la implementacin industrial de la tecnologa desarrollada. Estas consideraciones pueden reforzar el impacto socioeconmico de los

resultados del proyecto, tanto dentro de la industria como en la sociedad en su conjunto. Hasta el momento, el equipo de evaluacin ha llevado a cabo la evaluacin de impacto exante. Esta fase ha consistido en un proceso de encuestacin en dos etapas, similar a la metodologa Delphi, y un trabajo de investigacin en paralelo. El resultado de esta evaluacin es un informe con recomendaciones de carcter prctico para los investigadores involucrados en el proyecto VAN. 2.4. Los impactos del EIS y sus dominios Los impactos potenciales de los proyectos de Investigacin y Desarorollo Tecnolgico, sean o no apoyados por el sector pblico, forman un conjunto heterogneo (European Commission, 2005b; Moux et al., 2003; European Commission, 2005a; Uotila et al., 2004). Estos impactos potenciales pueden organizarse en las siguientes categoras: 1. Impactos medioambientales: que se refieren al grado en que la tecnologa contribuye al eco-diseo del producto y del proceso (eficiencia energtica, ahorro de energa de materiales, etc.); 2. Temas sociales: impactos sobre la seguridad y la calidad de vida de los usuarios finales, desarrollo social, diseo universal (incluyendo requisitos para la integracin de discapacitados), sobre las relaciones sociales, etc. 3. El sistema de innovacin: impacto sobre la estructura del sistema de innovacin (capital humano, aportacin de poder a los agentes innovadores, usos alternativos de la energa, etc) y sobre la cultura del sistema de innovacin (cultura corporativa en innovacin, shock tecnolgico, etc.); 4. Empleo: impactos sobre la creacin y transformacin de empleo (efectos de la deslocalizacin, sustitucin de puestos de trabajo, salud y seguridad humanas, etc.); 5. Temas econmicos estratgicos: impacto sobre el desarrollo endgeno, el desarrollo geogrficamente equilibrado y la atribucin de poder a las pymes en un nivel regional.

Tabla 1. Lista de Impactos Sociales Campo Nombre Impacto sobre el cumplimiento de las normas corporativas medioambientales de los fabricantes. el cumplimiento de las polticas medioambientales que afectan a los usuarios finales de los productos del proyecto. el consumo de energa de los fabricantes. Ahorro energtico el consumo de energa de los usuarios finales de los productos del proyecto. el diseo de los productos del proyecto debido a la integracin de energas renovables. el consumo de materias primas del fabricante. Consumo de materias p Fin de vida de los prod VAN Recursos el consumo de materias primas del usuario final de los productos del proyecto. la fase del fin de vida de los productos del proyecto. la cantidad de recursos humanos y fsicos dedicados a este campo de investigacin en el largo plazo. la cohesin y los mecanismos establecidos del sistema de innovacin (ej. fomentando cooperacin permanente entre los socios implicados, aumentando la transferencia de tecnologa a las pymes no-socios, apoyando el desarrollo de polticas y regulaciones del sector). el proceso industrial del usuario final (ej. shocks difciles de abordar dentro de la cultura organizativa en innovacin) la Industria Europea de Automatizacin como un todo, una vez que el proyecto se completa, debido a una serie de actividades de difusin planificadas la consolidacin o creacin de una lnea de investigacin autnticamente multidisciplinar los otros mbitos en los que los productos del proyecto y / o el conocimiento generado por el proyecto pueden ser aplicados (ej. otro uso adems del objetivo del proyecto) la comprensin pblica de las comunicaciones industriales debido a los resultados de la difusin el nmero de grupos de stakeholders que toman parte en el proceso de toma de decisiones el compromiso tico adoptado por las organizaciones implicadas (ej. un conflicto entre la organizacin un resultado del proyect

Temas medioambientales

Regulacin medioambiental

Energa Renovable

Sistema de innvoacin Temas sociales

Potenciacin de los age innovadores Shock tecnolgico

Difusin del conocimie

Multidisciplinaridad Uso alternativo o adicio de la tecnologa Comprensin pblica d Ciencia y Tecnologa Participacin pblica Compromisos ticos

Conflictos relacionados valores sociales

las controversias sociales de actualidad en el mbito de las Tecnologas de la Informacin y la Comunicacin (ej. conflictos relacionados con: seguridad vs. privacidad, salud humana vs. campos electromagnticos, interacciones humano-computadora y/o humano-humano, etc. la cooperacin entre organizaciones a lo largo de la cadena de valor (ej. aumentando las comunicaciones entre los usuarios finales y sus proveedores / clientes) la posibilidad de las pymes de introducir los productos del proyecto en sus procesos de fabricacin, teniendo en cuenta las dificultades especiales que las pymes tienen a la hora de innovar la satisfaccin de las necesidades de los sectores industriales no representados en el consorcio del proyecto, por medio de los productos del proyecto (independiente de su nivel tecnolgico) las regiones menos desarrolladas de la Unin Europea debido a los esfuerzos planificados en relacin a la difusin del proyecto en trminos de productos y conocimiento la creacin o destruccin de puestos de trabajo en las organizaciones de los usuarios finales la destruccin de puestos de trabajo perjudiciales para la salud, peligrosos y / o exigentes fsicamente las habilidades y competencias requeridas a los empleados de los usuarios finales la sustitucin de empleados en la organizacin de los usuarios finales (ej. sustitucin de empleo consistente en que una persona desempleada altamente cualificada encuentra un trabajo relacionado con las tecnologas del proyecto a costa de una persona ya empleada con cualificacin baja) la generacin de un efecto de deslocalizacin de los puestos de trabajo (ej. nuevos puestos de trabajo son creados a costa de que se pierdan puestos de trabajo en algn otro lugar) la creacin de nuevas empresas para explotar los resultados del proyecto la inclusin / exclusin de empleados (ej. Productos del proyecto ayudan a los usuarios finales a dar forma a los puestos de trabajo- descendiendo los requisitos fsicos con el fin de recrutar individuos tradicionalmente sin acceso a estos puestos) la seguridad y salud en el trabajo (ej. a travs de mejoras ergonmicas en los puestos de trabajo o a travs de la reducci estrs o de los riesgos de daos fsicos)

Cooperacin Temas econmicos Empleo

Proceso de innovacin pymes

Sectores no directamen involucrados en VAN

Cohesin regional Creacin / destruccin de puestos de trabajo Prdida de puestos de trabajo Nuevas habilidades y competencias

Sustitucin en el empleo

Deslocalizacin

Creacin de empresas

Inclusin

Seguridad y salud en el trabajo

Confianza del trabajador

La confianza de los empleados en que el proceso de fabricacin funcione correctamente, como resultado de la adopcin de los productos VAN

3. La evaluacin ex-ante
La evaluacin de impacto ex ante consisti en una encuesta de dos pasos, que sigue un enfoque similar a una metodologa Delphi, unido a un trabajo adicional basado en la recogida de informacin producida previamente2. A partir de este material se hace un informe ex ante con recomendaciones que proporcionan pautas para dar forma a la investigacin asociada al proyecto con la finalidad de mejorar los resultados socio-econmicos. La primera ronda de la encuesta consisti en un cuestionario que pretende identificar y clasificar los impactos sociales un ejemplo del cual se puede consultar en la Tabla 2. Tabla.2 Ejemplo de una pregunta de la primera ronda Podemos esperar que los resultados del proyecto VAN lleguen a formar parte de las actuales controversias en torno a la Sociedad de las Tecnologas Conflictos relacionados de la Informacin y la Comuniciacin; ej. Seguridad vs privacidad; impactos sobre la salud humana en relacin con valores a los campos electromagnticos, o interacciones humano sociales computadora, o humano-humano que se hacen posibles a travs de estas tecnologas? S Comentarios

No

La segunda ronda consisti en un cuestionario ms especfico que recoge las aportaciones de los socios formuladas en el primer cuestionario con el objeto de confirmar los impactos sociales que se haban detectado en la primera ronda, al tiempo que persigue un conocimiento ms profundo respecto al sentido, relevancia, flexibilidad e incertidumbre de estos impactos (Tabla 3). Ambos cuestionarios persiguen una evaluacin cualitativa basada en los puntos de vista y en las experiencias previas de los socios. Este cuestionario intenta recoger el conocimiento experto pero siempre asumiendo que las respuestas son abiertas y que tienen un alto contenido subjetivo. Obviamente, se espera tanto un sesgo optimista como pesimista puesto que lo que se expresan son opiniones no totalmente contrastadas. Por otra parte, aunque se ha preguntado a una diversidad heterognea de socios, slo se ha elaborado un cuestionario comn puesto que todos los participantes tienen una visin amplia y suficiente del proyecto, a pesar de que su tarea concreta est focalizada en un nico aspecto. Los dos cuestionarios estn organizados como un conjunto de impactos sociales que podran surgir a partir de la ejecucin del proyecto, pero ambos cuestionarios tienen enfoques diferentes:

La preparacin de la evaluacin de impacto se apoy tambin con un desk research consistente en una revisin de documentos que abordaban temas como: la prediccin del cambio en la sociedad en el contexto de la evolucin de las Tecnologas de la Informacin, el impacto de sistemas automticos y la robtica sobre el modelo laboral y la futura prediccin de tecnologas para el uso en procesos estratgicos en diferentes organizaciones.

10

 La primera ronda de la encuesta de evaluacin de impacto ex-ante es ms simple que la segunda. Se proporciona una lista de impactos y cada impacto es comprobado por una pregunta de SI o NO, pero abierta a comentarios (ej. dificultades encontradas al responder): Se seleccionaron preguntas cerradas con un formato que facilitara a los encuestados la comprensin de las alternativas incluso cuando no se tratase de expertos socio-econmicos. La segunda ronda de la encuesta de evaluacin del impacto ex-ante consisti en un cuestionario ms centrado y especfico que pone en comn algunas de los opiniones de los socios relacionadas con algunos de los impactos. Esto permite a los expertos del proyecto considerar algunos de los puntos de vista de otros socios y conseguir una confluencia comn en sus respuestas. Adems, en el segundo cuestionario, se pidi a los socios que profundicen en su evaluacin de los posibles impactos respondiendo algunas preguntas acerca de: o La probabilidad del impacto: la opinin de los socios sobre la importancia de que esos impactos ocurran. o Efecto del impacto: se refiere al hecho de que el impacto podra ser positivo o negativo. En el primer caso, seran convenientes acciones para aumentar el efecto. En el segundo caso, seran recomendables las acciones para mitigarlo. En este sentido, se requeriran cuando fuera posible la aplicacin de las recomendaciones para dar forma a la investigacin VAN de manera positiva o de alguna buena prctica. o Flexibilidad del proyecto: aunque los objetivos de los socios industriales y su visin del mercado estn ya establecidos, las soluciones no estn cerradas an. Por lo tanto, hay flexibilidad en las investigacin del VAN para tener en cuenta las recomendaciones de la evaluacin ex ante de forma que puedan mejorarse los impactos sociales del VAN. Adems, en casos en que el encuestado contesta de manera negativa existiendo una mayora de respuestas afirmativas, se solicita una explicacin ms en detalle para comprender su posicin considerando que algn elemento importante se ha podido omitir.

11

3.1. Anlisis de las respuestas Este anlisis es til porque detecta el nivel de consenso o disenso entre los encuestados respecto a los impactos futuros, permitiendo diagnosticar campos de incertidumbre, campos que deben ser analizados con ms intensidad y, en su caso, campos en los que la probabilidad de los impactos es alta. Tabla 3. Muestra / Ejemplo de una pregunta de la 1 ronda
Podemos esperar qu Result TrespueComentarios Conflictos RespuestProbabilid Efecto dFlexibilid de los socios relacionados resultados del proyectgenera Impacto impactoproyecto los valores so lleguen a formar parte SI, impactos sobre la priv Si las actuales controvers: # y la salud causados por la torno a la Sociedad de tecnologas sin hilos. Tecnologas de la no: # Informacin y la SI, se espera un Comunicacin; ej. Seg No impacto directo vs privacidad; impacto y el VAN tendr que afro recomendacin para dar fo sobre la salud humana las relacin a los campos la investigacin del VAN en controversias electromagnticos, o sentido positivo o alguna b mencionadas. interacciones humano prctica en esta rea: computadora, o huma Comentarios humano que se hacen del Equipo Evaluador posibles a travs de e tecnologas? Por favor tenga en cuenta que pueden surgir conflictos a partir de las percepciones de los diversos stakeholders. Si tu respuesta es no y ests en minora, puedes apuntar alguna que apoye tu opinin

Variables consensuales, se trata de variables en que todos los encuestados responden de la misma manera. Son impactos bastante seguros que tienen baja incertidumbre. No necesitan anlisis ms profundos. Se recomienda concentrarse en medidas preventivas o paliativas cuando sea necesario, pero no es pertinente investigar de manera preferencial estos impactos. Variables con consenso limitado, en este caso se hace referencia a variables en que las respuestas se concentran claramente en una de las alternativas pero que presenta un porcentaje reducido de opiniones contrarias (menor del 30%). Requieren anlisis por principio de precaucin. Conviene valorar la posible relevancia de las posturas minoritarias para hacer recomendaciones. Variables divididas, que requerirn un anlisis ms profundo, ms preguntas y una fuerte insistencia sobre las medidas de evaluacin y prevencin. Puede observarse que las variables medioambientales y laborales pertenecen claramente a este grupo. Este hecho expresa el alto nivel de incertidumbre

12

relacionado con este tipo de impactos y surge la duda sobre su comportamiento futuro. Las razones subyacentes a esta dispersin pueden ser: opiniones diversas sobre los impactos pronosticados; concepciones diversas sobre el proyecto VAN. Es posible que en algunos casos, los encuestados hayan contestado en relacin a su experiencia ms prxima, centrando su anlisis de impactos en su particular contribucin al proyecto y no en una visin ms amplia del proyecto VAN. El cuestionario ha sido pensado para minimizar la dispersin derivada de la segunda causa. En todo caso, es aconsejable insistir en la comprensin comn del proyecto y evitar compartimentos estancos. Las variables que siguen un patrn comn se clasificaron en diversas categoras que facilitan la generacin de recomendaciones: Variables no participantes, se refiere a los impactos que tienen una probabilidad muy baja de llegar a ocurrir. No se requiere prestarles ninguna atencin especial. Estn caracterizados por bajo impacto, con efectos positivos y baja flexibilidad. Este es el caso de los temas medioambientales que, excepto en dos casos, siguen este perfil. Variables de mejora, se refiere a impactos con probabilidad de ocurrir causando un efecto positivo. Sera aconsejable fortalecer su efecto. Las opiniones sealan la existencia de un impacto positivo con probabilidad alta y niveles de flexibilidad de tipo medio-bajo. No parece que estas variables precisen acciones para evitar impactos negativos, pero ofrecen posibilidades para mejorar los impactos. Esta es principalmente la causa de los temas econmicos y el sistema de innovacin, aunque hay excepciones para ambos casos. Variables problemticas, si los impactos relacionados son altamente impredecibles. Sera recomendable hacerles un seguimiento y desarrollar mtodos tiles para los expertos que deseen adquirir un control ms preciso sobre estas variables. Estn caracterizadas por una fuerte divisin de opiniones a cerca de la existencia del impacto, sobre el efecto de ste en caso de existir, sobre su probabilidad y flexibilidad. En el cuestionario, esta descripcin se corresponde sobre todo con temas sociales y empleo. Variables estratgicas, sus impactos son predecibles y de carcter negativo, adems los investigadores del proyecto VAN tienen flexibilidad de actuacin para poder mitigarlos. Se requiere prestar una atencin primordial a estas variables de cara al xito de un proyecto de investigacin, aunque en la prctica ninguno de los impactos derivados del proyecto VAN queda dentro de esta categora.

13

3.2. Recomendaciones para la mejora del proyecto Las recomendaciones de la evaluacin ex-ante surgen de las respuestas de los encuestados y a ellas se suman las aportaciones del equipo evaluador, todas ellas centradas en impactos concretos del proyecto. Desde un punto de vista metodolgico, las recomendaciones son de tres tipos: 1. Recomendaciones de carcter general. Generadas por el equipo evaluador como marco de interpretacin de las recomendaciones prcticas. Abordan aspectos como prospectiva, participacin e informacin, con una perspectiva de largo plazo y largo alcance. 2. Recomendaciones prcticas. Se trata de pistas prcticas que el consorcio puede emplear para redisear, sobre la marcha, ciertos aspectos del proyecto que pueden mejorar su impacto social. Las recomendaciones surgen del ejercicio Delphi y de la investigacin desarrollada en paralelo por el equipo evaluador. Estn ligadas a los tipos de variables ya mencionados: o Recomendaciones puntuales. Estas recomendaciones se formulan cuando la mayora de los socios considera un impacto no relevante aunque existen opiniones puntuales que si le otorgan cierta relevancia. En este caso, las recomendaciones recogen las aportaciones puntuales de los socios, as como ideas recopiladas por el equipo evaluador. o Recomendaciones de mejora. Aquellas que tratan de reforzar impactos positivos detectados por los socios. o Recomendaciones problemticas Aquellas que tratan de contemplar ese impacto y seguir la evolucin del proyecto a ese respecto, con el objetivo de prevenir posibles impactos negativos. o Recomendaciones estratgicas. Quiz las de ms importancia. Son aquellas que aprovechan aspectos flexibles del proyecto para prevenir impactos negativos e impulsar otros positivos. Cualquier recomendacin de tipo prctico debe manejarse de forma diferente en funcin del tipo de proyecto. En este caso, el hecho de que los usuarios finales sean empresas, y no ciudadanos, ha dificultado la inclusin de un nmero de aspectos del debate ciencia-sociedad que estn directamente vinculados con conflictos sociales y demandas del consumidor. 3. Otras recomendaciones. Son una serie de aspectos de gran relevancia en el debate ciencia-sociedad de la Unin Europea, que el equipo evaluador ha considerado necesario incluir de acuerdo con su experiencia y siguiendo las preocupaciones expresadas por algunos socios en los cuestionarios. Se trata de propuestas difciles de implementar en un proyecto de investigacin industrial como VAN: participacin pblica, comunicacin social de los resultados, investigacin interdisciplinar. La respuesta de Van a estas ideas, no obstante, puede ser de utilidad para futuros proyectos y para el diseo de polticas.

14

3.3 Limitaciones del estudio Pese al valor intrnseco de las recomendaciones, stas presentan tambin limitaciones que deben tenerse presentes de cara a su implementacin. Su valor reside en que se constituyen como una herramienta de apoyo a la decisin que introduce la dimensin socioeconmica en la dinmica de la I+D. No obstante, como ya se ha mencionado, la decisin sobre su aplicacin depende de los socios del proyecto. Las principales limitaciones del estudio son la siguientes: 1. Las recomendaciones se basan en las opiniones del limitado nmero de socios del proyecto, por lo que el resultado est sesgado por sus percepciones que pueden ser errneas. 2. Si bien los socios son muy competentes en su campo tcnico, pueden no tener una suficiente visin de conjunto del mbito socioeconmico en el que se desarrolla su trabajo. Los resultados de otra tarea del proyecto un anlisis de tendencias tecnolgicas VAN, tambin liderada por CARTIF muestran que hay ciertos aspectos no tcnicos que son contemplados por algunos socios pero pasan desapercibidos para otros. 3. Las personas que han respondido a los cuestionarios de evaluacin han tenido que atender paralelamente a varias tareas del proyectos, de modo que pueden haber carecido del tiempo necesario para responder con calma. 4. Alguna cuestin ha sido interpretada de forma distinta por los socios. Esta diversidad se ha concentrado en la aplicabilidad de las recomendaciones: el concepto de flexibilidad ha sido especialmente mal interpretado. En contra de la voluntad del equipo evaluador, la flexibilidad se ha vinculado con la estructura de toma de decisiones en el consorcio y, en particular, con el papel del coordinador. 5. Hay recomendaciones que se han incluido por considerarse aspectos clave del debate ciencia y sociedad participacin pblica, comunicacin social, interdisciplinariedad, pero han resultado ser de difcil aplicacin dadas las particularidades de VAN.

15

4. Conclusiones
Del trabajo realizado hasta el momento se desprenden, principalmente, cuatro conclusiones. En primer lugar, el estudio muestra que es posible la integracin de aspectos socioeconmicos en la evaluacin de proyectos de I+D siguiendo un enfoque constructivista. A pesar de las restricciones impuestas por un proyecto financiado pblicamente, que tiene que ajustarse a un contrato, la presente experiencia muestra que el diseo tecnolgico cuenta con un grado de flexibilidad que permite integrar la dimensin social, tal y como defienden los estudios sociales de la tecnologa. En segundo lugar, la incorporacin de los propios investigadores VAN al proceso de evaluacin prepara el camino para la subsecuente implementacin de la recomendacin ex-ante si bien supone tambin la aparicin de cierto sesgo dado que su preocupacin es principalmente tecnolgica. Su incorporacin en el proceso no es sencilla, dado que deben concentrarse principalmente en tareas de I+D que les imponen plazos y entregas. No obstante, el estudio muestra que involucrarlos es posible y fructfero. En tercer lugar, es posible identificar un nmero de impactos sociales que son comunes a todos los proyectos de I+D, con independencia de su naturaleza. Por ltimo, debe prestarse una atencin especial a la flexibilidad del proyecto. Si se pretende que las recomendaciones ex ante se apliquen para mejorar los impactos del proyecto, el equipo evaluador debe contemplar el grado de flexibilidad existente para ello. Dicho grado de flexibilidad se corresponde esencialmente con la flexibilidad ofrecida por el diseo del propio proyecto, cuya evolucin debe ser seguida a medida que el proyecto avanza.

Agradecimientos
La presente investigacin ha sido posible gracias al apoyo de la Comisin Europea, VI Programa Marco, prioridades temticas IST (tecnologas para la sociedad de la informacin ) y NMP (Nanotecnologa y nanociencias, materiales muntifuncionales y nuevos procesos de produccin), contrato No 016969.

16