Embed Size (px)
Citation preview
OPINION DE EXPERTOS
CONTENIDO
1. INTRODUCCION:..............................................................................................3
1.1. Técnicas de Proyección de Mercado......................................................3
1.2. Métodos Cualitativos................................................................................3
2. DEFINICION DE PANEL DE EXPERTOS........................................................3
3. ¿EN QUÉ CONTEXTO NACE EL CONCEPTO Y CÓMO EVOLUCIONA?.....4
4. ¿POR QUÉ UTILIZAR ESTA HERRAMIENTA EN EVALUACIÓN?................5
5. ¿CÓMO APLICAR EL PANEL DE EXPERTOS?.............................................6
5.1. ¿Qué criterios se aplican para la selección de los expertos?..............6
5.2. ¿Cómo seleccionar a los expertos?........................................................7
5.3. ¿Cuáles son las normas de funcionamiento del panel?.......................9
5.3.1 Principios básicos del trabajo de un panel de expertos.................9
5.3.2. Normas generales para dirigir las reuniones.................................10
5.3.3. Organización de la misión...............................................................12
5.4. ¿Qué papel desempeña el presidente del panel?................................12
5.4.1. Función como facilitador/coordinador...........................................12
5.4.2. Función como integrador................................................................13
5.4.3. Función como responsable del proyecto.......................................13
5.4.4. Función como representante del panel..........................................14
OPINION DE EXPERTOS
5.5. ¿Cómo presenta el panel el resultado de sus trabajos?.....................14
5.5.1. Síntesis de los trabajos del panel...................................................14
5.5.2. Estructura tipo del informe final.....................................................15
6. RECURSOS NECESARIOS PARA UN PANEL DE EXPERTOS:..................15
6.1. Recursos Temporales:............................................................................15
6.2. Recursos Humanos.................................................................................17
6.3. Recursos financieros..............................................................................18
7. LAS VENTAJAS Y LOS LÍMITES...................................................................19
8. LISTAS DE CONTROL...................................................................................21
9. BIBLIOGRAFIA...............................................................................................24
OPINION DE EXPERTOS
METODO DEL PANEL DE EXPERTOS
1. INTRODUCCION:
1.1. Técnicas de Proyección de Mercado
Cada una de las técnicas de proyección tiene una aplicación de carácter especial
que hace de su selección un problema de decisional influido por diversos factores,
como por ejemplo la validez y disponibilidad de datos históricos, la precisión
deseada del pronóstico, el costo del procedimiento, los beneficios del resultado,
los periodos futuros que se desea pronosticar y el tiempo disponible para hacer el
estudio entre otros.
1.2. Métodos Cualitativos
La importancia de los métodos cualitativos en la predicción del mercado se
manifiesta cuando los métodos cuantitativos basados en información histórica no
pueden explicar por sí solos el comportamiento futuro esperado de alguna de sus
variables, o cuando necesiten suficientes datos históricos.
Los métodos cualitativos pueden ser:
• Método de Delhi
• Consenso de Panel o panel de expertos
• Investigación de Mercado
2. DEFINICION DE PANEL DE EXPERTOS
El panel de expertos puede definirse como un grupo de especialistas
independientes y reputados en al menos uno de los campos concernidos por el
programa que se va a evaluar, al que se reúne para que emita un juicio colectivo y
consensuado sobre dicho programa. Según se les solicite, el juicio emitido puede
PREPARACION Y EVALUACION DE PROYECTOS Página 1
OPINION DE EXPERTOS
hacer referencia a la puesta en práctica o a los efectos del conjunto o de una parte
del programa.
El objetivo de esta herramienta es utilizar el conocimiento que los expertos poseen
de una materia para evaluar políticas, programas o proyectos llevados a cabo en
este contexto en concreto.
Algunas de sus características son:
Es una técnica similar al Método Delphi se diferencia de esta en que no
existen secretos sobre la identidad del emisor de las opiniones y no existe
retroalimentación dirigida desde el exterior.
Se estimula la comunicación
Se basa en la suposición de que varios expertos serán capaces de producir
un pronóstico mejor que una sola persona.
Algunas veces los factores sociales influyen en los pronósticos y por este
motivo no reflejan un consenso verdadero
Existe la posibilidad de que emerja un grupo dominante que anule la
interacción adecuada y se logre un consenso por la capacidad de la
argumentación y no por la validez de la misma
3. ¿EN QUÉ CONTEXTO NACE EL CONCEPTO Y CÓMO EVOLUCIONA?
Concepto original
En el ámbito de la investigación, el origen del concepto se sitúa en la evaluación
paritaria de trabajos científicos o de programas. Tradicionalmente, el panel de
expertos se ha desarrollado como herramienta de evaluación en este campo.
Evolución
En los últimos años, la noción de panel de expertos ha evolucionado
principalmente en dos direcciones:
PREPARACION Y EVALUACION DE PROYECTOS Página 2
OPINION DE EXPERTOS
Diversificación de la composición del panel. Originalmente, el empleo de
paneles de expertos se limitaba a una serie de áreas bastante definidas
pero, progresivamente, se ha ido diversificando el contenido de las
misiones de evaluación y, en consecuencia, la composición del panel.
Actualmente, además de los especialistas en un área en concreto, se
solicita la participación de economistas, de especialistas en evaluación o de
representantes de los usuarios del programa para cubrir las distintas
facetas de la evaluación.
Profesionalización del panel. La aparición de métodos más rigurosos (p.
ej. estudios de apoyo al trabajo del panel realizados por consultores
externos) ha incrementado el grado de fiabilidad y credibilidad del panel de
expertos como herramienta de evaluación. Estos cambios han ido
conduciendo a una profesionalización progresiva de la evaluación realizada
con la intervención del panel de expertos.
4. ¿POR QUÉ UTILIZAR ESTA HERRAMIENTA EN EVALUACIÓN?
Este grupo de trabajo, que se constituye especialmente para la evaluación de
acuerdo con una serie de procedimientos estándar, sigue un método de trabajo
concreto para celebrar sus reuniones y elaborar su juicio.
En evaluaciones de país o región, se puede utilizar el panel de expertos en
diversas circunstancias:
Para estudiar áreas extremadamente específicas que requieran una
formación de alto nivel (por ejemplo ayuda a la investigación, altas
tecnologías, etc.).
Para estudiar temas en los que las otras herramientas sean de difícil
aplicación a un coste razonable.
PREPARACION Y EVALUACION DE PROYECTOS Página 3
OPINION DE EXPERTOS
Para realizar evaluaciones de poca envergadura (por ejemplo ayuda a
países pequeños).
Para apoyar el juicio de los evaluadores sobre un tema en concreto en
evaluaciones de mayor envergadura.
Para formalizar los posibles efectos de un programa en evaluación ex ante.
5. ¿CÓMO APLICAR EL PANEL DE EXPERTOS?
5.1. ¿Qué criterios se aplican para la selección de los expertos?
La experiencia profesional en el campo de que se trate es un requisito
indispensable; el experto debe estar muy cualificado en el área objeto de
evaluación, y ser reconocido y respetado por sus pares. La credibilidad de sus
opiniones depende totalmente de ello.
La independencia del experto respecto del programa que se va a evaluar es de
vital importancia; el evaluador nunca puede ser juez y parte. Así, se excluirán de la
selección los expertos que tengan algún tipo de conflicto de intereses con el
programa evaluado (p. ej.: aquellos que hayan participado en el programa o
procedan de un organismo que se haya beneficiado de éste).
No obstante, es difícil garantizar una independencia total en aquellos campos en
que el número de expertos es especialmente reducido. En estos casos, más que
la independencia de cada uno de los expertos, prevalecerá el grado de
PREPARACION Y EVALUACION DE PROYECTOS Página 4
OPINION DE EXPERTOS
independencia del panel en sí mismo (en otras palabras, las distintas opiniones
posibles sobre el programa en cuestión deberán estar representadas en el panel).
Finalmente, no hay que olvidar precisar a los expertos que se les ha designado a
título individual, es decir, que no representan a la institución de la puedan formar
parte y, en consecuencia, no pueden ser sustituidos en su función.
La capacidad de trabajo en equipo, el experto debe reunir otras características
igualmente básicas: capacidad de trabajo en equipo y de escuchar a los demás,
así como una mentalidad abierta. En caso contrario, el clima de trabajo en el panel
puede enrarecerse y ello puede desembocar directamente en el fracaso de su
misión.
Otros criterios
Además de estos tres criterios básicos (profesionalidad, independencia y
capacidad de trabajo en equipo), así como de potenciales requisitos relativos a los
perfiles de los expertos del panel, los financiadores pueden tener otras
necesidades en la formación del grupo (p. ej.: miembros de una nacionalidad
específica, equilibrio entre los expertos con distintos puntos de vista sobre el
programa, petición de representación de un determinado grupo de personas en el
panel como los beneficiarios, los usuarios, etc.).
Finalmente, es aconsejable que los expertos del panel conozcan lo mejor posible
la lengua del territorio en el que se desarrolle la evaluación.
5.2. ¿Cómo seleccionar a los expertos?
Según la envergadura del trabajo que haya que llevar a cabo y la complejidad de
los temas que se van a tratar, la contratación de los expertos puede ser bastante
rápido y sencillo o, al contrario, requerir un proceso previo de selección.
PREPARACION Y EVALUACION DE PROYECTOS Página 5
OPINION DE EXPERTOS
En el caso de una selección rápida, los responsables de la evaluación tienen
acceso a una lista de expertos reconocidos en un campo determinado y basta con
que se aseguren de su independencia respecto del programa evaluado.
En el caso de una selección por etapas, Esta situación es cada vez más
frecuente. En primer lugar, es conveniente definir el perfil requerido de los
expertos de acuerdo con los temas que se vayan a abordar en la evaluación. La
definición de estos perfiles es fundamental para que la selección de estos
especialistas encaje perfectamente con la evaluación. Si la intervención del panel
se limita a los aspectos técnicos de la evaluación, la falta de independencia de los
expertos respecto de las áreas consideradas no tiene grandes consecuencias en
la evaluación ya que, efectivamente, es el evaluador quien se encarga de las
principales actividades. Si, en cambio, los expertos deben llevar a cabo una parte
significativa de la evaluación, es indispensable que el panel incluya -además de a
los expertos de la especialidad- como mínimo a un miembro que tenga mucha
experiencia en la realización de evaluaciones en sí, así como a un
socioeconomista. Por supuesto, la lista puede ampliarse tanto como lo requiera la
misión encomendada a los expertos.
Definición de perfiles
La Société Royale du Canada detalla los puntos del programa que hay que
considerar para definir los perfiles del panel, a saber:
el carácter del programa; ¿el estudio se limitará a problemas técnicos o
abarcará problemas más amplios relacionados con la política pública?
el grado de controversia; ¿los problemas que hay que tratar tienen
soluciones alternativas susceptibles de controversia? ¿Afectan a los
implicados desde el punto de vista emocional, político o financiero respecto
de los resultados?
los datos disponibles; ¿las conclusiones del panel y las recomendaciones
se basarán en el análisis de datos o en el juicio de los expertos?
PREPARACION Y EVALUACION DE PROYECTOS Página 6
OPINION DE EXPERTOS
las incertidumbres; ¿contemplarán incertidumbres las conclusiones del
panel?
el número de disciplinas necesarias; ¿los problemas que hay que evaluar
implican el dominio de una sola disciplina o de varias?
Proceso de selección
Una vez que se han definido los perfiles, la institución que ha de realizar la
evaluación recoge la información y efectúa una eventual primera selección a partir
de esta lista, teniendo especialmente en cuenta los conflictos de intereses que se
hayan podido identificar. A continuación, dicha institución se pone directamente en
contacto con los candidatos.
Dependiendo del número de expertos que haya de configurar finalmente el grupo
(en general de cinco a diez), será conveniente preseleccionar al doble o incluso al
triple de especialistas en esa lista ya que es posible que no todos gocen de
disponibilidad en ese momento. Hay financiadores que toman la lista -en
ocasiones larga- y establecen una distinción entre los "titulares de preferencia" y
los "suplentes", y a partir de ahí se ponen en primer lugar en contacto con los
primeros para reservar su disponibilidad. Se recomienda aplicar esta técnica en el
caso del futuro presidente del panel y de los expertos "clave".
Acabado el proceso de selección, los expertos son contratados y entre ellos se
nombra a un presidente (que elige el propio panel o el financiador de la
evaluación, según el caso). La repercusión de la elección del presidente es muy
importante ya que su papel es fundamental en el funcionamiento del grupo. El
presidente marcará la tónica y el ritmo de trabajo del panel.
Finalmente, sería deseable que la secretaría se confiase a una persona con
disponibilidad suficiente porque, en general, los expertos suelen carecer de ella.
No hay que olvidar que, en efecto, las actividades de secretaría requieren mucho
tiempo: redactar actas o informes, integrar observaciones, en ocasiones dirigir
estudios de apoyo, etcétera.
PREPARACION Y EVALUACION DE PROYECTOS Página 7
OPINION DE EXPERTOS
5.3. ¿Cuáles son las normas de funcionamiento del panel?
5.3.1 Principios básicos del trabajo de un panel de expertos
La función de los expertos es realizar el estudio del área que se les solicite y
elaborar un informe con sus conclusiones. . Por consiguiente, la preparación y
redacción de dicho informe merece especial atención.
Generalmente, se espera de un panel de expertos que:
los trabajos del panel incluyan los estándares científicos y técnicos de las
disciplinas estudiadas;
el panel demuestre ser totalmente independiente respecto a los programas
objeto de estudio y, por lo tanto, emita un juicio exento de cualquier interés
particular;
haya consenso en las conclusiones y recomendaciones del panel.
Con relación a este último punto, hay que decir que algunos asociados son
contrarios a la búsqueda de ese consenso si ello implica que el informe generado
carezca de interés o sea poco realista. En esta caso, aconsejan que se realice un
informe que refleje las diferencias entre los distintos puntos de vista y las razones
de estas diferencias.
Entre las otras reglas aplicables a las labores de los paneles se encuentra la
confidencialidad de las discusiones y el compromiso de no divulgar los resultados
no definitivos.
5.3.2. Normas generales para dirigir las reuniones
Primera reunión del panel
El contenido de la primera reunión del panel de expertos se corresponde bastante
al de los términos de referencia. Se trata de que este contenido quede
perfectamente claro para los expertos, así como su papel en la evaluación.
PREPARACION Y EVALUACION DE PROYECTOS Página 8
OPINION DE EXPERTOS
Durante esta reunión también se debe discutir y aprobar el método que se
empleará para dirigir los trabajos. En esta discusión se tiene que tratar:
la organización del panel y la función de cada uno de sus miembros;
el tipo de investigación, el método de obtención de datos; la dirección de los
trabajos que llevará a cabo cada uno (p. ej.: visitas sobre el terreno);
el calendario de intervención, la organización de las próximas reuniones y el
contenido de dichas reuniones.
En esta reunión es igualmente primordial recordar a los miembros del grupo las
normas generales de funcionamiento (p. ej.: independencia, consenso, etc.) ya
que los expertos conocen bien los temas objeto de análisis pero en general suelen
estar poco familiarizados con las herramientas de evaluación.
De forma sistemática, en este encuentro deben abordarse, debatirse y zanjarse
los posibles conflictos de interés de los expertos respecto al programa.
Reuniones posteriores
Las siguientes reuniones (de 3 a 5 aproximadamente) estarán directamente
vinculadas a los trabajos del panel. En ellas se tratará sistemáticamente de:
los trabajos realizados desde la reunión anterior;
los resultados de las investigaciones ya terminadas o de las que se estén
llevando a cabo en ese momento;
los problemas encontrados (p. ej.: dificultades para reunir información,
problemas con el calendario de intervención, con el presupuesto, etc.);
el estadio en que se encuentra la redacción de los diferentes documentos y
su proceso de revisión y control;
los trabajos que hay que realizar antes de la próxima reunión y el contenido
de ésta.
PREPARACION Y EVALUACION DE PROYECTOS Página 9
OPINION DE EXPERTOS
Para garantizar la confidencialidad absoluta de los trabajos del panel, algunos
asociados recomiendan destruir las grabaciones, las minutas e los informes
intermedios de las reuniones, de forma que sólo se conserve el informe final, que
es el único documento que se solicita realmente al panel.
5.3.3. Organización de la misión
La organización puede variar mucho según las misiones encargadas al panel.
Cuando se trabaja con expertos cuya actividad principal no es la evaluación y cuyo
lugar de residencia puede estar alejado del lugar de reunión, es básico organizar
el calendario de su intervención desde el principio de la misión, e intentar
respetarlo al máximo.
Para evitar sesgos de interpretación o de empatía, a menudo se aconseja a los
expertos que realizan trabajos para el panel entre dos reuniones (por ejemplo para
visitas in situ) que lo hagan en grupos, de dos personas como mínimo. Estos
pequeños grupos deberían entonces constituirse de forma que en ellos estuviesen
representados los posibles distintos puntos de vista respecto al programa.
5.4. ¿Qué papel desempeña el presidente del panel?
El presidente del panel desempeña un papel central. Es el encargado de dirigir los
trabajos, proponer la metodología, integrar resultados, impulsar la participación,
facilitar el debate y representar al panel en las reuniones. El ambiente de trabajo
en el panel depende a menudo de él.
PREPARACION Y EVALUACION DE PROYECTOS Página 10
OPINION DE EXPERTOS
5.4.1. Función como facilitador/coordinador
En la primera reunión de trabajo, el presidente se ocupa de guiar al panel
en la elaboración del plan de trabajo y en la estructuración del informe.
A continuación, organiza el trabajo de los equipos, así como la producción
de los documentos y su revisión.
A lo largo de todo el estudio, se asegura de que la totalidad de los
miembros del panel toma parte en los trabajos y se implica en la
evaluación.
Finalmente, durante las discusiones e intercambios entre los miembros del
grupo -especialmente entre aquellos con distintas opiniones-, vela
permanentemente por la búsqueda del consenso, lo que a veces exige
mucho tacto y flexibilidad.
5.4.2. Función como integrador
Es responsabilidad del presidente del panel dirigir el estudio, definir los métodos
de trabajo, repasar los documentos, encargarse de que se cumplan los plazos y
hacer constar los resultados de los trabajos del resto de los miembros del grupo.
En este sentido:
PREPARACION Y EVALUACION DE PROYECTOS Página 11
OPINION DE EXPERTOS
respecto a los resultados presentados por los otros miembros del panel,
debe aportar una crítica constructiva ya que, más que controlar las
reflexiones realizadas, debe intentar mejorarlas en la medida de lo posible;
en lo que concierne a los documentos producidos por el conjunto del panel,
el presidente es el que suele trabajar más a menudo con el/la secretario/a y
el financiador en la elaboración de distintas versiones de las reflexiones en
curso antes de iniciar nuevas discusiones con el panel.
5.4.3. Función como responsable del proyecto
Otra de las funciones del presidente es comprobar que los recursos disponibles
son suficientes, y asegurarse de que se emplean correctamente durante todo el
trabajo del panel. Así pues, su contacto con el financiador para el control de estas
cuestiones técnicas y financieras es permanente. En el caso de que intervengan
subcontratistas para realizar estudios requeridos por el panel, el presidente es
quien se encarga de supervisar estos trabajos, cómo se llevan a cabo y su
conclusión.
También debe cerciorarse de que el/la secretario/a ha preparado como
corresponde las reuniones del panel, de que los expertos reciban los documentos
necesarios en el plazo debido y de que se reúnan las condiciones necesarias para
la participación de los expertos en las reuniones.
Si se revelan necesarios reajustes de presupuesto, de plazos o incluso de
contenido de la misión, el presidente es el encargado de analizar la cuestión con el
financiador para encontrar una solución.
5.4.4. Función como representante del panel
El panel puede tener que estar representado ante diferentes organismos e
instituciones, como los comités de dirección de la evaluación, en posibles
PREPARACION Y EVALUACION DE PROYECTOS Página 12
OPINION DE EXPERTOS
reuniones con el comanditario, ante la prensa, etc. Como, evidentemente, no sería
posible contar siempre con la presencia de todo el panel en estas ocasiones, el
presidente asume su representación. Puede delegar esta función en otras
personas pero, en las reuniones más importantes, es preferible que sea él quien
represente al panel.
5.5. ¿Cómo presenta el panel el resultado de sus trabajos?
5.5.1. Síntesis de los trabajos del panel
Al finalizar su misión, los expertos realizan un informe, que es la única producción
visible de sus trabajos y en el que basará el juicio de la parte de la evaluación
confiada al grupo de expertos. Por esta razón, la redacción de este informe debe
llevarse a cabo de forma clara y rigurosa.
5.5.2. Estructura tipo del informe final
Evidentemente, la estructura patrón del informe depende del carácter de la misión
que se ha encargado al panel. En los proyectos del panel de naturaleza técnica o
científica, el esquema del informe debe incluir, como mínimo:
un resumen, si es posible no demasiado técnico;
los términos de referencia del estudio;
la composición del panel, si es posible detallando (por ejemplo a modo de
anexo) las referencias de los expertos;
las pruebas recopiladas y las hipótesis establecidas, así como las posibles
incertidumbres y sus potenciales consecuencias en las conclusiones;
los análisis realizados;
el juicio de los expertos, especificando los puntos de consenso. En caso de
que éste no se haya alcanzado en su totalidad, el informe debe indicar los
PREPARACION Y EVALUACION DE PROYECTOS Página 13
OPINION DE EXPERTOS
puntos en los que ha habido coincidencia y los puntos en los que ha habido
desacuerdo y explicarlos.
Éste último punto es sin duda el más complejo en la aplicación de esta
herramienta. En la medida de lo posible, hay que intentar conseguir que haya
acuerdo ya que el juicio del panel se ve considerablemente reforzado. En este
sentido, el presidente desempeña un papel fundamental, así como para formular la
posición final del panel, incluso cuando subsistan las divergencias.
6. RECURSOS NECESARIOS PARA UN PANEL DE EXPERTOS:
6.1. Recursos Temporales:
La rapidez de aplicación es una de las ventajas principales de esta herramienta.
Así, para una evaluación hay que calcular de3 a 6 meses de trabajo, e incluso
menos sise busca una opinión sobre un aspecto técnico concreto de la evaluación.
Organización de las reuniones de los Paneles de Expertos
Las reuniones de los Paneles de Expertos serán convocadas por el Comité
Técnico. La determinación de la fecha de iniciación y lugar en donde se celebrará
la reunión dependerá de su integración en el programa de trabajo del Sistema,
previa consulta con el Coordinador General.
El Comité Técnico determinará el orden del día de las reuniones, teniendo en
cuenta la importancia, el grado de desarrollo y la urgencia de cada asunto.
Normalmente, el orden del día consiste en una lista de las cuestiones del
programa de trabajo de los Paneles de Expertos que no pueden ser resueltas
totalmente por correspondencia y que, por lo tanto, requieran de consideración en
alguna reunión.
PREPARACION Y EVALUACION DE PROYECTOS Página 14
OPINION DE EXPERTOS
Si la duración de la reunión lo permite, los Paneles de Expertos podrán examinar
otros asuntos relacionados directamente con su programa de trabajo, aunque no
figure en el orden del día. Las reuniones de los Paneles de Expertos serán
inauguradas por el Coordinar General o en su defecto, por una persona que él
asigne con un discurso en el que expondrá lo que el Sistema espera de la reunión.
El panel de expertos elige a un presidente y un vicepresidente entre los miembros
presentes. Una vez elegido el presidente dirige las actividades del grupo de
expertos a lo largo de toda la reunión. En calidad de secretario de la reunión se
asigna a un miembro del Comité Técnico.
Al concluir la parte “protocolar” de la sesión de apertura, se sigue la costumbre de
hacer una pausa para permitir que se retire el personal que no interviene
directamente en los aspectos esenciales de la reunión.
Podrán crearse los grupos de trabajo o de redacción necesarios para preparar
propuestas sobre los proyectos que se sometan a la consideración del panel de
expertos. Las atribuciones de estos grupos serán claras y detalladas y se les fijará
un plazo para que presenten los resultados de su labor. El presidente designará
entre los miembros del panel de expertos a los coordinadores de cada grupo de
trabajo o redacción. A menos que concurran circunstancias excepcionales, el
presidente no actuará como coordinador de un grupo de trabajo. Siempre que sea
posible, un miembro del Comité Técnico prestará asistencia a los grupos de
trabajo o redacción.
6.2. Recursos Humanos
Los recursos humanos constituyen el eje central de esta herramienta. las personas
que integren el panel deben tener una experiencia reconocida en el área solicitada
de la evaluación, ser independientes respecto del programa evaluado, tener
capacidad para trabajar en equipo y disponibilidad suficiente para implicarse como
corresponde a lo largo de todo el proceso de evaluación.
PREPARACION Y EVALUACION DE PROYECTOS Página 15
OPINION DE EXPERTOS
Composición de los Paneles de Expertos
El Coordinador General solicitará a los Estados participantes del Sistema
Regional que designen candidatos para los Paneles de Expertos y
seleccionará entre ellos aquellos que se conozca disponen de conocimiento
y experiencia en las cuestiones técnicas que tengan que examinar el Panel.
El Coordinador General se cerciorará de que los seleccionados:
a) Pertenezcan a Estados u organizaciones que estén en condiciones
de proporcionar fácil acceso a servicios de investigación y asistencia
especializada, cuando se considere necesario;
b) Entre los Estados invitados haya un nivel de desarrollo técnico y
cuenten con los recursos para su ejecución que correspondan al
promedio de la región;
c) a través de estos se consiga una representación de las distintas
realidades de los miembros del Sistema Regional.
Cuando se reciban las candidaturas, el Coordinador General decidirá qué
miembros integrarán el panel de expertos y podrá considerar si es
necesario extender invitaciones adicionales cuando el equilibrio deseado de
especialistas o realidades de la región se vea indebidamente afectado.
La composición de todo panel de expertos podrá ser objeto de revisión por
parte del Coordinador General, cada vez que ello se considere oportuno
para la mejor realización de la tarea asignada.
Funciones de los miembros de los Paneles de Expertos
PREPARACION Y EVALUACION DE PROYECTOS Página 16
OPINION DE EXPERTOS
Los miembros de los Paneles de Expertos tendrán el deber de contribuir
sustancialmente a la labor de los Paneles. Los miembros participan en las
deliberaciones de los paneles a título personal y con carácter de expertos, y
no actúan como representes de quienes hayan presentado sus
candidaturas. Por consiguiente, deben manifestar su opinión personal y no
sostener los criterios o puntos de vistas establecidos por Estados u
organizaciones.
6.3. Recursos financieros
Es bien sabido que el panel de expertos es una herramienta de evaluación
económica. No obstante, si en su labor se prevén viajes de largo recorrido y visitas
sobre el terreno, el presupuesto destinado a remunerar al panel y a cubrir sus
diversos gastos puede llegar a incrementarse considerablemente.
Las principales partidas de gastos en las que hay que pensar al realizar la
estimación son:
Los honorarios de los expertos, del/la secretario/a y de los posibles
subcontratistas que realicen los estudios encargados por el panel;
Los costes de desplazamientos, comunicación, y de edición, reproducción y
difusión de los informes;
Los costes de traducción, si procede.
PREPARACION Y EVALUACION DE PROYECTOS Página 17
OPINION DE EXPERTOS
7. LAS VENTAJAS Y LOS LÍMITES
Ventajas
Las ventajas de esta herramienta radican fundamentalmente en
el profundo conocimiento que tienen los expertos sobre los temas
objeto de la evaluación. Este conocimiento previo comporta:
un ahorro de tiempo considerable en relación con otras
herramientas de evaluación;
un coste reducido respecto a otras herramientas gracias a
dicho ahorro de tiempo;
una gran credibilidad de las conclusiones, dada la
reputación de los expertos;
una gran capacidad de adaptación a las diferentes
situaciones que puedan surgir durante la evaluación.
PREPARACION Y EVALUACION DE PROYECTOS Página 18
OPINION DE EXPERTOS
Límites
El funcionamiento del panel puede tender por estructura a
omitir las opiniones minoritarias y a «suavizar» las conclusiones.
La opinión de determinados expertos puede llegar a primar
sobre el resto, a costa de otras opiniones.
La pertenencia de los expertos al grupo de especialistas
del campo evaluado puede, por empatía, limitar la
independencia de su juicio.
La tendencia de los expertos a exceder el campo de sus
competencias reconocidas.
Posibilidades de utilización
En evaluaciones país o región, se puede recurrir al panel de expertos en
diversas circunstancias:
estudio de áreas extremadamente específicas, que requieran una
formación de alto nivel (p. ej.: ayuda a la investigación, altas
tecnologías, etc.);
estudio de los temas en los que las otras herramientas sean de difícil
aplicación (p. ej.: ayuda presupuestaria);
realización de evaluaciones de poca envergadura (p. ej.: ayuda a
países pequeños);
apoyo al juicio de los evaluadores sobre un tema en concreto en
evaluaciones de mayor envergadura;
formalización de los posibles efectos de un programa en evaluación
ex ante.
PREPARACION Y EVALUACION DE PROYECTOS Página 19
OPINION DE EXPERTOS
8. LISTAS DE CONTROL
Una de las técnicas más utilizada para la evaluación de los medios audiovisuales y
de enseñanza son los cuestionarios y escalas de respuesta, denominado también
por algunos autores como listas de control. Estos instrumentos suponen la
organización sistemática de una serie de cuestiones sobre las cuales se pretende
recoger información de forma ordenadas, y que previamente han sido
determinadas por evaluador o la persona que ha construido el instrumento.
Entre las ventajas principales que podemos incorporar a los cuestionarios nos
encontramos con las siguientes:
• Permiten recoger información de una lista estructurada de criterios
relevantes.
• Se puede ofrecer los resultados de forma cuantitativa.
• Suponen un cierto grado de análisis y reflexión sobre cuáles son las
dimensiones más significativas para la evaluación de un material.
• Son fáciles y económicas de aplicar.
• Por lo general son fáciles de comprender por las personas que deben de
cumplimentarla.
• Y pueden adquirir diferentes formatos.
Ahora regresando al tema de interés se puede ver que las listas de control se
dividen en dos partes estas son: Lista de Control para los Evaluadores y Lista de
Controlo para los Gestores. Pero Primero veremos dos conceptos mas antes de
entrar a ver cuáles son estas listas de control.
• Controlador/evaluador: persona asignada de controlar y evaluar el
seguimiento de un simulacro o ejercicio y la actuación de la organización
de respuesta a emergencias radiológicas, emitiendo instrucciones o
mensajes escritos que permiten mantener la secuencia planteada en el
escenario del mismo.
PREPARACION Y EVALUACION DE PROYECTOS Página 20
OPINION DE EXPERTOS
• Los gestores son una herramienta o software imprescindible para el
gestor o administrador de proyectos que permite llevar un control
minucioso de cada uno de los proyectos de una empresa. El control
implica todas las partes del trabajo, como la planificación, desarrollo y
producción, así como el trato con el cliente.
Ahora luego de ver estos conceptos conoceremos en las siguientes tablas cuales
son las listas de control para cada una de estas partes:
LISTA DE CONTROL PARA EVALUADORES
Preguntas Respuesta
Preparación y concepción
¿Se ha justificado la utilización de un panel de expertos demostrando la imposibilidad de obtener juicios por otra vía?
¿Se han tenido debidamente en cuenta los posibles conflictos de intereses de los expertos con el programa evaluado?
En caso de haber decidido mantener en el panel a expertos con determinados conflictos de intereses con el programa, ¿se han especificado los motivos de esta decisión? (Por ejemplo escasez de expertos en el tema en cuestión, equilibrio entre los distintos puntos de vista en el panel, etc.)
¿Las competencias de los miembros del panel permiten cubrir la totalidad de los temas que se van a tratar?
¿Garantiza el equilibrio global de la composición del panel una neutralidad respecto del tema objeto de evaluación?
Ejecución
¿El tiempo previsto para el panel es suficiente para abarcar el conjunto de las problemáticas que hay que analizar?
¿Se ha informado debidamente a los miembros del panel sobre su función y sobre las normas de funcionamiento de un panel de expertos?
¿Se ha puesto a disposición de los miembros del panel
PREPARACION Y EVALUACION DE PROYECTOS Página 21
OPINION DE EXPERTOS
modelos de entrevista, de procedimientos, etc. con vistas a la homogeneidad de la labor de los distintos equipos de trabajo?
¿Se han tenido en cuenta los posibles sesgos relacionados con la empatía?
¿Se han implicado a fondo todos los expertos en los trabajos del panel, durante todo su desarrollo?
¿Se ha garantizado la confidencialidad de los trabajos a lo largo de todo el proceso? (Por ejemplo gracias a información sistemática sobre dicha confidencialidad o a la destrucción de los documentos generados en fases intermedias.)
¿Se detallan en el informe los análisis realizados?
¿Se especifican en él los puntos de consenso?
¿Se mencionan y explican los puntos en los que ha habido desacuerdo?
LISTA DE CONTROL PARA LOS GESTORES
Preguntas Respuesta
¿Se ha justificado el empleo del panel de expertos?
¿La selección de los expertos es pertinente y
debidamente argumentada?
¿Se detallan en el informe los análisis realizados?
¿Se especifican en él los puntos de consenso?
¿Se mencionan y explican los puntos en los que ha
habido desacuerdo?
Finalmente podemos concluir que las técnicas e instrumentos que
fundamentalmente utilizaremos para la evaluación de los materiales multimedia
PREPARACION Y EVALUACION DE PROYECTOS Página 22
OPINION DE EXPERTOS
son diversas, y su elección dependerá de diferentes factores, como son los
objetivos que se persiguen, la experiencia del evaluador en la utilización de la
técnica concreta seleccionada, y el paradigma o modelo de evaluación dentro del
cual no situemos. Las técnicas que normalmente se utilizan para la evaluación que
son más utilizadas son los cuestionarios, las escalas de valoración, los grupos de
discusión, el juicio de expertos, y las escalas de actitudes.
9. BIBLIOGRAFIA
http://ec.europa.eu/europeaid/evaluation/methodology/examples/
too_pan_res_es.pdf
http://ec.europa.eu/europeaid/evaluation/methodology/tools/
too_pan_whe_es.htm#02_01
http://ec.europa.eu/europeaid/evaluation/methodology/tools/
too_pan_how_es.htm
http://books.google.com.bo/books?
id=GPVj7aqTXZAC&pg=PA228&lpg=PA228&dq=diferencia+entre+delp
hi+y+opinion+de+expertos&source=bl&ots=-W5XBov_w-
&sig=9QDHapnGgQfePl_G2-
PREPARACION Y EVALUACION DE PROYECTOS Página 23
OPINION DE EXPERTOS
vo1saBeC0&hl=es#v=onepage&q=diferencia%20entre%20delphi%20y
%20opinion%20de%20expertos&f=false
http://adminoperaciones.blogspot.com/2011/03/consenso-de-un-
panel.html
PREPARACION Y EVALUACION DE PROYECTOS Página 24
