Академический Документы
Профессиональный Документы
Культура Документы
Documento
CEACS-DD.002.4
Título
TÉCNICAS DE CONSULTA A EXPERTOS
MEDIANTE TALLERES DELPHOS
Autor(es)
Oscar Rodríguez Nieto
Fecha
Octubre de 2008
Temas Relacionados
CEACS
Técnicas de Investigación, Talleres, CENTRO DE ESTUDIOS
Métodos cualitativos, métodos
cuantitativos. Y
Resumen ASESORÍAS EN
El Taller Delphos es una técnica multicriterio de
recolección de información diseñada por CEACS
CIENCIAS SOCIALES
con el fin de consultar la opinión experta de
personas con amplios conocimientos de un tema en
particular; Conocer los diferentes argumentos que
sustentan las diferentes opiniones consultadas y
Documentos de
contrastarlas mediante debate.; Contar con
indicadores cuantitativos objetivos que midan,
Discusión en
califiquen o ponderen los aspectos investigados de Ciencias Sociales
acuerdo con la opinión conjunta de las personas
consultadas; Tener en cuenta en dichos indicadores
tanto las opiniones mayoritarias como las
minoritarias
-1-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
-2-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
Los métodos de expertos, en especial los que incluyen Cuando no se presenta una organización
discusión en grupo, tienen las siguientes ventajas: estricta del debate las discusiones tienden a
volverse circulares. Es posible que dos
La información disponible, al final del
opiniones enfrentadas desemboquen en la
ejercicio, será siempre mayor que la que
reformulación persistente de los mismos
dispone el participante mejor preparado, es
argumentos de parte y parte.
decir, que la del experto más versado en el
tema. Esta afirmación se basa en la idea de que La presión social que el grupo ejerce sobre sus
varias cabezas son mejor que una. participantes puede provocar acuerdos con la
mayoría, aunque la opinión de ésta sea errónea.
El número de factores que es considerado por
Así, un experto puede renunciar a la defensa de
un grupo es mayor que el que podría ser tenido
su opinión ante la persistencia del grupo en
en cuenta por una sola persona. Cada experto
rechazarla.
podrá aportar a la discusión general la idea que
tiene sobre el tema debatido desde su área de En algunos casos el grupo hace de su
conocimiento. supervivencia un fin. Esto provoca que se
tienda a conseguir un acuerdo en lugar de
Es menos costoso que otros procesos de
producir una buena previsión.
análisis cuando se involucran demasiados
aspectos o variables que influyen En estos grupos hay veces que el argumento
marginalmente. que triunfa es el más citado, en lugar de ser el
más válido.
Sin embargo, estos métodos también presentan
inconvenientes, como son: Puede existir un sesgo común a todos los
participantes en función de su procedencia o su
cultura, lo que daría lugar a la no aparición en
-3-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
3
UPM, ibidem
4
UPM, ibidem
-4-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
o El experto puede defender sus Antes de iniciar un Delphi clásico se realizan una serie
argumentos con la tranquilidad que da de tareas previas, como son:
saber que en caso de que sean
erróneos, su equivocación no va a ser Delimitar el contexto y el horizonte temporal
conocida por los otros expertos. en el que se desea realizar la previsión sobre el
tema en estudio.
Iteración y realimentación controlada: La
iteración se consigue al presentar varias veces Seleccionar el panel de expertos y conseguir su
el mismo cuestionario. Como, además, se van compromiso de colaboración. Las personas que
presentando los resultados obtenidos con los sean elegidas no sólo deben ser grandes
cuestionarios anteriores, se consigue que los conocedores del tema sobre el que se realiza el
expertos vayan conociendo los distintos puntos estudio, sino que deben presentar una
de vista y puedan ir modificando su opinión si pluralidad en sus planteamientos. Esta
los argumentos presentados les parecen más pluralidad debe evitar la aparición de sesgos en
apropiados que los suyos. la información disponible en el panel.
Respuesta del grupo en forma estadística: La Explicar a los expertos en qué consiste el
información que se presenta a los expertos no método. Con esto se pretende conseguir la
es sólo el punto de vista de la mayoría, sino obtención de previsiones fiables, pues van los
que se presentan todas las opiniones indicando expertos van a conocer en todo momento cuál
el grado de acuerdo que se ha obtenido. es el objetivo de la cada una de los procesos
que requiere la metodología.
En la realización de un Delphi aparece una
terminología específica: En un Delphi clásico se pueden distinguir cuatro
circulaciones o fases:
Circulación: Es cada uno de los sucesivos
cuestionarios que se presenta al grupo de Primera circulación: El primer cuestionario es
expertos. no estructurado, no existe un guión prefijado,
sino que se pide a los expertos que establezcan
Cuestionario: El cuestionario es el documento criterios para analizar con respecto a un tema
que se envía a los expertos. No es sólo un en particular. Generalmente se pregunta cuáles
documento que contiene una lista de preguntas, son los eventos y tendencias más importantes
sino que es el documento con el que se que van a suceder en el futuro referentes al
consigue que los expertos interactúen, ya que área en estudio. Cuando los cuestionarios son
en él se presentarán los resultados de anteriores devueltos, el moderador realiza una labor de
circulaciones. síntesis y selección, obteniendo un conjunto
manejable de eventos, cada uno de los cuales
Panel: Es el conjunto de expertos que toma está definido de la forma más clara posible.
parte en el Delphi. Este conjunto formará el cuestionario de la
segunda circulación.
Moderador: Es la persona responsable de
recoger las respuestas del panel y preparar los Segunda circulación: Los expertos reciben el
cuestionarios. cuestionario con los sucesos y se les pregunta
-5-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
por la fecha de ocurrencia. Una vez utilizados por los expertos. Teóricamente, ya
contestados, los cuestionarios son devueltos al habría terminado el Delphi, quedando tan sólo
moderador, que realiza un análisis estadístico la elaboración de un informe en el que se
de las respuestas. El análisis se centra en el indicarían las fechas calculadas a partir del
cálculo de la mediana (v.g. año en que hay un análisis de las respuestas de los expertos y los
50% de expertos que piensan que va a suceder comentarios realizados por los panelistas. Sin
en ese año o antes), el primer cuartil o cuartil embargo, si no se hubiese llegado a un
inferior y tercer cuartil o cuartil superior. El consenso, existiendo posturas muy distantes, el
moderador diseña el cuestionario de la tercera moderador debería confrontar los distintos
circulación que comprende la lista de eventos y argumentos para averiguar si se ha cometido
los estadísticos calculados para cada evento. algún error en el proceso.
Tercera circulación: Los expertos reciben el Las principales desventajas del método Delphi son:
tercer cuestionario y se les solicita que realicen
nuevas previsiones. Si se reafirman en su La información que llega a los expertos en
previsión anterior y ésta queda fuera de los cada circulación puede ser resaltada o
márgenes entre los cuartiles inferior y superior, minimizada en algunos aspectos dependiendo
deben dar una explicación del motivo por el de la organización que le de el moderados. El
que creen que su previsión es correcta y la del orden en que se tratan los temas en el resumen
resto del panel no. Estos argumentos se y la cantidad de espacio que se otorga a
realimentarán al panel en la siguiente diferentes argumentos puede direccionar el
circulación. Al ser estos comentarios debate. Esto en algunos casos puede ser una
anónimos, los expertos pueden expresarse con ventaja, si el moderador lo hace en pos de
total libertad, no estando sometidos a los obtener los objetivos de investigación y no
problemas que aparecen en las reuniones cara a para presionar un resultado favorable a sus
cara. Cuando el moderador recibe las propias opiniones.
respuestas, realiza de nuevo el análisis
Es un método que toma mucho tiempo para
estadístico y, además, organiza los argumentos
obtener los resultados definitivos. Al llevarse a
dados por los expertos cuyas previsiones se
cabo por correo y no en tiempo real, depende
salen de los márgenes intercuartiles. El
de la disponibilidad de tiempo de los expertos
cuestionario de la cuarta circulación va a
para contestar. El tiempo mínimo que dura
contener el análisis estadístico y el resumen de
cada circulación es el que el más demorado de
los argumentos.
los expertos se tome para responder. En los
Cuarta circulación. Se solicita a los expertos casos en los que se limita demasiado el tiempo
que hagan nuevas previsiones, teniendo en de respuesta algunos expertos pueden quedar
cuenta las explicaciones dadas por los excluidos en el informe y deberán aplazar la
expertos. Se pide a todos los expertos que den presentación de sus argumentos hasta la
su opinión en relación con las discrepancias siguiente circulación.
que han surgido en el cuestionario. Cuando el
Al ser completamente anónimo, no es posible
moderador recibe los cuestionarios, realiza un
vincular el tipo de respuesta dada por un
nuevo análisis y sintetiza los argumentos
-6-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
experto particular con su contexto. Por ejemplo participación es explícita mientras que en el segundo la
si se pregunta por el futuro del cultivo de la participación es anónima. Ambos enfoques tienen
papa, las opiniones de un comercializador ventajas y desventajas como ya se ha mencionado. Para
experto, las de un productor experto y la de un maximizar las ventajas y minimizar las desventajas los
funcionario del Ministerio de Agricultura serán talleres Delphos prevén que en la primera consulta que
posiblemente distintas pero los demás se realiza a los expertos durante el taller, la opinión
participantes no sabrán el porqué de dichas pueda ser anónima o identificada, dependiendo del
posiciones. Si se supiera el origen de las tema y el tipo de personas convocadas; durante la fase
posiciones, podrían ponderar dichas respuestas de discusión el anonimato se pierde en la medida que
y hacerse a una opinión más objetiva del los participantes expresan sus opiniones libremente, si
asunto. no se ha preguntado el nombre en la primera consulta,
podría conservarse un anonimato discrecional del
Algunas de estos inconvenientes se han superado experto, el cual estaría en capacidad de revelar o no su
mediante la utilización de sitios web especializados opinión al resto del grupo; en la fase final se mantiene
para desarrollar este tipo de debates con el anonimato de la respuesta definitiva de cada persona
retroalimentación inmediata de los resultados de las ante el resto del grupo aunque se puede pedir
consultas. identificación en caso de que se deseen ponderar las
opiniones de acuerdo con el grado de credibilidad de
3 CARACTERÍSTICAS DE LOS
cada experto, desde el punto de vista de quien va a usar
TALLERES DELPHOS
la información.
Los talleres Delphos buscan aprovechar las ventajas
tanto del método Delphi Clásico, como la de los grupos
de discusión entre expertos. En resumen, tienen en
común con los talleres el hecho de realizarse de manera
presencial y con el Método Delphi el realizar más de
una vuelta de consulta para enriquecer las opiniones de
unos participantes con los argumentos de los otros.
Tienen tres fases claramente definidas: consulta inicial,
debate y consulta final. Los detalles se explican más
adelante.
-8-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
la segunda respuesta no es de público conocimiento de No se trata de preguntar sobre temas en los que
los demás participantes. Es posible que finalmente los exista amplio acuerdo o realizar preguntas que
líderes y los insistentes logren imponer sus opiniones se puedan responder objetivamente con otros
pero, en lugar de tener que convencer solamente al métodos de investigación.
observador/investigador, deberán convencer al mayor
El diseño del formulario debe ser claro y las
número de personas del grupo, lo cual resulta válido
preguntas deben ir al grano. Las preguntas de
desde una perspectiva democrática de la medición de escogencia múltiple deben considerar las
los resultados. respuestas más probables, pero deben dejar
espacio para incorporar nuevas opciones por
Tanto en los talleres de discusión tradicionales como en parte de los participantes. Las preguntas de
el método Delphi clásico, y más en primer caso que en calificación deben indicar cuál es la mayor y
el segundo, las opiniones minoritarias desaparecen menor calificación que se puede otorgar y el
prontamente de escena. En los talleres Delphos el significado en términos conceptuales de cada
debate se ordena y la palabra se otorga de acuerdo con respuesta. Otro tipo de preguntas típicas serán
los resultados estadísticos de la primera consulta. Así del tipo: “ordene según su importancia los
pues, el moderador puede solicitar explícitamente a los siguientes...” o “Escoja de los siguientes... los
participantes que expresaron opiniones diferentes a las (cuantos) más....” ó “escriba el valor más bajo
de la mayoría del grupo emitir sus argumentos y y el valor más alto que cree que tendrá... en los
motivaciones, para que el grupo las pueda comparar próximos (cuantos) meses” ó “de 1 a 100, cuál
con las de algunos de los opinaron en forma contraria. cree que sea la probabilidad de que...”.
-9-
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
cuales la técnica se utiliza para tomar Revisión Bibliográfica, tanto para establecer un
decisiones que afectan directa o indirectamente marco teórico, jurídico, técnico o antecedentes
a los participantes debe evitarse este tipo de históricos, como para buscar resultados de
selección por referencia de los mismos estudios empíricos sobre el tema a nivel local,
participantes para evitar la formación de regional, nacional o internacional.
coaliciones previas al ejercicio, a menos que
ese sea uno de los objetivos previstos. Levantamiento de información secundaria,
sistematización y generación de cuadros
Dependiendo del tema podrá ser necesario el estadísticos
buscar equilibrar la participación desde
diferentes puntos de vista (posiciones políticas Levantamiento de información primaria
encontradas, académicos vs pragmáticos, lo mediante técnicas cuantitativas o cualitativas.
regional vs lo nacional, público vs privado,
hombres vs mujeres, jóvenes vs mayores, etc). En el proceso de convocatoria, se deben tener en cuenta
para esto debe tenerse claro cuales pueden ser los aspectos que normalmente requiere una reunión de
las opiniones divergentes a priori.. acuerdo con el perfil. Si alguno de los invitados desea
conocer quienes van a asistir a la reunión debe
El número de convocados puede fluctuar entre suministrarse toda la información disponible
10 y 30 personas, teniendo en cuenta que en
grupos muy pequeños es posible que no se El día del Taller deben tenerse contemplados y
generen diferencias de opinión importantes y organizados todos los aspectos logísticos que se
que los grupos demasiado grandes son difíciles consideren necesarios. Hay que tener en cuenta que no
de controlar y de procesar la información es conveniente ofrecer plato fuerte o refrigerio mientras
dentro del tiempo del taller.
se desarrolla el debate, porque esto puede distraer la
En general, si el tema es lo suficientemente atención de los participantes y romperse la dinámica
apasionante para el invitado, este no sólo no del taller.
cobrará sino que agradecerá que le hayan
tenido en cuenta. Si se trata de funcionarios Salvo que se haya planeado específicamente lo
para los cuales la participación en este tipo de contrario, el formulario de la encuesta inicial debe
ejercicios hace parte de su trabajo, será incluir un espacio para la identificación del
necesario motivarlo con el tema pues lo común entrevistado.
sera que no se le pueda remunerar
adicionalmente. Sin embargo en algunos casos Así mismo, a menos que se considere necesario lo
es necesario pagar los honorarios contrario, se deben dar explicaciones previas acerca del
correspondientes al tiempo de participación y funcionamiento del taller, en especial explicar que el
desplazamiento al taller, con el objeto de formulario de la encuesta se llenará dos veces y que en
garantizar la permanencia durante su la segunda se podrán cambiar las respuestas de acuerdo
transcurso. con el debate intermedio. Esto con el fin de organizar el
debate, dejar claras las reglas de funcionamiento y
Es importante tener conciencia de que la interacción minimizar las posibles sorpresas para el invitado. Se
entre los participantes no es lo único que puede debe explicar también que las respuestas a los
enriquecer el debate. En ocasiones será valioso llevar a formularios son individuales
cabo una investigación previa que puede incluir uno o
varios de los siguientes aspectos:
- 10 -
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
Una vez llenados los formularios de la primera vuelta temáticas) tenderán a responder lo que les
se llevan a cabo dos actividades paralelas: el hubiera gustado que les preguntaran y no lo
procesamiento de los datos y la presentación de la que realmente se les preguntó y manejarán sus
información adicional disponible sobre el tema, lo cual argumentos para llevarlos hacia su tema
puede incluir las investigaciones descritas particular de interés. Esto, que es uno de los
mayores riesgos en los grupos de discusión con
anteriormente.
preguntas abiertas se minimiza en los Talleres
Los resultados se pueden presentar mediante gráficas Delphos por el carácter estructurado de los
formularios, sin embargo el moderador debe
de torta o histogramas, de manera que sea claro en qué
tener la habilidad de saber cuando la discusión
proporción o frecuencia de respuesta se obtuvo en cada
se desvió y recordar volver al rumbo normal de
opción de cada pregunta. Habrá posiblemente
la reunión.
preguntas en las que la mayoría de los asistentes tengan
una respuesta similar, las cuales no tienen mucha Durante la discusión debe haber una persona
discusión, aunque se pueden pedir explicaciones por así especialmente dedicada a tomar nota de las
algunos de los participantes desean aclarar el sentido de posiciones y argumento de todos aquellos que
su respuesta. Habrá también preguntas para las cuales toman la palabra.
se presente una mayor dispersión de respuestas, en
cuyo caso será pertinente preguntar a quienes Luego de evacuadas el análisis de todo el formulario,
respondieron opciones extremas o calificaron en forma viene la fase más importante del ejercicio, el
contradictoria para que enuncien sus argumentos. diligenciamiento del formulario por segunda vez. Es el
momento ideal para ofrecer un delicioso postre o
Como en todo taller de discusión, debe tenerse cuidado refrigerio. Sin embargo si el taller se ha demorado más
en varios aspectos: de lo previsto y los asistentes tienen problemas de
tiempo, podrán querer irse sin responderlo o
El manejo del tiempo. De acuerdo con el simplemente escabullirse disimuladamente haciendo
desarrollo del taller y el tiempo disponible para “mutis por el foro”. Podrá suceder también que otras
terminar, se deberá buscar respuestas más personas salgan despidiéndose de todos los asistentes y
concretas y dar prioridad a las preguntas con
desordenando la reunión, eso sin contar con que se
mayor diversidad de respuesta frente a las más
convierte en la oportunidad de los indecisos para
homogéneas.
marcharse.
Argumentos reiterativos. Una vez se ha
expuesto un argumento con suficiente Hay varias formas de evitar esta situación:
ilustración, debe controlarse las
Sobreestimar un poco el tiempo requerido y
contrarespuestas que vuelven sobre los mismos
anunciar la duración del taller en la
argumentos. Una forma de hacerlos es
convocatoria, de manera que los invitados
explicando que cada cual expone sus razones
puedan reservar el tiempo necesario.
de respuesta y que el ejercicio no busca obtener
una única respuesta sino conocer los diferentes Programar el taller inmediatamente antes de
argumentos sobre el mismo asunto un evento interesante para los asistentes (una
conferencia, un almuerzo, una junta. Esto
Cuando se contacta personas muy
siempre y cuando el segundo evento pueda
especializadas, que tienen especial interés por
correrse si se alarga el taller.
un elemento particular del tema (obsesiones
- 11 -
Documentos de Discusión en Ciencias Sociales TÉCNICAS DE CONSULTA A EXPERTOS
CEACS - DD.002.3 MEDIANTE TALLERES DELPHOS
Junio de 2004 Rodríguez N, Oscar
Reconocer honorarios por la asistencia al taller Realizado por CEACS para Finianciera
o alguna otra contraprestación. Compartir S.A. con expertos en microfinanzas
Desarrollo Rural en 2006. Taller realizado por Econometría S.A. con directivos y técnicos de
Econometría S.A. con funcionarios de los programas de desarrollo y paz.
entidades relacionadas con el programa.
Para la definición de variables relevantes para
Evaluación de medidas regulatorias en el un futuro modelo explicativo de un indicador
Estudio “Evaluación del Impacto Regulatorio de impunidad procesal en “Evaluación de la
de Impacto del marco regulatorio en su política de lucha contra la impunidad de
conjunto, en relación con la sostenibilidad, violaciones de los derechos humanos e
viabilidad y dinámica del sector de las infracciones al DIH” realizado para la
telecomunicaciones” para la CRT. Talleres Vicepresidencia de la República en 2010. Un
realizados por Econometría con directivos de taller realizado por Econometría Consultores,
empresas de telecomunicaciones reguladas por con expertos de la Fiscalía, Procuraduría,
la CRT. Consejo Superior de la Judicatura y Programa
de Lucha contra la Impunidad.
Para la sistematización de experiencias en el
Estudio “Sistematización de los tres momentos Para la formulación de recomendaciones de
de intervención no financieros o tecnológicos Política, relacionadas con la gestión de
y de las metodologías, instrumentos y Pasivos ambientales mineros en “Diseño y
herramientas de gestión desarrolladas e validación del marco conceptual y
implementadas” realizado para el Programa metodológico para caracterizar, priorizar y
PADEMER del Ministerio de Agricultura y valorar económicamente los pasivos
Desarrollo Rural en 2007. Ocho talleres ambientales mineros en Colombia.”
realizados por Econometría S.A. con Desarrollado por econometría Consultores
miembros de asociaciones de productores para el ministerio de Minas y Energía en 2010.
rurales. Tres talleres desarrollados en Medellín y en
Bogotá con representantes de entidades del
Para la definición de Lineamientos de Política sector, empresas, ONG y mineros
en la Consultoría para el “Acompañamiento a independientes, en el marco del Seminario
la CAF en la definición de Metodologías de Taller sobre Pasivos Ambientales Mineros en
Seguimiento y Evaluación de Proyectos y Colombia.
Programas Sociales” realizado para la
Corporación Andina de Fomento entre 2006 y
2008. Taller realizado por Econometría S.A.
con altos directivos de la CAF en Caracas.
- 13 -