Research Tools for Understanding Disinformation

0. Resumen ejecutivo

Redactado por Bret Barrowman, especialista sénior en investigación y evaluación, evidencia y práctica de aprendizaje del Instituto Republicano Internacional

 

La programación eficaz para la democracia, los derechos humanos y la gobernanza requiere que los profesionales evalúen con exactitud las causas subyacentes de los desórdenes de la información y determinen la eficacia de las intervenciones para resolverlos. La investigación sirve a estos objetivos en varios puntos del ciclo del programa de DDG: análisis de problemas y contexto, focalización, diseño y desarrollo de contenido, monitoreo, adaptación y evaluación. 

Metas de investigación 

La aplicación de la investigación en el ciclo del programa de DDG brinda apoyo a los programas mediante el cumplimiento de los objetivos científicos de descripción, explicación y predicción. La descripción identifica características de los sujetos de investigación, y patrones o relaciones generales. La explicación determina las relaciones de causa y efecto. La predicción pronostica qué podría suceder en el futuro. 

Investigación para el análisis del contexto y el diseño

Los programas de DDG eficaces para contrarrestar la desinformación requieren identificar un problema específico o un conjunto de problemas en el entorno de la información en un contexto en particular. Los métodos clave son el análisis del panorama, el análisis de las partes interesadas, el análisis de la economía política y el uso de encuestas o entrevistas para identificar a los beneficiarios potenciales o temas particularmente destacados dentro de un contexto específico. 

Ejemplos de preguntas de investigación generales:

  • ¿Cuáles son los principales factores de impulso de la desinformación en este contexto?
  • ¿Cuáles son los incentivos para que los actores clave perpetúen o mitiguen la desinformación en este contexto?
  • ¿A través de qué medio es probable que la desinformación tenga el mayor impacto en este contexto?
  • ¿Qué evidencia indica que nuestras actividades propuestas mitigarán el problema?
  • ¿Qué grupos son los principales destinatarios o consumidores de desinformación en este contexto? 
  • ¿Qué temas clave o divisiones sociales tienen mayor probabilidad de ser objeto de desinformación en este contexto?

Investigación de implementación

Hay varios enfoques de investigación y medición a disposición de los profesionales para monitorear actividades relacionadas con la información y la desinformación, tanto para las funciones de rendición de cuentas del programa como para la adaptación a las condiciones cambiantes. |Los métodos clave son las métricas de audiencia de medios digitales y analógicos, la medición de conocimientos, actitudes o creencias con encuestas o grupos focales, las métricas de participación en los medios, el análisis de redes y las pruebas A/B. Algunas preguntas clave de investigación incluyen:

  • ¿Cuántas personas participan en actividades o intervenciones del programa?
  • ¿Qué grupos demográficos, de comportamiento o geográficos participan en las actividades del programa? ¿Está llegando la intervención a los beneficiarios previstos? 
  • ¿Cómo reaccionan los participantes, beneficiarios o audiencias a las actividades o materiales del programa? ¿En qué se diferencian estas reacciones entre subgrupos y, específicamente, entre los grupos marginados?
  • ¿Es un modo o mensaje más eficaz que otro para hacer que la audiencia se interese por la información o la comparta con otros? ¿En qué se diferencian la aceptación y el intercambio de información entre los subgrupos? ¿Cuáles son las barreras para la aceptación de información o programas entre los grupos marginados?
  • ¿Qué marco del contenido es más probable que reduzca el consumo de desinformación o aumente el consumo de información confiable? Por ejemplo, ¿es más probable que un mensaje de verificación de datos haga que los consumidores modifiquen sus creencias en la dirección de la verdad, o que se atrincheren en la creencia de la desinformación original? ¿Este efecto varía entre subgrupos?

Investigación de evaluación

El programa de DDG y la evaluación de impacto pueden identificar y describir resultados clave, evaluar o mejorar la calidad de la implementación del programa, identificar lecciones que podrían mejorar la implementación de programas similares, o atribuir cambios en el resultado clave a la intervención de un programa. Los métodos clave son las evaluaciones aleatorizadas y las evaluaciones cuasi- o no experimentales, incluidos los diseños de preprueba/posprueba, las diferencias en diferencias, el emparejamiento estadístico, los estudios de casos comparativos, el seguimiento de procesos y los análisis de regresión. Algunas preguntas clave de investigación incluyen:

  • ¿Hay resultados observables asociados con el programa? 
  • ¿Un programa o actividad produce un resultado de interés? Por ejemplo, ¿un programa de alfabetización mediática aumentó la capacidad de los participantes de distinguir entre noticias verdaderas y falsas? ¿Un programa produce resultados no buscados?
  • ¿Cuál es el magnitud del efecto (es decir, el impacto) de una actividad en un resultado de interés? 
  • ¿Cuál es la dirección del efecto de una actividad en un resultado de interés? Por ejemplo, ¿un programa de verificación de datos disminuyó la confianza en los informes de noticias falsas o produjo una mayor aceptación de esos informes a través de una reacción negativa?

Recomendaciones

  • La selección de diseños de investigación y métodos de recopilación de datos debe partir de preguntas de investigación específicas. Comprometerse con un diseño específico o un método de recopilación de datos limitará las preguntas que el investigador pueda responder.  
  • Utilice un modelo a escala de prueba piloto para las actividades o el contenido del programa. Con el uso de uno o más de estos enfoques de investigación, organice talleres de prueba de intervenciones en pequeños grupos de encuestados y utilice datos piloto para refinar los enfoques prometedores antes de implementarlos en un conjunto más grande de beneficiarios. 
  • Proteja la información de identificación personal (PII). Todos los métodos de recopilación de datos descritos en esta sección pueden recopilar información sobre características, actitudes, creencias y voluntad de participar en acciones políticas. Independientemente del método, los investigadores deben hacer todo lo posible por obtener el consentimiento informado para participar en la investigación y deben tener cuidado de proteger los datos personales y eliminar la información de esos datos que permita identificar a personas.
  • Considere asociarse con organizaciones de investigación, laboratorios universitarios o investigadores académicos individuales que puedan tener una ventaja comparativa en el diseño y la implementación de diseños de investigación complejos y puedan tener interés en estudiar los efectos de los programas de lucha contra la desinformación.