Efecto de modo

Aspecto de la metodología de encuestas y sondeos

El efecto modal es un término amplio que se refiere a un fenómeno en el que un modo particular de administración de la encuesta hace que se recopilen datos diferentes. Por ejemplo, cuando se formula una pregunta utilizando dos modos diferentes ( por ejemplo, papel y teléfono), las respuestas a un modo pueden ser significativamente y sustancialmente diferentes de las respuestas dadas en el otro modo. Los efectos modales son un artefacto metodológico que limita la capacidad de comparar los resultados de diferentes modos de recopilación.

Teoría

Los distintos modos de encuesta colocan a los encuestados en diferentes estados de ánimo, lo que se conoce como "guión mental". [1] Esto puede afectar los resultados que arrojan. Por ejemplo:

  • Las encuestas presenciales dan lugar a un guión de "invitado". Es más probable que los encuestados traten a los entrevistadores cara a cara con amabilidad y hospitalidad, lo que los lleva a ser más agradables y a influir en sus respuestas. Las diferencias entre los entrevistadores que realizan la encuesta también pueden dar lugar a una serie de "efectos del entrevistador" en los resultados de la encuesta.
  • Las entrevistas telefónicas dan lugar a un guión de "abogado" o "teleoperador". Los encuestados pueden dar menos prioridad a las entrevistas telefónicas, lo que hace que sea más probable que respondan a las preguntas con el menor esfuerzo posible para terminar la entrevista antes. La cautela sobre quién puede estar al otro lado del teléfono también puede llevar a los encuestados a dar respuestas socialmente más aceptables que las que darían en otros modos de encuesta.

Es probable que los efectos modales sean mayores cuando las diferencias entre los modos son mayores [ cita requerida ] . Las entrevistas personales son sustancialmente diferentes de los formularios autocompletados en papel y lápiz. Por el contrario, las encuestas web, los formularios en papel y lápiz y otros formularios autocompletados son bastante similares (cada uno requiere que los encuestados lean y respondan en privado a una pregunta) y, por lo tanto, los efectos modales pueden minimizarse.

Los usuarios de las encuestas deben tener en cuenta el potencial de efectos modales al comparar los resultados de estudios realizados en diferentes modalidades. Sin embargo, esto es difícil, ya que los efectos modales pueden ser complejos y estar sujetos a interacciones entre la demografía de los encuestados, el tema de estudio y la modalidad. A menos que los efectos modales se investiguen formalmente para el instrumento de la encuesta, es difícil cuantificar su magnitud y, en su lugar, se requieren juicios cualitativos de expertos familiarizados con el tema de estudio y las modalidades respectivas.

Sesgo de deseabilidad social

Los estudios sobre los efectos modales a veces son contradictorios, pero sí surgen algunos patrones generales. Por ejemplo, el sesgo de deseabilidad social tiende a ser más alto en las encuestas telefónicas y más bajo en las encuestas web: [2] [3]

  1. Encuestas telefónicas
  2. Encuestas cara a cara
  3. Encuestas de respuesta de voz interactiva (IVR)
  4. Encuestas por correo
  5. Encuestas web

Por lo tanto, como los datos recopilados sobre temas sensibles (como el comportamiento sexual o las actividades ilícitas) cambiarán según el modo de administración, los investigadores deben ser cautelosos al combinar datos o comparar resultados de diferentes modos.

Diferencias en las preguntas entre modos

Algunos modos requieren una redacción de las preguntas diferente a la de otros, para adaptarse a las características del modo. Por ejemplo, los formularios autocompletados pueden utilizar listas de ejemplos o instrucciones extensas para ayudar a los encuestados a responder preguntas relativamente complejas. Por el contrario, en las entrevistas telefónicas, los encuestados suelen estar limitados por su memoria de trabajo y es poco probable que comprendan una pregunta larga con múltiples subcláusulas. Otro ejemplo es una "matriz" de preguntas, que se encuentra comúnmente en los formularios autocompletados, que no se puede leer fácilmente en una entrevista verbal; por lo general, una matriz tendría que estar escrita como una serie de preguntas individuales.

Las diferencias en la redacción de las preguntas en los distintos modos pueden hacer que se recopilen datos diferentes en función del modo. Sin embargo, no siempre es así, y la adaptación adecuada de las preguntas a un nuevo modo puede dar lugar a datos comparables [ cita requerida ] . Los diseñadores de encuestas deben tener en cuenta las convenciones del modo al adaptar las preguntas. Por ejemplo, si bien puede ser aceptable exigir a los encuestados que calculen ellos mismos las cifras totales en un formulario en papel, los encuestados pueden percibirlo como una carga si se les exige en un formulario web (donde los encuestados podrían esperar que la computadora calcule los totales automáticamente). Esto, a su vez, puede cambiar su actitud hacia el formulario, alterando su comportamiento y, en última instancia, cambiando los datos recopilados.

Identificación y resolución de efectos modales

Los efectos modales se pueden identificar incorporando un experimento a la encuesta, donde una proporción de los encuestados se asigna a cada modo. Las diferencias en los resultados de cada modo deberían identificar el "efecto modal" para esta encuesta en particular.

Una vez que se ha cuantificado el efecto de un modo, puede ser posible utilizar esta información para reprocesar datos existentes y permitir la comparación entre datos recopilados en diferentes modos (por ejemplo, retrospectivamente, una serie de tiempo para determinar cuáles habrían sido los resultados pasados ​​si se hubieran administrado en el nuevo modo).

Cobertura diferencial entre modos

Los distintos modos de administración pueden excluir inherentemente a algunas partes de la población objetivo. Esto potencialmente sesga la muestra que se toma y cambia los datos de lo que se habría recopilado utilizando otro modo. Por ejemplo, las personas sin teléfono en casa están excluidas de las encuestas de marcación aleatoria de dígitos (RDD), y es poco probable que las personas sin acceso a Internet completen una encuesta web. Esto significa que se toman diferentes muestras de la población cuando se utilizan diferentes modos. A menos que los experimentos estén diseñados específicamente para investigar la cobertura diferencial, los efectos del modo se verán confundidos por la cobertura [4] , y las diferencias significativas entre los modos/condiciones experimentales podrían tener varias explicaciones:

  • propiedades del modo;com3
  • diferentes 'tipos' de personas que responden a los diferentes modos;
  • tanto las propiedades del modo como los diferentes 'tipos' de encuestados (de manera aditiva);
  • una interacción , donde algunos encuestados se ven afectados por las propiedades del modo, pero otros no.

Este problema se agrava cuando en la administración "en vivo" de una encuesta se utilizan múltiples modos. Algunas encuestas utilizan múltiples modos, lo que permite a los encuestados elegir el método que les resulte más conveniente. Es decir, se espera que diferentes "tipos" de encuestados completen diferentes modos en función de sus propias elecciones. En este caso, los efectos del modo son difíciles de cuantificar, ya que la asignación aleatoria de los encuestados a una condición no refleja su preferencia. Un experimento de este tipo carece de validez externa y los resultados no se generalizarían directamente a situaciones que ofrezcan a los encuestados una opción. No asignar aleatoriamente a los participantes a una condición (es decir, permitirles elegir, manteniendo así la validez externa) significaría que las diferencias aparentes entre los modos reflejarían el efecto combinado de a) diferentes tipos de encuestados que eligen cada modo y b) cualquier efecto del modo.

Referencias

  1. ^ Groves, Robert M. (1989). Errores de encuesta y costos de encuesta , Nueva York: Wiley-Interscience.
  2. ^ Frauke Kreuter , Stanley Presser y Roger Tourangeau. "Sesgo de deseabilidad social en encuestas CATI, IVR y web: los efectos del modo y la sensibilidad a las preguntas". Public Opin Q (2008) 72(5): 847–865 publicado por primera vez en línea el 26 de enero de 2009 doi :10.1093/poq/nfn063
  3. ^ Allyson L. Holbrook, Melanie C. Green y Jon A. Krosnick. "Entrevistas telefónicas y cara a cara en muestras probabilísticas nacionales con cuestionarios largos: comparaciones entre la satisfacción del encuestado y el sesgo de respuesta de deseabilidad social". Public Opin Q (2003) 67 (1): 79–125. doi :10.1086/346010.
  4. ^ de Leeuw, E. (2005). Mezclar o no mezclar los modos de recolección de datos en las encuestas. Journal of Official Statistics, 21(2): 233-255.
Obtenido de "https://es.wikipedia.org/w/index.php?title=Efecto_de_modo&oldid=1168616195"