Amazon MTurk: consejos para investigar con éxito

En este artículo, encontrarás todos mis consejos sobre cómo utilizar Amazon MTurk. Esta plataforma simplifica el acceso a los encuestados, pero hay varios escollos que debes evitar.

Amazon MTurk: consejos para investigar con éxito

En 2005, Amazon introdujo la plataforma Mechanical Turk (MTurk) para subcontratar tareas repetitivas. MTurk es ahora muy popular entre las agencias de estudios de mercado y las universidades. Les resulta una fuente abundante de recursos humanos para, por ejemplo, responder encuestas.

La plataforma emplea a 7.500 trabajadores a tiempo completo y a más de 500.000 a tiempo parcial en todo el mundo, principalmente en Estados Unidos e India. En este artículo, analizo MTurk desde una perspectiva (de investigación de mercado) y llamo tu atención sobre algunas características específicas que podrían influir en tus

Hechos y datos sobre MTurk

  • Creada en 2005 por Amazon.
  • 7.500 empleados a tiempo completo.
  • 500.000trabajadores a tiempo parcial en todo el mundo, principalmente de EE.UU. e India.
  • 1/3de todas las encuestas y experimentos de ciencias sociales utilizan MTurk.
  • Los Super Turkers participan en 10-17 encuestas a la semana
  • El 10%de los MTurkers son responsables de la realización del 40% de todas las encuestas.

La mano de obra de MTurk

Demografía y representación

Lo primero que debemos analizar es la representación demográfica de los MTurkers.

Los trabajadores de MTurk, o MTurkers, son por lo general más jóvenes, mejor educados y más conocedores de la tecnología que la población general. Una proporción considerable son menores de 30 años, a menudo desempleados o subempleados. Pertenecen a las clases de ingresos más bajos (recuérdelo si debe respetar cuotas en su encuesta).

En cuanto al estado civil, tienen más probabilidades de no haberse casado nunca. Demográficamente, la plataforma ve más individuos blancos y menos hispanos/latinos o afroamericanos. Por lo tanto, si en tu investigación se requiere representación étnica, llévala a cabo con especial cuidado. La población de MTurker es menos representativa que las muestras probabilísticas nacionales y algunos paneles profesionales en línea, pero más representativa que las muestras de conveniencia.

Rasgos psicológicos

En segundo lugar, hay que tener en cuenta que los MTurkers tienen perfiles psicológicos específicos. Puntúan más alto en introversión. Tienen menor autoestima y menor satisfacción vital.

También puntúan más alto en

    • Empatía
    • Ansiedad social

Conocer estas especificidades es importante, sobre todo si vas a realizar cuestionarios que movilicen estos rasgos.

Desafíos

El fenómeno de los «super Turkers»

Los «Super Turkers» son un segmento pequeño pero continuamente activo en la plataforma. Participan en una media de 10-17 encuestas semanales, un número significativamente superior al de los encuestados típicos de un panel.

Este grupo realiza el 40% de todas las encuestas. Su motivación es, por supuesto, el dinero. Depender de estos encuestados tan activos supone un riesgo de sesgo en los resultados de la investigación, especialmente en investigaciones sensibles a los efectos de experiencia de la participación repetida en encuestas.

Ética laboral y motivación

Para el 80% de los MTurkers, la principal motivación son los ingresos. Ésta prevalece sobre el interés por el tema (20%). Esta motivación económica les lleva a completar las tareas rápidamente para maximizar sus ingresos.

Esta búsqueda de la rapidez de ejecución puede comprometer la calidad de los datos. Por lo tanto, es necesario aplicar medidas específicas para identificar a los speeders, es decir, a los que responden demasiado rápido a las encuestas. Formar a los MTurkers podría darles una ventaja en términos de tiempo de respuesta.

Por último, preste especial atención al diseño y la longitud de su encuesta. Al igual que ocurre con los paneles convencionales, las encuestas mal diseñadas o excesivamente largas conducen a:

    • Respuestas de baja calidad
    • Tasas de abandono elevadas

Mi consejo para nuestros clientes es que no superen las 25 preguntas o los 9 minutos.

Puntos de atención para sus proyectos con MTurk

Si quieres investigar con MTurk, aquí tienes los puntos de atención más importantes:

Falsificación de la identidad de los encuestados

La usurpación de identidad -o, más exactamente, la reivindicación de cualidades que el encuestado no posee- es un problema real. No es específico de MTurk, sino de todas las encuestas de panel.

Existen varios enfoques para contrarrestar este problema

    • eliminar los incentivos financieros
    • hacer preguntas de selección

Sesgo de la muestra

El perfil específico de los MTurkers dará lugar inevitablemente a un sesgo si desea construir una muestra representativa. Por lo tanto, tendrá que ajustar su muestra a los siguientes aspectos:

  1. Edad
  2. Raza y origen étnico
  3. Género
  4. Ingresos
  5. Educación
  6. Estado civil
  7. Religión
  8. Ideología política

Recomendaciones para la redacción del informe

En aras de la transparencia y la integridad de su proyecto de investigación, le recomiendo que sea claro al respecto:

  • Remuneración de los MTurkers
  • País de residencia
  • Los datos demográficos básicos de los encuestados.

Estos elementos factuales permitirán al lector apreciar la fiabilidad y generalizabilidad de los resultados. Sin embargo, esta recomendación no es específica de MTurk. Es una buena práctica para cualquier proyecto cualitativo o cuantitativo.

Conclusión

MTurk se ha convertido en una herramienta muy utilizada para realizar investigaciones, sobre todo en el ámbito de las ciencias sociales. Sin embargo, las especificidades de los MTurkers requieren ciertos ajustes metodológicos. Al comprender las especificidades demográficas, motivacionales y de comportamiento de los MTurkers, los investigadores pueden entender los límites de su investigación y anticiparse a los problemas.

Lecturas complementarias

He aquí algunos artículos académicos sobre el uso de MTurk en la investigación


Publicado en Marketing.