В 2005 году Amazon представила платформу Mechanical Turk (MTurk) для аутсорсинга повторяющихся задач. MTurk сейчас чрезвычайно популярен среди агентств по исследованию рынка и университетов. Они находят это богатым источником человеческих ресурсов, например, для участия в опросах.

На платформе работают 7500 сотрудников, работающих полный рабочий день, и более 500 000 сотрудников, работающих неполный рабочий день, по всему миру, в основном в США и Индии. В этой статье я анализирую MTurk с точки зрения (исследования рынка) и обращаю ваше внимание на некоторые особенности, которые могут повлиять на ваши результаты.

Сотрудники MTurk

Демография и представительство

Первое, что нам нужно проанализировать, это демографическая репрезентация MTurkers.

Рабочие MTurk, или MTurkers, как правило, моложе, лучше образованы и более технически подкованы, чем население в целом. Значительная часть населения моложе 30 лет, часто безработные или частично занятые. Они относятся к классам с более низким доходом (помните об этом, если вам необходимо соблюдать квоты в своем опросе).

Что касается семейного положения, то они, скорее всего, никогда не были женаты. Демографически платформа видит больше белых людей и меньше латиноамериканцев/латиноамериканцев или афроамериканцев. Поэтому, если в вашем исследовании требуется этническое представительство, проводите его с особой осторожностью. Популяция MTurker менее репрезентативна, чем национальные вероятностные выборки и некоторые профессиональные онлайн-панели, но более репрезентативна, чем удобные выборки.

Психологические особенности

Во-вторых, нам нужно осознавать, что MTurkers имеют специфический психологический профиль. У них выше показатель интроверсии. У них более низкая самооценка и более низкая удовлетворенность жизнью.

Они также получают более высокие баллы по

Знать эти особенности важно, особенно если вы проводите опросы, которые мобилизуют эти черты.

Проблемы

Феномен «Супер-Тёркеров»

Super Turkers» — небольшой, но постоянно активный сегмент на платформе. Они участвуют в среднем в 10-17 еженедельных опросах, что значительно больше, чем типичные панельные респонденты.

Эта группа проводит 40% всех опросов. Конечно, их мотивируют деньги. Опора на этих высокоактивных респондентов создает риск предвзятости в результатах исследований, особенно в исследованиях, чувствительных к впечатлениям от повторного участия в опросе.

Трудовая этика и мотивация

Для 80% пользователей MTurkers основной мотивацией является доход. Это преобладает над интересом к предмету (20%). Эта экономическая мотивация заставляет их быстро выполнять задачи, чтобы максимизировать свои доходы.

Это стремление к скорости выполнения может поставить под угрозу качество данных. Поэтому нам необходимо принять конкретные меры по выявлению спидеров, то есть тех, кто слишком быстро реагирует на опросы. Обучение MTurkers может дать им преимущество с точки зрения времени отклика.

Наконец, обратите особое внимание на структуру и продолжительность вашего опроса. Как и в случае с обычными панелями, плохо спланированные или чрезмерно длинные обследования приводят к:

• • Некачественные ответы
  • Высокий процент отсева

Мой совет нашим клиентам: не превышайте 25 вопросов или 9 минут.

Точки внимания для ваших проектов с MTurk

Если вы хотите провести исследование с помощью MTurk, вот наиболее важные моменты:

Ложная личность респондентов

Кража личных данных – или, точнее, заявление о качествах, которыми респондент не обладает – является настоящей проблемой. Это касается не только MTurk, но и всех панельных опросов.

Существуют различные подходы к решению этой проблемы:

• • устранение финансовых стимулов
  • задавать проверочные вопросы

Смещение выборки

Специфический профиль MTurkers неизбежно приведет к предвзятости, если вы захотите создать репрезентативную выборку. Таким образом, вам необходимо будет скорректировать выборку по следующим аспектам:

1. Возраст
2. Раса и этническая принадлежность
3. Пол
4. Доход
5. Образование
6. Семейное положение
7. Религия
8. Политическая идеология

Рекомендации по написанию отчета

Для прозрачности и честности вашего исследовательского проекта я рекомендую вам четко обозначить:

• Компенсация MTurkers
• Страна проживания
• основные демографические данные респондентов.

Эти фактические элементы позволят читателю оценить надежность и обобщаемость результатов. Однако эта рекомендация не относится только к MTurk. Это хорошая практика для любого качественного или количественного проекта.

Заключение

MTurk стал широко распространенным инструментом для проведения исследований, особенно в социальных науках. Однако специфика МТуркеров требует определенных методических корректировок. Понимая демографические, мотивационные и поведенческие особенности MTurkers, исследователи могут понять пределы своих исследований и предвидеть проблемы.

дальнейшее чтение

Вот несколько научных статей об использовании MTurk в исследованиях.

---

---

Опубликовано в Маркетинг.

---

---