Механички турчин за спас психолошких истраживања?

Један од проблема са којим се суочавају психолошка истраживања - заиста, као и сва медицинска истраживања - је проналажење довољно одговарајућих предмета за проучавање. Предмети се морају добити на начин који је репрезентативан за популацију у целини да би се налази истраживања могли генерализовати.

Што је прави проблем, јер као што сам приметио још у августу 2010. године, постоји буквално хиљаде студија психологије заснованих само на гомили студената из једног кампуса на универзитету у САД-у, док млади одрасли који похађају колеџ могу заиста нам помозите да разумемо неке аспекте људског понашања, не можете само претпоставити да се понашање које сте приметили у тим студијама односи и на 60-годишње жене и мушкарце.

У помоћ уђите у службу Амазон.цом Мецханицал Турк. Може ли технологија помоћи да се реши недоумица у проналажењу довољно људи који су репрезентативнији за становништво и то на исплатив начин?

За почетак може бити од помоћи да се разуме шта је Механички Турк. То је мрежно тржиште које продавцима омогућава куповину људске радне снаге по врло јефтиним трошковима за неку врсту мрежног задатка. „Веб локација може се похвалити великом, разноврсном радном снагом која се састоји од преко 100.000 корисника из преко 100 земаља који свакодневно обављају десетине хиљада задатака“, напомињу истраживачи. Ти радници добијају плаћу по комадима за сваки задатак, понекад и до 1 цент. Задаци се разликују и могу чинити било шта, од прегледавања веб странице у потрази за грешкама, до попуњавања анкета.

Ах да, попуњавање анкета. Много психолошких истраживања заснива се на томе да људи попуњавају анкете. Зар не би било лепо када бисмо могли да наговоримо људе - људе који нису били студенти - да то ураде за нешто мање од 10 долара по анкети ... Рецимо, 10 центи?

Бухрместер и сар. (2011) требало је да открије да ли ће такви људи са механичким Турцима испуњавати анкете на начин који је у складу са људима од којих бисте могли тражити да ураде нешто слично лицем у лице.

Прво су истраживачи истражили демографију 3.006 учесника компаније Мецханицал Турк и упоредили их са великим Интернет узорком који није добијен од компаније Мецханицал Турк. Открили су да су учесници Мецханицал Турк (МТурк) разноликији од узорка са Интернета и стандардног узорка популације студената.

Затим су проверили различите цене (2, 10 и 50 центи) како би попунили сет анкета које су узимале различито време (5, 10 и 30 минута). Оно што су открили не би требало да изненади свакога ко користи МТурк:

Ове анализе сугеришу да се учесници могу регрутовати брзо и јефтино. Стопе учешћа су осетљиве на износе компензација и временске обавезе, али наши налази показују да је могуће прикупити узорке пристојне величине путем МТурка за само доларе. Чак и када смо понудили само 2 цента за задатак од 30 минута, сакупили смо 25 учесника (за око 5 сати времена објављивања). Штавише, само незнатним повећањем надокнаде (нпр. На 50 центи), успели смо да добијемо исти број учесника за мање од 2 сата времена објављивања.

Каква је корист од јефтине радне снаге, ако није квалитетна и не испуњава психометријске стандарде који су потребни истраживачима психологије?

Истраживачи су открили да чак и при најнижем нивоу накнаде од 2 цента, нивои плаћања не утичу на квалитет података. Истраживачи могу платити пени за попуњавање анкета и поуздано добити квалитетне податке.

Истраживачи су израчунали средње оцене поузданости алфа за све нивое надокнаде за шест упитника личности које су администрирали на мрежи. Открили су да су МТурк алфа резултати унутар две стотине тачке од алфа традиционалног узорка. Такође су тестирали резултате поузданости поновног тестирања и пронашли средњу вредност р = 0,88 са стопом завршетка поновног тестирања од 60 процената. Све су то врло добри бројеви и повољно се упоређују са традиционалним методама.

Резултат овог истраживачког истраживања сугерише да је Мецханицал Турк поуздана алтернатива коришћењу популације колеџа за добијање података из анкета - а можда је чак и боља алтернатива од традиционалних интернет анкета. За само пени, људи ће попунити чак и дугачке упитнике у својим напорима да помогну другима својим пројектима и истраживањима. Иако је потребно обавити више истраживања како би се потврдили ови налази, чини се да је МТурк тржиште које би више истраживачи психологије требали узети у обзир док припремају своју следећу студију.

Референца

Бухрместер, М., Кванг, Т., & Гослинг, С.Д. (2011). Амазонов механички турк: нови извор јефтиних, а опет висококвалитетних података? Перспективе психолошке науке, 6 (1), 3-5.


Овај чланак садржи повезане везе до Амазон.цом, где се Псицх Централ плаћа мала провизија ако се књига купи. Хвала вам на подршци Псицх Централ!

!-- GDPR -->