Blogas mokslas: „MyType iPad“ tyrimai

Aš nekenčiu duoti spaudos „tyrimų įmonei“, kuri nežino pirmojo dalyko apie statistikos ar pagrindinės metodikos pateikimą savo pačių „tyrimų“ ataskaitoje. Spėju, kad taip nutinka, kai sutinki būrį žmonių, kurie dažniausiai yra technologai, o ne statistikai ar socialistai.

Praėjusią savaitę „MyType“, „Facebook“ asmenybės programa, kuri surenka jūsų duomenis ir parduoda apibendrintas ataskaitas, pagrįstas jūsų atsakymais į jų viktoriną, išleido ataskaitą apie „iPad“. Jie pasiūlė, kad „iPad“ savininkai ir norintys įsigyti „egoistiški elitai“, o „iPad“ kritikai - „nepriklausomi geikai“.

Jau galite pasakyti, kad tai nebus mokslinė analizė, tiesa?

Pirmiausia „MyType“ praneša apie savo rezultatus. Į faktinę ataskaitą neįtraukti faktiniai statistiniai testai, statistinis reikšmingumas (p reikšmės) ir tiriamų asmenų skaičius kiekvienoje tirtoje grupėje. Žinote, pagrindinės duomenų rūšys, kurių ieško kiti tyrėjai, kad galėtų įvertinti pateiktus rezultatus. Neturint šios pagrindinės informacijos, tokio pobūdžio „tyrimai“ nėra geresni už bakalauro darbą jų psichologijos 101 klasei.

Asmuo vardu John Hall pakvietė juos į savo komentarų skyrių, tada jie pradėjo pateikti plačius teiginius apie p reikšmes (bet vėlgi, jokios specifikos, suskaidydami kiekvieną analizę, ko jūs tikėjotės rinkoje ar moksle tyrimai). Dr. F bandė mokyti „MyType“ žmones apie pagrindinę statistikos teoriją, nes jie, matyt, nelabai žino, kaip sukurti gerą tyrimo tyrimą.

Iš komentarų skyriaus taip pat aišku, kad kažkas redaguoja komentarus, kad pašalintų dalykus, kurių vėliau gailėjosi. Johnas Hallas cituoja, matyt, Timą Koelkebecką, sakantį, kad dėl to, kad jis turi informatikos laipsnį (matyt, bakalauro laipsnį), tai kažkaip kvalifikuoja mokslinių tyrimų planavimą ir metodiką bei statistiką. Keista.

Tačiau didžiausias atidavimas, kad tai nėra rimtas tyrimas, yra būdvardžiai, pasirinkti apibūdinti dvi žmonių grupes. Jie apibūdino kiekvieną grupę savavališkai. Jie galėjo lygiai taip pat lengvai pasakyti, kad ne „iPad“ savininkai yra neurotiški, nesaugūs, išdidūs ir nerūpestingi. Ar tai teisėtas ne „iPad“ savininkų apibūdinimas? Žinoma, ne, tai rodo tik jų nedidelis, šališkas duomenų rinkinys. Atsižvelgiant į tai, kad net neatitinka kvapo testo, tai privertė daugumą tyrinėtojų susimąstyti, ar jie eina neteisingu keliu.

Remdamiesi savo duomenimis, jie galėjo apibūdinti „iPad“ kritikus netolerantiškus, nemėgstančius labdaros ir draugystės, agresyvių ir ciniškų paauglių. Oho, nieko čia nestebina - turėtumėte paerzinti, ar lytis ar amžius iškreipia šiuos rezultatus (ir pasiūlykite alternatyvų paaiškinimą pastebėtiems bruožams). „Tyrėjai“ taip pat galėjo apibūdinti „iPad“ savininkus kaip į šeimą orientuotus, protingus, daug pasiekusius suaugusiuosius, kurie turi ir vaizduotės, ir rafinuotumo.

Bet jie to nepadarė. Jie bandė apibendrinti daugybę skirtingų bruožų patraukliomis rinkodaros frazėmis, kad būtų sukurtos naujienų antraštės - frazės, kurios nebuvo nei ypač tikslios, nei ypač moksliškai pagrįstos. Tai nesutrukdė kelioms teisėtoms, pagrindinėms naujienoms, tokioms kaip CNET, ZDNet ir net Wired, pranešti apie rezultatus nepakėlus antakių apie mokslinio griežtumo ar metodo trūkumą.