Погана наука: MyType iPad Research
Минулого тижня MyType, додаток особистості Facebook, який бере ваші дані, а потім продає зведені звіти на основі ваших відповідей на їхню вікторину, випустив звіт про iPad. Вони припустили, що власники iPad та бажаючі придбати його були "егоїстичними елітами", тоді як тих, хто критикував iPad, характеризували як "незалежних виродків".
Ви вже можете сказати, що це точно не буде науковим аналізом, так?
По-перше, це звітність MyType про свої результати. Що не включається у фактичний звіт, це фактично використані статистичні тести, статистична значимість (значення p) та кількість випробовуваних у кожній досліджуваній групі. Ви знаєте, основні типи даних шукають інші дослідники, щоб оцінити представлені результати. Без такої базової інформації такий вид «дослідження» не кращий, ніж стаття студентів для їхнього класу «Психологія 101».
Людина на ім’я Джон Холл зателефонував їм у розділі коментарів, після чого вони почали давати широкі висловлювання щодо значень р (але знову ж, без конкретики, розбиваючи кожен аналіз, саме цього ви очікуєте на ринку чи науці дослідження). Доктор F спробував навчити людей MyType щодо базової статистичної теорії, оскільки вони, мабуть, не знають багато про те, як створити гарне дослідження.
З розділу коментарів також зрозуміло, що хтось редагує коментарі, щоб видалити те, про що вони згодом пошкодували. Джон Холл цитує, мабуть, Тіма Келькебека, який говорить, що оскільки він має ступінь інформатики (мабуть, бакалавр), це якось кваліфікує його як у розробці досліджень, так і в методології, а також статистиці. Непарні
Але найбільша роздача, що це не серйозне дослідження - це прикметники, обрані для опису двох груп людей. Вони взяли деякі довільні риси особистості, щоб описати кожну групу. Вони могли б так само легко сказати, що власники не iPad є невротиками, невпевненими в собі, гордими та необережними. Це законна характеристика власників, які не є iPad? Звичайно, ні, це лише те, що показує їх крихітний, упереджений набір даних. Враховуючи, що навіть тест на запах не пройшов, більшість дослідників змусили б зробити паузу, замислюючись, чи не пішли вони неправильною дорогою.
Виходячи зі своїх власних даних, вони могли охарактеризувати критиків iPad як нетерпимих, не любити милосердя та дружбу, агресивних та цинічних підлітків. Ого, нічого дивного в цьому немає - вам доведеться дратувати, чи статеві чи вікові рівні результати цих результатів (і запропонувати альтернативне пояснення зазначеним рисам). "Дослідники" також могли б описати власників iPad як сімейних, розумних дорослих людей з високим рівнем успіху, які є і фантазійними, і витонченими.
Але вони цього не зробили. Вони спробували узагальнити купу різнорідних рис у привабливі маркетингові фрази, щоб зробити заголовки новин - фрази, які не були ні особливо точними, ні особливо науково обґрунтованими. Це не завадило десяткам законних масових новин, таких як CNET, ZDNet і навіть Wired, звітувати про результати, не піднімаючи брів про відсутність наукової строгості чи методу.
