Наукові заходи: надійність та обгрунтованість
Надійність - це міра внутрішньої консистенції та стійкості вимірювального пристрою.
Термін дії дає нам вказівку на те, чи вимірювальний прилад вимірює те, на що претендує.
Внутрішня узгодженість - це ступінь, в якій предмети або запитання щодо міри послідовно оцінюють одну і ту ж конструкцію. Кожне питання має бути спрямоване на вимірювання одного і того ж. Внутрішню узгодженість часто вимірюють за допомогою альфа Кронбаха - суперкореляції всіх елементів шкали. Якщо оцінка становить 0,70 або вище, вимірювання є прийнятним. Однак переважно .80 або вище. Важливо також враховувати контекст, розглядаючи оцінку, яка відображає внутрішню узгодженість.
Стабільність часто вимірюється надійністю тестування / повторного тестування. Одна і та ж людина двічі складає один і той же тест, і бали з кожного тесту порівнюються. Висока кореляція між двома тестовими оцінками означає, що тест надійний. У більшості обставин кореляція щонайменше 0,70 вважається прийнятною. Однак це загальне керівництво, а не статистичний тест.
Надійність інтертератора - ще один коефіцієнт надійності, який іноді використовується при оцінці надійності. З надійністю взаємозв'язку різні судді або оцінювачі (два або більше) проводять спостереження, фіксують свої висновки, а потім порівнюють свої спостереження. Якщо оцінювачі надійні, тоді відсоток згоди повинен бути високим.
Коли ми запитуємо, чи дійсна міра, ми запитуємо, чи вимірює вона те, що передбачається. Обґрунтованість - це судження на основі зібраних даних, а не статистичний тест. Існує два основних способи визначення валідності: існуючі показники та відомі групові відмінності.
Тест існуючих заходів визначає, чи новий захід відповідає існуючим відповідним діючим заходам. Новий захід повинен бути подібним до заходів, які були зафіксовані за допомогою вже встановлених діючих вимірювальних приладів.
Відомі групові відмінності визначають, чи відрізняє новий показник відомі групові відмінності. Ілюстрація відомих різниць у групах бачиться, коли різним групам дається однаковий показник і, як очікується, оцінки по-різному. Як приклад, якби ви дали тест демократам і республіканцям на оцінку міцності певних політичних поглядів, ви б очікували, що вони отримають різні результати. Їхні погляди суттєво різняться щодо багатьох питань. Якби ці дві групи оцінили по-різному, як і очікувалося, ми могли б сказати, що міра вказує на валідність - вимірювання того, що вона вимагає вимірювати.
При проектуванні нових вимірювальних приладів необхідно враховувати їх надійність та обґрунтованість. Міра може бути надійною та недійсною. Але дійсний захід - це завжди надійний захід.
