1.4: Чи варто вірити статистичному дослідженню?

Зараз ми розглянули основи статистичного дослідження, але як зробити так, щоб ви провели хороше статистичне дослідження? Потрібно скористатися наступними рекомендаціями.

Методичні вказівки щодо проведення статистичного дослідження:

1. Точно сформулюйте мету свого дослідження. Переконайтеся, що ви розумієте, що насправді хочете знати, перш ніж збирати будь-які дані. Визначте, про що саме ви хотіли б дізнатися.
2. Вкажіть населення, яке ви хочете вивчити, і вкажіть параметри (и) населення, що цікавлять.
3. Виберіть метод відбору проб. Простий випадковий зразок є найкращим типом вибірки, хоча іноді стратифікований або кластерний зразок може бути кращим залежно від питання, яке ви задаєте.
4. Зберіть дані для вибірки і узагальніть ці дані, знайшовши вибіркову статистику.
5. Використовуйте вибіркову статистику, щоб зробити висновки про параметри популяції.
6. Робіть висновки: Визначте, чому ви дізналися і чи досягли ви своєї мети.

Помилка, яку робить більшість людей, роблячи статистичне дослідження, полягає в тому, щоб зібрати дані, а потім подивитися на дані, щоб побачити, на які питання можна відповісти. Це насправді назад. Отже, переконайтеся, що ви знаєте, на яке питання ви хочете відповісти, перш ніж збирати будь-які дані.

Навіть якщо ви не проводите власне дослідження, ви будете дивитися на дослідження, які проводили інші люди. Кожен день ви чуєте і бачите статистику по новинам, в газетах і журналах, в інтернеті та інших місцях. Деякі з цих статистичних даних можуть бути законними і корисними, але деякі можуть бути неточними і вводять в оману. Ось кілька кроків, які слід дотримуватися при оцінці того, чи є статистичне дослідження правдоподібним.

Кроки для визначення того, чи є статистичне дослідження правдоподібним:

1. Чи чітко вказані чисельність населення, мета дослідження та тип дослідження?

Ви повинні мати можливість відповісти на наступні питання, читаючи про статистичне дослідження:

• Чи має дослідження чітку мету? Що це таке?
• Чітко визначена чисельність населення? Що це таке?
• Чи є тип дослідження, який використовується чітким і доцільним?

2. Чи виявлено джерело дослідження? Чи є якісь побоювання з джерелом?

Дослідження, можливо, не було проведено справедливо, якщо ті, хто фінансував дослідження, є упередженими.

Приклад\(\PageIndex{1}\): Джерело дослідження 1

Припустимо, проводиться дослідження, щоб з'ясувати відсоток професорів коледжів США, які належать до Лібертаріанської партії. Якщо це дослідження було оплачено лібертаріанською партією або іншою політичною партією, то, можливо, була упередженість, пов'язана з проведенням дослідження. Зазвичай незалежна група є хорошим джерелом для проведення політичних досліджень.

Приклад\(\PageIndex{2}\): Джерело дослідження 2

Колись у багатьох газетах США було оголошення на всю сторінку, в якій говорилося, що глобальне потепління не відбувається. У оголошенні були наведені деякі причини, чому цього не відбувалося на основі проведених досліджень. Внизу сторінки дрібним шрифтом були слова, за які дослідження та оголошення оплачували нафтогазова промисловість. Отже, дослідження, можливо, було хорошим дослідженням, але оскільки воно фінансувалося галуззю, яка виграла б від результатів, то вам слід поставити під сумнів достовірність результатів.

3. Чи є якісь заплутані змінні, які можуть перекрутити результати дослідження?

Змішані змінні є іншими можливими причинами, які можуть спричинити ефект інтересу, крім досліджуваної змінної. У науковому експерименті дослідники можуть бути в змозі мінімізувати ефект заплутаних змінних шляхом порівняння результатів з групи лікування проти контрольної групи.

Приклад\(\PageIndex{3}\): Змішана змінна

Було проведено дослідження, щоб показати, що мікрохвильові печі небезпечні. У дослідженні брали участь рослини, де одній рослині давали водопровідну воду, а одній рослині дали воду, яку кип'ятили в мікрохвильовій печі. Рослина дала воду, яка була кип'ячена, загинуло. Тож висновок полягав у тому, що вода в мікрохвильовій печі завдала шкоди воді і тим самим призвела до загибелі рослини. Однак легко міг бути той факт, що на рослину налили окріп, що призвело до загибелі рослини.

4. Чи може бути будь-яке упередження від методу відбору проб, який використовувався?

Іноді дослідники беруть вибірку з населення, і результати можуть бути упередженими.

Ухил вибору: Це відбувається, коли вибірка, вибрана з популяції, не є репрезентативною для популяції.

Упередженість участі (або відхилення від відповіді): Це відбувається, коли передбачувані об'єкти у вибірці не реагують з багатьох різних причин. Ті, хто сильно ставиться до проблеми, частіше візьмуть участь.

Приклад\(\PageIndex{4}\): упередженість

Опитування літературного дайджесту 1936 року. Літературний дайджест був журналом, який був заснований в 1890 році. Починаючи з президентських виборів у США 1916 року, журнал передбачив переможця кожного вибору. У 1936 році Літературний дайджест передбачив, що Альфред Лендон виграє вибори в зсуві над Франкліном Делано Рузвельтом з п'ятдесят сім відсотків народних голосів. Процес прогнозування переможця полягав у тому, що журнал розіслав своїм абонентам десять мільйонів макетних бюлетенів та імена людей, які мали автомобілі та телефони. Два мільйони макетних бюлетенів були відправлені назад. Насправді Рузвельт переміг на виборах, набравши 62% народних голосів. («Тематичне дослідження 1: Опитування літературного дайджесту 1936 року», n.d.)

Сторона примітки полягає в тому, що в той же час, коли Літературний дайджест публікував своє передбачення, людина на ім'я Джордж Геллап також провів опитування, щоб передбачити переможця виборів. Геллап опитував лише близько п'ятдесяти тисяч виборців, використовуючи методи випадкової вибірки, але його прогноз полягав у тому, що Рузвельт виграє вибори. Його методи опитування були показані більш точним методом і були використані до сьогоднішнього дня.

Упередженість вибору: Через людей, яких опитував Літературний дайджест, вони створили щось, що називається упередженням відбору. Опитування попросило десять мільйонів людей, які володіли автомобілями, мали телефони та підписалися на журнал. Сьогодні ви, мабуть, подумаєте, що ця група людей буде представником всієї США, проте в 1936 році країна опинилася в розпал Великої депресії. Отже, опитані були здебільшого у вищому, середньому та вищому класі. Вони представляли не всю країну. При цьому не важливо, що зразок був дуже великим. Найважливіша частина вибірки полягає в тому, що вона є репрезентативною для всієї популяції. Якщо зразка немає, то результати можуть бути неправильними, як продемонстровано в даному випадку. Важливо збирати дані, щоб вони мали найкращі шанси представляти все населення.

Невідповідність упередженості: Дивлячись на кількість бюлетенів, повернутих, два мільйони, здається, дуже велика кількість. Однак було розіслано десять мільйонів бюлетенів. Це означає, що лише близько п'ятої частини усіх бюлетенів було фактично повернуто. Це відоме як упередження невідповіді. Єдині люди, які, ймовірно, знайшли час, щоб заповнити та повернути бюлетень, були ті, хто сильно ставився до цього питання. Тому, коли ви відправляєте опитування, ви повинні звернути увагу на те, який відсоток опитувань фактично повернулися. Якщо це взагалі можливо, краще провести опитування особисто або через телефон. Найбільш достовірні опитування, проведені сьогодні, такі як Gallup, проводяться або особисто, або по телефону. Будьте обережні, хоча, тільки тому, що група опитування проводить опитування особисто або по телефону не означає, що це обов'язково заслуговує на довіру.

5. Чи є проблеми з постановкою обстеження?

Постановка зйомки може створити ухил. Таким чином, ви хочете переконатися, що настройка максимально нейтральна, щоб хтось не відповідав виходячи з того, де проводиться опитування або хто дає опитування.

Приклад\(\PageIndex{5}\): Приклад налаштування

Припустимо, проводиться опитування, щоб дізнатися більше про незаконне вживання наркотиків серед студентів коледжу. Якщо опитування проводить поліцейський у формі, то результати, швидше за все, будуть упередженими, оскільки студенти коледжу можуть відчувати себе незручно говорити правду поліцейському.

6. Чи є проблеми з формулюванням опитування?

Як формулюється питання, може викликати певну відповідь. Також порядок питань може вплинути на відповіді людини. Тому переконайтеся, що питання сформульовані таким чином, що б не привели людину до конкретної відповіді.

Приклад\(\PageIndex{6}\): Приклад формулювання

Питання щодо навколишнього середовища може запитати: «Чи вважаєте ви, що глобальне потепління є найважливішою світовою екологічною проблемою або забруднення океанів?» Крім того, питання може бути сформульовано: «Чи вважаєте ви, що забруднення океанів є найважливішою світовою екологічною проблемою або глобальним потеплінням?» Відповіді на ці два питання будуть сильно відрізнятися просто через те, як вони формулюються. Найкращий спосіб впоратися з таким питанням - представити його у форматі множинного вибору наступним чином:

Як ви вважаєте, що є найважливішим світовим екологічним питанням?

a. глобальне потепління

b. забруднення океанів

c. інші

7. Чи є результати представлені справедливо?

Будьте впевнені, що будь-які заключні заяви точно представляють дані і статистику, які були розраховані за даними. Багато разів люди роблять висновки, які виходять за рамки дослідження або виходять за рамки результатів даних.

Приклад\(\PageIndex{7}\): Неправильний висновок

Багато досліджень було зроблено з лікування раку за допомогою щурів. Невірний висновок полягає в тому, що оскільки лікування вилікувало рак у щурів, то воно вилікує рак у людей. Те, що лікування вилікувало рак у щурів, означає, що є ймовірність, що воно вилікує рак у людей, але вам доведеться випробувати його на людях, перш ніж пред'являти такі претензії. Щури і люди мають різну фізіологію, тому ви не можете припустити, що працює на одному буде працювати на іншому.

8. Чи є якісь оманливі графіки?

Будьте впевнені, що будь-яка графіка, яка представлена разом з результатами, не вводить в оману. Деякі приклади оманливих графіків:

• Вертикальна вісь починається не з нуля. Це означає, що будь-які зміни будуть виглядати більш драматично, ніж вони є насправді.
• Там немає назви. Це означає, що ви не знаєте, що насправді зображує графік.
• Там відсутні ярлики або одиниці. Це означає, що ви не знаєте, що таке змінні або які одиниці.
• Використовується неправильний тип графа. Іноді люди використовують неправильний графік, наприклад, використання гістограми, коли лінійний графік буде більш доречним.

9. остаточні міркування

Задайте собі наступні питання щодо загальної ефективності статистичного дослідження.

• Чи відповідають висновки дослідження початковій меті дослідження?
• Чи випливають висновки дослідження з даних і статистики?
• Чи свідчать висновки дослідження, на які слід вносити практичні зміни?

Загалом, ви повинні дотримуватися цих кроків при аналізі обґрунтованості будь-якого статистичного дослідження.