У статистиці упереджена вибірка — це упередження, за якого вибірка збирається таким чином, що деякі члени цільової сукупності мають меншу або вищу , ніж інші. Це призводить до упередженої вибірки генеральної сукупності (або факторів, не пов'язаних із людським фактором), у якій не однаково імовірно були відібрані всі особи чи екземпляри. Якщо це не враховано, результати можуть бути помилково віднесені до досліджуваного явища, а не до методу відбору зразків .

Медичні джерела іноді називають похибку вибірки похибкою констатації. Похибка констатації має в основному те саме визначення, але все ще іноді класифікується як окремий тип упередженості.

Відмінність від упередженості відбору Упереджену вибірку зазвичай класифікують як підтип упередженості відбору, іноді спеціально називають упередженням вибірки, але дехто класифікує її як окремий тип упередження. Відмінність, хоча й не загальновизнана, упередження вибірки полягає в тому, що воно підриває зовнішню валідність тесту (здатність його результатів бути узагальненими для всієї сукупності), тоді як упередження відбору головним чином стосується внутрішньої валідності відмінностей або подібностей, виявлених у зразках, які є в руках. У цьому сенсі помилки, що виникають у процесі відбору вибірки чи когорти, викликають упередження вибірки, тоді як помилки в будь-якому подальшому процесі спричиняють упередження відбору.

Однак упередження відбору та упередження вибірки часто використовуються як синоніми.

Типи

Виділення з конкретної реальної області. Наприклад, опитування старшокласників для визначення вживання підлітками незаконних наркотиків буде упередженою вибіркою, оскільки воно не включає учнів, які навчаються вдома, або тих, хто покинув навчання. Вибірка також є упередженою, якщо певні члени представлені недостатньо або надмірно порівняно з іншими у сукупності. Наприклад, інтерв'ю «людини з вулиці», яке вибирає людей, які проходять повз певне місце, матиме надмірне представництво здорових людей, які, швидше за все, будуть поза домом, ніж люди з хронічними захворюваннями. Це може бути крайньою формою упередженого відбору, оскільки певні члени генеральної сукупності повністю виключаються з вибірки (тобто вони мають нульову ймовірність бути обраними). Упередження самовідбору (див. також ) можливе щоразу, коли група досліджуваних людей має будь-яку форму контролю над тим, чи брати участь (оскільки поточні стандарти дослідницької етики між людьми та суб'єктами вимагають багатьох досліджень у режимі реального часу та деяких лонгітюдних форм дослідження). Рішення учасників взяти участь може бути пов'язане з рисами, які впливають на дослідження, що робить учасників нерепрезентативною вибіркою. Наприклад, люди, які мають тверду думку або знають, можуть бути більш готові витрачати час на відповіді на опитування, ніж ті, хто його не має. Іншим прикладом є , які є упередженими, оскільки респонденти обираються самостійно. Ті люди, які мають високу мотивацію відповідати, як правило, є особами, які мають тверду думку, представлені надмірно, а люди, які є байдужими чи апатичними, менш імовірно відповідатимуть. Це часто призводить до поляризації відповідей, коли крайнім перспективам надається непропорційна вага в підсумку. У результаті такі типи опитувань вважаються ненауковими. Упередження виключення є результатом виключення певних груп із вибірки, наприклад, виключення суб'єктів, які нещодавно мігрували на досліджувану територію (це може статися, коли новачки недоступні в реєстрі, який використовується для ідентифікації вихідної популяції). Виключення суб'єктів, які переїхали з досліджуваної області під час подальшого спостереження, скоріше еквівалентно вибуванню або відсутності відповіді, упередженості відбору, оскільки це швидше впливає на внутрішню валідність дослідження. Упередження здорового користувача, коли досліджувана популяція, ймовірно, здоровіша за загальну популяцію. Наприклад, людина зі слабким здоров'ям навряд чи зможе працювати робітником. Помилка Берксона, коли досліджувана популяція вибирається з лікарні, тому вона менш здорова, ніж загальна популяція. Це може призвести до хибної негативної кореляції між хворобами: у лікарняного пацієнта без діабету більша ймовірність мати інше дане захворювання, наприклад холецистит, оскільки у нього повинні були бути певні причини для звернення до лікарні. , відповідність для очевидного спотворювача, який насправді є результатом впливу. Контрольна група стає більш схожою на випадки щодо впливу, ніж загальна популяція. Упередження виживання, при якому вибираються лише «вижилі» суб'єкти, ігноруються ті, що випали з поля зору. Наприклад, використання даних про поточні компанії як індикатор ділового клімату чи економіки ігнорує підприємства, які зазнали краху та більше не існують. , ефект у спостережній астрономії, який призводить до переважного виявлення яскравих за своєю суттю об'єктів.

Вибірка на основі симптомів Вивчення медичних умов починається з анекдотичних повідомлень. За своїм характером такі звіти включають лише тих, хто направлений для діагностики та лікування. У дитини, яка не може вчитися в школі, з більшою ймовірністю буде діагностована дислексія, ніж у дитини, яка зі складностями, але вчиться. Дитину, обстежену на одне захворювання, з більшою ймовірністю буде перевірено на наявність інших захворювань, що спотворить статистику супутніх захворювань. Оскільки певні діагнози асоціюються з проблемами поведінки чи розумовою відсталістю, батьки намагаються запобігти стигматизації своїх дітей за допомогою цих діагнозів, створюючи подальшу упередженість. Дослідження, ретельно відібрані з цілої популяції, показують, що багато захворювань є набагато більш поширеними та зазвичай набагато легшими, ніж вважалося раніше.

Усечений відбір у племінних дослідженнях Генетики обмежені в тому, як вони можуть отримати дані з людської популяції. Як приклад розглянемо людську характеристику. Нам цікаво визначити, чи успадковується певна характеристика як проста ознака Менделя. Відповідно до законів менделівської спадковості, якщо батьки в родині не мають ознаки, але несуть її алель, вони є носіями (наприклад, неекспресивна гетерозигота). У цьому випадку кожне з їхніх дітей матиме 25 % шансів проявити цю характеристику. Проблема виникає через те, що ми не можемо визначити, в яких сім'ях обоє батьків є носіями (гетерозиготними), якщо вони не мають дитини, яка демонструє цю характеристику. Опис відповідає підручнику Саттона.

На рисунку показано родоводи всіх можливих сімей з двома дітьми, коли батьки є носіями (Аа).

Неусікаючий відбір. В ідеальному світі ми повинні мати можливість виявити всі такі родини з геном, включаючи тих, хто є просто носіями. У цій ситуації аналіз буде вільним від констатаційних упереджень, а родоводи проходитимуть під «неусікаючим відбором». На практиці більшість досліджень ідентифікують і включають в дослідження сім'ї на основі того, що вони мають уражених осіб. Усікаючий відбір. Коли уражені особи мають рівні шанси бути включеними в дослідження, це називається усіченим відбором, що означає ненавмисне виключення (усічення) сімей, які є носіями гена. Оскільки відбір здійснюється на індивідуальному рівні, сім'ї з двома чи більше постраждалими дітьми матимуть вищу ймовірність бути включеними до дослідження. Повний усікаючий відбір є особливим випадком, коли кожна сім'я з ураженою дитиною має рівні шанси бути відібраною для дослідження.

Імовірність кожної з відібраних сімей наведена на малюнку, а також частота вибірки постраждалих дітей. У цьому простому випадку дослідник буде шукати частоту або для характеристики, залежно від типу використаного усікаючого відбору.

Ефект печерної людини Приклад упередження вибірки називається «ефект печерної людини». Значна частина нашого розуміння доісторичних народів походить від печер, таких як наскальні малюнки, зроблені майже 40 000 років тому. Якби були сучасні малюнки на деревах, шкурах тварин чи схилах пагорбів, їх би давно змило. Подібним чином, докази ям з вогнищами, смітникових місць, місць поховань тощо, швидше за все, залишаться недоторканими до сучасної епохи в печерах. Доісторичні люди асоціюються з печерами, тому що саме там все ще існують дані, не обов'язково тому, що більшість із них прожила в печерах більшу частину свого життя.

Проблеми через упередження вибірки Упередження вибірки є проблемою, оскільки статистичні дані, обчислені для вибірки, можуть бути систематично помилковими. Упередження вибірки може призвести до систематичної завищеної або заниженої оцінки відповідного параметра в сукупності. Упередження вибірки виникає на практиці, оскільки практично неможливо забезпечити ідеальну випадковість вибірки. Якщо ступінь спотворення невеликий, то вибірку можна розглядати як прийнятне наближення до випадкової вибірки. Крім того, якщо зразок суттєво не відрізняється за вимірюваною величиною, упереджений зразок все ще може бути розумною оцінкою.

Слово упередженість має сильний негативний відтінок. Дійсно, упередження іноді походять від навмисного наміру ввести в оману або іншого наукового шахрайства. При застосуванні у статистиці упередження просто представляє математичну властивість, незалежно від того, чи є воно навмисним, чи несвідомим, чи через недосконалість інструментів, що використовуються для спостереження. Хоча деякі люди можуть навмисно використовувати упереджену вибірку для отримання оманливих результатів, частіше упереджена вибірка є лише відображенням труднощів у отриманні справді репрезентативної вибірки або незнання упередженості в процесі вимірювання чи аналізу. Прикладом того, як може існувати незнання упередженості, є широке використання співвідношення (воно же ) як міри відмінності в біології. Оскільки легше досягти великого відношення з двома малими числами з заданою різницею, а відносно важче досягти великого відношення з двома великими числами з більшою різницею, великі значущі відмінності можна не помітити при порівнянні відносно великих числових вимірювань. Дехто назвав це «демаркаційним упередженням», оскільки використання співвідношення (поділу) замість різниці (віднімання) переносить результати аналізу з науки в псевдонауку (див. проблему демаркації).

У деяких зразках використовується упереджений статистичний дизайн, який, тим не менш, дозволяє оцінити параметри. США, наприклад, навмисно проводить надмірну вибірку меншин у багатьох своїх загальнонаціональних опитуваннях, щоб отримати достатню точність для оцінок у цих групах. Ці дослідження вимагають використання ваг вибірки (див. далі) для отримання належних оцінок для всіх етнічних груп. За умови дотримання певних умов (головним чином те, що вагові коефіцієнти розраховані та використані правильно), ці вибірки дозволяють точно оцінити параметри популяції.

Історичні приклади

Класичний приклад упередженої вибірки та результатів, які вводять в оману, стався в 1936 році. У перші дні опитування громадської думки журнал American зібрав понад два мільйони поштових опитувань і передбачив, що кандидат від Республіканської партії на президентських виборах у США Альф Лендон переможе чинного президента Франкліна Рузвельта з великою перевагою. Результат був прямо протилежним. Опитування Literary Digest представляло собою вибірку, зібрану серед читачів журналу, доповнену записами зареєстрованих власників автомобілів і користувачів телефонів. Ця вибірка включала надмірне представництво заможних людей, які, як група з більшою ймовірністю голосували за кандидата від Республіканської партії. Навпаки, опитування лише 50 тисяч громадян, відібраних організацією Джорджа Геллапа, успішно передбачило результат, що призвело до популярності опитування Геллапа.