Разбиране на вътрешната и външната валидност

Вътрешната и външната валидност са понятия, които отразяват дали резултатите от дадено проучване са надеждни или значими. Докато вътрешната валидност е свързана с това колко добре се провежда изследването (неговата структура), външната валидност е свързана с това колко приложими са констатациите в реалния свят.

Какво е вътрешна валидност?

Вътрешната валидност е степента, до която едно проучване установява надеждна причинно-следствена връзка между лечение и резултат.Вътрешната валидност също отразява, че дадено проучване дава възможност да се премахнат алтернативни обяснения за констатация.

Например, ако прилагате програма за отказване от тютюнопушене с група лица, доколко можете да бъдете сигурни, че всяко подобрение, наблюдавано в лекуваната група, се дължи на лечението, което сте прилагали?

Вътрешната валидност зависи до голяма степен от процедурите на дадено проучване и колко стриктно се извършва.

Вътрешната валидност не е тип понятие „да или не“. Вместо това, ние обмисляме колко уверени можем да бъдем с констатациите от проучване, въз основа на това дали то избягва капани, които могат да направят констатациите съмнителни.

Колкото по-малък е шансът за „объркване“ в дадено проучване, толкова по-висока е вътрешната валидност и толкова по-уверени можем да бъдем в констатациите. Объркващо се отнася до ситуация, в която влизат в действие други фактори, които объркват резултата от изследването. Например едно проучване може да ни накара да не сме сигурни дали можем да се доверим, че сме идентифицирали горния сценарий „причина и следствие“.

Накратко, можете да бъдете уверени, че вашето изследване е вътрешно валидно, само ако можете да изключите алтернативни обяснения за вашите констатации. Като кратко резюме можете да приемете причинно-следствената връзка само когато отговаряте на следните три критерия във вашето проучване:

• Причината предшества ефекта от гледна точка на времето.
• Причината и следствието варират заедно.
• Няма други вероятни обяснения за тази връзка, които сте наблюдавали.

Фактори, които подобряват вътрешната валидност

Ако се стремите да подобрите вътрешната валидност на дадено проучване, ще искате да разгледате аспекти на вашия изследователски дизайн, които ще направят по-вероятно да отхвърлите алтернативни хипотези. Има много фактори, които могат да подобрят вътрешната валидност.

• Заслепяване: Участници - а понякога и изследователи - които не знаят каква намеса получават (например чрез използване на плацебо в медикаментозно проучване), за да избегнат това знание, което отклонява възприятията и поведението им и по този начин резултата от проучването
• Експериментална манипулация: Манипулиране на независима променлива в проучване (например даване на програма за отказване на пушачите), вместо просто да се наблюдава асоциация, без да се извършва каквато и да е интервенция (изследване на връзката между упражненията и поведението на тютюнопушенето)
• Случайна селекция: Избиране на вашите участници на случаен принцип или по начин, по който те са представителни за популацията, която искате да изучавате
• Рандомизация: Случайно разпределяне на участниците в групи за лечение и контрол и гарантира, че няма системни пристрастия между групите
• Протокол за изследване: Следване на специфични процедури за администриране на лечението, за да не се създадат ефекти от, например, правене на нещата по различен начин с една група хора спрямо друга група хора

Фактори, които застрашават вътрешната валидност

Точно както има много начини да се гарантира, че дадено изследване е вътрешно валидно, има и списък с потенциални заплахи за вътрешната валидност, които трябва да се имат предвид при планирането на изследването.

• Изтриване: Участниците отпадат или напускат проучване, което означава, че резултатите се основават на пристрастна извадка само от хората, които не са избрали да напуснат (и евентуално всички имат нещо общо, като например по-висока мотивация)
• Объркващо: Ситуация, при която промените в променлива на резултата могат да се считат за резултат от някаква трета променлива, която е свързана с лечението, което сте прилагали.
• Дифузия: Това се отнася до лечението в проучване, което се разпространява от лечебната група към контролната група чрез групите, които си взаимодействат и разговарят или се наблюдават. Това може да доведе и до друг проблем, наречен негодуваща деморализация, при който контролна група се опитва по-малко, защото се чувства недоволна от групата, в която се намира.
• Пристрастие на експериментатора: Експериментатор, който се държи по различен начин с различни групи в проучване, което води до въздействие върху резултатите от това проучване (и се елиминира чрез заслепяване)
• Исторически събития: Може да повлияе на резултата от проучвания, които се случват за определен период от време, като промяна в политическия лидер или природно бедствие, което влияе върху това как се чувстват и действат участниците в изследването
• Инструментариум: Възможно е да „подготвите“ участниците в изследването по определени начини с мерките, които използвате, което ги кара да реагират по начин, различен от този, който биха направили иначе.
• Зреене: Това описва въздействието на времето като променлива в изследването. Ако дадено проучване се проведе за период от време, през който е възможно участниците да се променят по някакъв начин по естествен начин (да остареят, да се уморят), тогава може да е невъзможно да се изключи дали ефектите, наблюдавани в проучването, се дължат просто на ефекта от време.
• Статистическа регресия: Естественият ефект на участниците в крайните краища на мярката, падащи в определена посока само поради изтичането на времето, а не ефекта от интервенция
• Тестване: Многократното тестване на участниците, използващи същите мерки, влияе върху резултатите. Ако дадете на някого един и същ тест три пъти, не е ли вероятно той да се справи по-добре, докато научи теста или свикне с процеса на тестване, така че да отговори по различен начин?

Какво е външна валидност?

Външната валидност се отнася до това колко добре може да се очаква резултатът от изследването да се приложи към други настройки. С други думи, този тип валидност се отнася до това колко обобщаващи са констатациите. Например, прилагат ли се констатациите за други хора, настройки, ситуации и периоди от време?

Екологичната валидност, аспект на външната валидност, се отнася до това дали резултатите от изследването могат да бъдат обобщени в реалния свят.

Докато строгите изследователски методи могат да осигурят вътрешна валидност, външната валидност, от друга страна, може да бъде ограничена от тези методи.

Друг термин, наречен преносимост, се отнася до външната валидност и се отнася до качествен изследователски дизайн. Преносимостта се отнася до това дали резултатите се пренасят в ситуации с подобни характеристики.

Фактори, които подобряват външната валидност

Какво можете да направите, за да подобрите външната валидност на вашето проучване?

• Помислете за психологическия реализъм: Уверете се, че участниците преживяват събитията от дадено проучване като реално събитие, като им разкажете „корична история“ за целта на изследването. В противен случай в някои случаи участниците могат да се държат по различен начин, отколкото в реалния живот, ако знаят какво да очакват или знаят каква е целта на изследването.
• Направете преработка или калибриране: Използвайте статистически методи за коригиране на проблеми, свързани с външната валидност. Например, ако дадено проучване е имало неравномерни групи за някои характеристики (като възраст), може да се използва претегляне.
• Реплика: Проведете изследването отново с различни проби или в различни настройки, за да видите дали получавате същите резултати. Когато са проведени много изследвания, мета-анализ може да се използва и за определяне дали ефектът от независима променлива е надежден (въз основа на изследване на констатациите от голям брой изследвания по една тема).
• Опитайте полеви експерименти: Проведете проучване извън лабораторията в естествена среда.
• Използвайте критерии за включване и изключване: Това ще гарантира, че сте ясно определили популацията, която изучавате в своето изследване.

Фактори, които застрашават външната валидност

Външната валидност е застрашена, когато изследването не взема предвид взаимодействията на променливите в реалния свят.

• Ефекти преди и след теста: Когато преди или след теста по някакъв начин е свързан с ефекта, наблюдаван в проучването, така че причинно-следствената връзка изчезва без тези добавени тестове
• Примерни функции: Когато някаква характеристика на конкретната проба е отговорна за ефекта (или частично отговорна), което води до ограничена обобщаемост на констатациите
• Пристрастие при избора: Считана за заплаха за вътрешната валидност, пристрастието при подбора описва различията между групите в проучване, които могат да се отнасят до независимата променлива (още веднъж, нещо като мотивация или желание да участват в проучването, като специфичните демографски данни на индивидите са по-склонни да участват в онлайн проучване).
• Ситуационни фактори: Времето на деня, местоположението, шумът, характеристиките на изследователя и колко мерки се използват могат да повлияят на обобщаемостта на констатациите.

Вътрешна срещу външна валидност

Вътрешната и външната валидност са като две страни на една и съща монета. Можете да проведете проучване с добра вътрешна валидност, но като цяло може да е без значение за реалния свят. От друга страна, бихте могли да проведете теренно проучване, което е от голямо значение за реалния свят, но което няма достоверни резултати по отношение на това кои променливи са причинили резултатите, които виждате.

Прилики

Какви са приликите между вътрешната и външната валидност? И двамата са фактори, които трябва да се вземат предвид при изготвянето на проучване, и двете имат значение по отношение на това дали резултатите от изследването имат значение. И двете не са понятия „или / или“ и затова винаги ще решавате до каква степен ще се проведе вашето изследване по отношение на двата вида валидност.

Всяка от тези концепции обикновено се съобщава в изследователска статия, публикувана в научно списание. Това е така, че други изследователи да могат да оценят изследването и да вземат решение дали резултатите са полезни и валидни.

Разлики

Съществената разлика между вътрешната и външната валидност е, че вътрешната валидност се отнася до структурата на изследването и неговите променливи, докато външната валидност се отнася до това колко универсални са резултатите. Има и други разлики между двете.

Вътрешна валидност

• Заключенията са оправдани

• Контролира чужди променливи

• Елиминира алтернативни обяснения

• Фокусирайте се върху точността и силните изследователски методи

Външна валидност

• Констатациите могат да бъдат обобщени

• Резултатите се отнасят за практически ситуации

• Резултатите важат за целия свят

• Резултатите могат да бъдат преведени в друг контекст

Вътрешната валидност се фокусира върху показване на разлика, която се дължи само на независимата променлива, докато резултатите от външната валидност могат да бъдат преведени в целия свят.

Примери за валидност

Пример за изследване с добра вътрешна валидност би бил, ако изследователят предположи, че използването на определено приложение за внимание ще намали негативното настроение. За да тества тази хипотеза, изследователят разпределя на случаен принцип извадка от участници в една от двете групи: тези, които ще използват приложението за определен период, и тези, които участват в контролна задача.

Изследователят гарантира, че няма систематично пристрастие в начина, по който участниците са разпределени в групите, а също така заслепява своите асистенти изследователи за групите, в които участват учениците по време на експерименти.

Използва се строг протокол за изследване, който очертава процедурите на изследването. Потенциалните объркващи променливи се измерват заедно с настроението, като социално-икономически статус на участниците, пол, възраст и други фактори. Ако участниците отпаднат от проучването, техните характеристики се изследват, за да се гарантира, че няма систематични пристрастия по отношение на това кой остава в изследването.

Пример за изследване с добра външна валидност би бил в горния пример, изследователят също така гарантира, че изследването има външна валидност, като участниците използват приложението у дома, а не в лабораторията. Изследователят ясно определя популацията от интереси и избора на представителна извадка и той / тя репликира изследването за различни технологични устройства.

Дума от Verywell

Създаването на експеримент, така че той да има стабилна вътрешна и външна валидност, включва да помните от самото начало за фактори, които могат да повлияят на всеки аспект на вашето изследване.

Най-добре е да отделите допълнително време за проектиране на структурно стабилно проучване, което има далечни последици, вместо да бързате бързо през фазата на проектиране, за да откриете проблеми по-късно. Само когато вътрешната и външната валидност са високи, могат да се направят силни заключения относно вашите резултати.

Преглед на научния метод