Porozumění interní a externí platnosti

Interní a externí validita jsou koncepty, které odrážejí, zda jsou výsledky studie důvěryhodné a smysluplné. Zatímco interní validita souvisí s tím, jak dobře je studie provedena (její struktura), externí validita souvisí s tím, jak jsou výsledky aplikovatelné na reálný svět.

Co je interní platnost?

Interní validita je míra, do jaké studie vytváří důvěryhodný vztah příčiny a následku mezi léčbou a výsledkem. Interní validita také odráží, že daná studie umožňuje vyloučit alternativní vysvětlení nálezu.

Například pokud realizujete program odvykání kouření se skupinou jednotlivců, jak si můžete být jisti, že jakékoli zlepšení pozorované v léčebné skupině je způsobeno léčbou, kterou jste podali?

Interní platnost závisí do značné míry na postupech studie a na tom, jak přísně se provádí.

Interní platnost není typu konceptu „ano nebo ne“. Místo toho zvažujeme, jak si můžeme být jisti zjištěními studie, na základě toho, zda se vyhýbá pastím, které mohou učinit zjištění pochybnými.

Čím menší je šance na „zmatení“ ve studii, tím vyšší je vnitřní validita a jistota, že si můžeme být jisti nálezy. Matoucí označuje situaci, ve které vstupují do hry další faktory, které matou výsledek studie. Studie by nás například mohla nejistit, zda můžeme věřit, že jsme identifikovali výše uvedený scénář „příčiny a následku“.

Stručně řečeno, můžete si být jisti, že vaše studie je interně platná, pokud můžete vyloučit alternativní vysvětlení svých zjištění. Stručné shrnutí: příčinu a následek můžete předpokládat, pouze pokud ve své studii splníte následující tři kritéria:

• Příčina předcházela účinku z hlediska času.
• Příčina a následek se liší společně.
• Neexistují žádná další pravděpodobná vysvětlení tohoto vztahu, která jste pozorovali.

Faktory, které zlepšují interní platnost

Pokud hledáte ke zlepšení vnitřní platnosti studie, budete chtít vzít v úvahu aspekty svého designu výzkumu, díky nimž je pravděpodobnější, že budete moci odmítnout alternativní hypotézy. Existuje mnoho faktorů, které mohou zlepšit vnitřní platnost.

• Oslepující: Účastníci - a někdy i vědci - kteří si neuvědomují, jaké intervence dostávají (například pomocí placeba ve studii o léčbě), aby se vyhnuli tomu, že tyto znalosti budou ovlivňovat jejich vnímání a chování, a tím i výsledek studie
• Experimentální manipulace: Manipulace s nezávislou proměnnou ve studii (například dát kuřákům zastavovací program) namísto pouhého pozorování asociace bez jakéhokoli zásahu (zkoumání vztahu mezi cvičením a kouřením)
• Náhodný výběr: Náhodný výběr účastníků nebo způsobem reprezentujícím populaci, kterou chcete studovat
• Randomizace: Náhodné přiřazení účastníků k léčebným a kontrolním skupinám a zajišťuje, že mezi skupinami nebude žádné systematické zkreslení
• Protokol studie: Dodržování konkrétních postupů při podávání léčby, aby se nezaváděly žádné účinky, například dělat věci odlišně s jednou skupinou lidí oproti jiné skupině lidí

Faktory, které ohrožují vnitřní platnost

Stejně jako existuje mnoho způsobů, jak zajistit, aby byla studie interně platná, existuje také seznam potenciálních hrozeb pro interní platnost, které je třeba vzít v úvahu při plánování studie.

• Otěr: Účastníci, kteří odcházejí ze studia nebo z něj odcházejí, což znamená, že výsledky vycházejí ze zkresleného vzorku pouze lidí, kteří se nerozhodli odejít (a možná všichni mají něco společného, ​​například vyšší motivaci)
• Matoucí: Situace, ve které lze předpokládat, že změny výsledné proměnné byly výsledkem nějaké třetí proměnné, která souvisí s léčbou, kterou jste podali.
• Difúze: To se týká léčby ve studii, která se šíří z léčené skupiny do kontrolní skupiny prostřednictvím skupin, které spolu interagují a mluví nebo se pozorují. To může také vést k dalšímu problému nazvanému rozčílená demoralizace, ve kterém se kontrolní skupina snaží méně tvrdě, protože se cítí rozčilená nad skupinou, ve které jsou.
• Předpojatost experimentátora: Experimentátor chující se odlišným způsobem s různými skupinami ve studii, což vede k dopadu na výsledky této studie (a je eliminováno zaslepením)
• Historické události: Může ovlivnit výsledek studií, k nimž dojde po určitou dobu, jako je změna politického vůdce nebo přírodní katastrofa, která ovlivňuje, jak se účastníci studie cítí a jednají
• Instrumentace: Je možné „připravit“ účastníky studie určitými způsoby pomocí opatření, která používáte, což způsobí, že budou reagovat jiným způsobem, než by tomu bylo jinak.
• Zrání: Toto popisuje dopad času jako proměnné ve studii. Pokud studie probíhá po dobu, ve které je možné, že se účastníci přirozeně nějakým způsobem změnili (stárli, unavili se), pak je nemožné vyloučit, zda účinky pozorované ve studii byly jednoduše způsobeny účinkem času.
• Statistická regrese: Přirozený účinek účastníků na extrémních koncích opatření padajících určitým směrem jen kvůli plynutí času spíše než účinkům intervence
• Testování: Opakované testování účastníků pomocí stejných opatření ovlivňuje výsledky. Pokud někomu dáte třikrát stejný test, není pravděpodobné, že bude mít lepší výsledky, když se test naučí nebo si zvykne na testovací proces, aby odpověděl jinak?

Co je externí platnost?

Externí platnost se týká toho, jak dobře lze očekávat, že se výsledek studie bude vztahovat na jiná nastavení. Jinými slovy, tento typ platnosti odkazuje na to, jak jsou zjištění zobecnitelná. Platí například zjištění pro jiné lidi, prostředí, situace a časová období?

Ekologická platnost, aspekt vnější platnosti, se týká toho, zda lze výsledky studie zobecnit na skutečný svět.

Zatímco důkladné výzkumné metody mohou zajistit vnitřní platnost, vnější platnost může být na druhé straně těmito metodami omezena.

Další termín, který se nazývá přenositelnost, se vztahuje k vnější platnosti a odkazuje na design kvalitativního výzkumu. Přenositelnost označuje, zda se výsledky přenášejí do situací s podobnými vlastnostmi.

Faktory, které zlepšují externí platnost

Co můžete udělat pro zlepšení externí platnosti svého studia?

• Zvažte psychologický realismus: Zajistěte, aby účastníci prožívali události studie jako skutečnou událost, a řekněte jim „krycí příběh“ o cíli studie. Jinak by se v některých případech mohli účastníci chovat jinak, než by se chovali v reálném životě, kdyby věděli, co mohou očekávat, nebo věděli, co je cílem studie.
• Proveďte přepracování nebo kalibraci: Pomocí statistických metod se přizpůsobte problémům souvisejícím s externí validitou. Například pokud studie měla nerovnoměrné skupiny pro nějakou charakteristiku (například věk), může být použito převažování.
• Replikovat: Proveďte studii znovu s různými vzorky nebo v různých nastaveních, abyste zjistili, zda získáte stejné výsledky. Po provedení mnoha studií metaanalýza lze také použít k určení, zda je účinek nezávislé proměnné spolehlivý (na základě prozkoumání zjištění velkého počtu studií o jednom tématu).
• Vyzkoušejte terénní experimenty: Proveďte studii mimo laboratoř v přirozeném prostředí.
• Použijte kritéria pro zařazení a vyloučení: Tím zajistíte, že jste ve svém výzkumu jasně definovali populaci, kterou studujete.

Faktory, které ohrožují externí platnost

Vnější platnost je ohrožena, když studie nebere v úvahu interakce proměnných v reálném světě.

• Účinky před a po zkoušce: Pokud pre- nebo post-test nějakým způsobem souvisí s účinkem pozorovaným ve studii, tak, že vztah příčina-následek zmizí bez těchto dalších testů
• Ukázkové funkce: Když byla za účinek zodpovědná nějaká vlastnost konkrétního vzorku (nebo částečně zodpovědná), což vedlo k omezené zobecnění nálezů
• Předpětí výběru: Je považováno za hrozbu pro vnitřní platnost, zkreslení výběru popisuje rozdíly mezi skupinami ve studii, které se mohou vztahovat k nezávislé proměnné (opět něco jako motivace nebo ochota zúčastnit se studie, větší pravděpodobnost účasti je specifická demografie jednotlivců) v online průzkumu).
• Situační faktory: Denní doba, místo, hluk, charakteristiky výzkumného pracovníka a počet použitých opatření mohou ovlivnit zobecnitelnost nálezů.

Interní vs. externí platnost

Interní a externí platnost jsou jako dvě strany stejné mince. Můžete mít studii s dobrou vnitřní platností, ale celkově by to mohlo být irelevantní pro skutečný svět. Na druhou stranu byste mohli provést terénní studii, která je vysoce relevantní pro skutečný svět, ale která nemá důvěryhodné výsledky, pokud jde o to, jaké proměnné způsobily výsledky, které vidíte.

Podobnosti

Jaké jsou podobnosti mezi vnitřní a vnější platností? Jsou to oba faktory, které je třeba vzít v úvahu při navrhování studie, a oba mají důsledky, pokud jde o to, zda mají výsledky studie smysl. Oba nejsou pojmy „buď / nebo“, a proto se vždy budete rozhodovat, do jaké míry vaše studium probíhá z hlediska obou typů platnosti.

Každý z těchto konceptů je obvykle uveden ve výzkumném článku, který je publikován v odborném časopise. Je tomu tak proto, aby ostatní vědci mohli studii vyhodnotit a rozhodovat o tom, zda jsou výsledky užitečné a platné.

Rozdíly

Podstatný rozdíl mezi interní a externí validitou spočívá v tom, že interní validita odkazuje na strukturu studie a její proměnné, zatímco vnější validita souvisí s tím, jak univerzální jsou výsledky.

Interní platnost

• Závěry jsou oprávněné

• Řídí cizí proměnné

• Eliminuje alternativní vysvětlení

• Zaměřte se na přesnost a silné výzkumné metody

Externí platnost

• Nálezy lze zobecnit

• Výsledky se vztahují na praktické situace

• Výsledky se týkají celého světa

• Výsledky lze převést do jiného kontextu

Interní platnost se zaměřuje na zobrazení rozdílu, který je způsoben samotnou nezávislou proměnnou, zatímco výsledky externí platnosti lze přeložit do celého světa.

Příklady platnosti

Příkladem studie s dobrou vnitřní platností by bylo, kdyby výzkumník předpokládal, že použití konkrétní aplikace všímavosti sníží negativní náladu. K otestování této hypotézy výzkumník náhodně přiřadí vzorek účastníků do jedné ze dvou skupin: těm, kteří budou aplikaci používat po stanovenou dobu, a těm, kteří se zapojí do kontrolního úkolu.

Výzkumník zajišťuje, že nedochází k systematickému zkreslení způsobu přiřazování účastníků ke skupinám, a také zaslepuje své výzkumné asistenty před skupinami, ve kterých jsou studenti během experimentování.

Používá se přísný protokol studie, který nastiňuje postupy studie. Potenciální matoucí proměnné se měří spolu s náladou, jako je socioekonomický stav účastníků, pohlaví, věk a další faktory. Pokud účastníci ze studie odejdou, zkoumají se jejich charakteristiky, aby se zajistilo, že neexistuje systematické zkreslení, pokud jde o to, kdo ve studii zůstane.

Příkladem studie s dobrou externí platností by byl ve výše uvedeném příkladu, výzkumný pracovník také zajistil, aby studie měla externí platnost tím, že účastníci aplikaci používali spíše doma než v laboratoři. Výzkumník jasně definuje sledovanou populaci a vybírá reprezentativní vzorek a replikuje studii pro různá technologická zařízení.

Slovo od Verywell

Nastavení experimentu tak, aby měl zdravou vnitřní i vnější platnost, zahrnuje od začátku uvědomění si faktorů, které mohou ovlivnit každý aspekt vašeho výzkumu.

Nejlepší je věnovat více času navrhování strukturálně spolehlivé studie, která má dalekosáhlé důsledky, než rychlému procházení fází návrhu, jen abyste později objevili problémy. Pouze pokud je interní i externí validita vysoká, lze o vašich výsledcích učinit silné závěry.

Přehled vědecké metody