Trafność wewnętrzna i zewnętrzna to pojęcia, które odzwierciedlają, czy wyniki badania są godne zaufania i znaczące. Podczas gdy trafność wewnętrzna odnosi się do tego, jak dobrze prowadzone jest badanie (jego struktura), trafność zewnętrzna odnosi się do tego, jak wyniki mają zastosowanie do świata rzeczywistego.
Co to jest ważność wewnętrzna?
Trafność wewnętrzna to stopień, w jakim badanie ustanawia wiarygodny związek przyczynowo-skutkowy między leczeniem a wynikiem. Trafność wewnętrzna odzwierciedla również to, że dane badanie umożliwia wyeliminowanie alternatywnych wyjaśnień wyników.
Na przykład, jeśli wdrażasz program rzucania palenia z grupą osób, na ile możesz być pewien, że jakakolwiek poprawa zaobserwowana w grupie terapeutycznej wynika z zastosowanego leczenia?
Trafność wewnętrzna zależy w dużej mierze od procedur badania i tego, jak rygorystycznie jest ono wykonywane.
Trafność wewnętrzna nie jest koncepcją typu „tak lub nie”. Zamiast tego zastanawiamy się, na ile możemy być pewni wyników badania, w oparciu o to, czy unika ono pułapek, które mogą sprawić, że wyniki będą wątpliwe.
Im mniejsza szansa na „pomieszanie” w badaniu, tym wyższa trafność wewnętrzna i większa pewność wyników. Mylące odnosi się do sytuacji, w której w grę wchodzą inne czynniki, które dezorientują wynik badania. Na przykład badanie może sprawić, że nie będziemy pewni, czy możemy ufać, że zidentyfikowaliśmy powyższy scenariusz „przyczynowo-skutkowy”.
Krótko mówiąc, możesz być pewien, że twoje badanie jest wewnętrznie ważne, jeśli możesz wykluczyć alternatywne wyjaśnienia swoich wyników. Jako krótkie podsumowanie możesz założyć przyczynę i skutek tylko wtedy, gdy w swoim badaniu spełnisz następujące trzy kryteria:
- Przyczyna wyprzedziła skutek w czasie.
- Przyczyna i skutek różnią się od siebie.
- Nie ma innych prawdopodobnych wyjaśnień tego związku, które zaobserwowałeś.
Czynniki, które poprawiają ważność wewnętrzną
Jeśli chcesz poprawić wewnętrzną trafność badania, rozważ takie aspekty projektu badawczego, które zwiększą prawdopodobieństwo odrzucenia alternatywnych hipotez. Istnieje wiele czynników, które mogą poprawić trafność wewnętrzną.
- Oślepiający: Uczestnicy – a czasami badacze – którzy nie są świadomi tego, jaką interwencję otrzymują (np. poprzez zastosowanie placebo w badaniu leków), aby uniknąć wpływu tej wiedzy na ich postrzeganie i zachowania, a tym samym na wynik badania
- Eksperymentalna manipulacja: Manipulowanie zmienną niezależną w badaniu (na przykład dawanie palaczom programu rzucania palenia) zamiast po prostu obserwowania związku bez przeprowadzania jakiejkolwiek interwencji (badanie związku między ćwiczeniami a zachowaniem związanym z paleniem)
- Losowy wybór: Wybieranie uczestników losowo lub w sposób, w jaki są reprezentatywni dla populacji, którą chcesz badać
- Randomizacja: Losowe przypisywanie uczestników do grup terapeutycznych i kontrolnych oraz zapewnienie, że nie ma żadnych systematycznych uprzedzeń między grupami
- Protokół badania: Przestrzeganie określonych procedur podawania leczenia, aby nie wprowadzać żadnych skutków, na przykład robienia rzeczy inaczej z jedną grupą osób w porównaniu z inną grupą osób
Czynniki zagrażające ważności wewnętrznej
Tak jak istnieje wiele sposobów, aby upewnić się, że badanie jest wewnętrznie ważne, istnieje również lista potencjalnych zagrożeń dla trafności wewnętrznej, które należy wziąć pod uwagę podczas planowania badania.
- Ścieranie: Uczestnicy rezygnujący lub opuszczający badanie, co oznacza, że wyniki są oparte na tendencyjnej próbie tylko osób, które nie zdecydowały się na odejście (i prawdopodobnie z którymi wszyscy mają coś wspólnego, na przykład wyższą motywację)
- Wprawiające w zakłopotanie: Sytuacja, w której można uznać, że zmiany w zmiennej wynikowej wynikają z jakiejś trzeciej zmiennej, która jest związana z zastosowanym leczeniem.
- Dyfuzja: Odnosi się to do leczenia w badaniu rozszerzającym się z grupy leczonej na grupę kontrolną poprzez grupy wchodzące w interakcje i rozmawiające ze sobą lub obserwujące się nawzajem. Może to również prowadzić do innego problemu, zwanego demoralizacją z urazą, w której grupa kontrolna stara się mniej usilnie, ponieważ czuje urazę do grupy, w której się znajduje.
- Stronniczość eksperymentatora: Eksperymentator zachowujący się w inny sposób z różnymi grupami w badaniu, co ma wpływ na wyniki tego badania (i jest eliminowane przez zaślepienie)
- Wydarzenia historyczne: może wpływać na wyniki badań, które mają miejsce przez pewien czas, na przykład zmiana przywódcy politycznego lub klęska żywiołowa, która wpływa na samopoczucie i zachowanie uczestników badania
- Oprzyrządowanie: Możliwe jest „ugruntowanie” uczestników badania w określony sposób za pomocą stosowanych środków, co powoduje, że reagują w inny sposób niż zareagowaliby w innym przypadku.
- Dojrzewanie: Opisuje wpływ czasu jako zmienną w badaniu. Jeśli badanie odbywa się przez okres czasu, w którym możliwe jest, że uczestnicy w jakiś sposób zmienili się w naturalny sposób (starzeli się, stawali się zmęczeni), wówczas może być niemożliwe wykluczenie, czy efekty zaobserwowane w badaniu były po prostu spowodowane efektem czasu.
- Regresja statystyczna: Naturalny efekt uczestników na skrajnych końcach działania opadających w określonym kierunku tylko z powodu upływu czasu, a nie efektu interwencji
- Testowanie: Wielokrotne testowanie uczestników przy użyciu tych samych środków wpływa na wyniki. Jeśli dasz komuś ten sam test trzy razy, czy nie jest prawdopodobne, że poradzi sobie lepiej, gdy nauczy się testu lub przyzwyczai się do procesu testowania, aby odpowiedzieć inaczej?
Co to jest ważność zewnętrzna?
Trafność zewnętrzna odnosi się do tego, jak dobrze można oczekiwać, że wynik badania będzie miał zastosowanie w innych warunkach. Innymi słowy, ten rodzaj trafności odnosi się do stopnia uogólnienia wyników. Na przykład, czy wyniki dotyczą innych osób, ustawień, sytuacji i okresów?
Trafność ekologiczna, aspekt trafności zewnętrznej, odnosi się do tego, czy wyniki badania można uogólnić na rzeczywisty świat.
Podczas gdy rygorystyczne metody badawcze mogą zapewnić trafność wewnętrzną, z drugiej strony trafność zewnętrzna może być przez te metody ograniczana.
Inny termin zwany transferowalnością odnosi się do trafności zewnętrznej i odnosi się do projektu badań jakościowych. Możliwość przenoszenia odnosi się do tego, czy wyniki przenoszą się do sytuacji o podobnych cechach.
Czynniki, które poprawiają ważność zewnętrzną
Co możesz zrobić, aby poprawić zewnętrzną trafność swojego badania?
- Weź pod uwagę realizm psychologiczny: Upewnij się, że uczestnicy doświadczają wydarzeń z badania jako prawdziwych wydarzeń, opowiadając im „przykrywkową historię” o celu badania. W przeciwnym razie w niektórych przypadkach uczestnicy mogą zachowywać się inaczej niż w prawdziwym życiu, jeśli wiedzą, czego się spodziewać lub wiedzą, jaki jest cel badania.
- Czy dekontaminacja lub kalibracja: Użyj metod statystycznych, aby dostosować się do problemów związanych z trafnością zewnętrzną. Na przykład, jeśli badanie miało nierówne grupy dla jakiejś cechy (takiej jak wiek), można zastosować ponowne ważenie.
- Replika: Przeprowadź badanie ponownie z różnymi próbkami lub w różnych ustawieniach, aby sprawdzić, czy uzyskasz te same wyniki. Kiedy przeprowadzono wiele badań, metaanaliza można również wykorzystać do określenia, czy wpływ zmiennej niezależnej jest wiarygodny (na podstawie analizy wyników dużej liczby badań dotyczących jednego tematu).
- Wypróbuj eksperymenty terenowe: Przeprowadź badanie poza laboratorium w naturalnym otoczeniu.
- Użyj kryteriów włączenia i wykluczenia: Zapewni to, że jasno określiłeś populację, którą badasz w swoich badaniach.
Czynniki, które zagrażają ważności zewnętrznej
Trafność zewnętrzna jest zagrożona, gdy badanie nie uwzględnia interakcji zmiennych w świecie rzeczywistym.
- Efekty przed i po teście: Gdy test przed lub po teście jest w jakiś sposób związany z efektem obserwowanym w badaniu, tak że związek przyczynowo-skutkowy znika bez tych dodatkowych testów
- Przykładowe funkcje: Kiedy jakaś cecha konkretnej próbki była odpowiedzialna za efekt (lub częściowo odpowiedzialna), prowadząc do ograniczonej generalizacji wyników
- Błąd wyboru: uważany za zagrożenie dla trafności wewnętrznej, błąd selekcji opisuje różnice między grupami w badaniu, które mogą odnosić się do zmiennej niezależnej (ponownie coś takiego jak motywacja lub chęć wzięcia udziału w badaniu, określone dane demograficzne osób częściej biorą udział w badaniu w ankiecie internetowej).
- Czynniki sytuacyjne: Pora dnia, lokalizacja, hałas, charakterystyka badacza i liczba zastosowanych miar mogą wpływać na uogólnianie wyników.
Trafność wewnętrzna i zewnętrzna
Ważność wewnętrzna i zewnętrzna są jak dwie strony tej samej monety. Możesz mieć badanie z dobrą wewnętrzną trafnością, ale ogólnie może nie mieć związku z realnym światem. Z drugiej strony możesz przeprowadzić badanie terenowe, które jest bardzo istotne dla rzeczywistego świata, ale nie ma wiarygodnych wyników, jeśli chodzi o wiedzę, jakie zmienne spowodowały wyniki, które widzisz.
Podobieństwa
Jakie są podobieństwa między trafnością wewnętrzną a zewnętrzną? Oba są czynnikami, które należy wziąć pod uwagę podczas projektowania badania, i oba mają wpływ na to, czy wyniki badania mają znaczenie. Oba nie są pojęciami typu „albo/albo”, więc zawsze będziesz decydować, w jakim stopniu twoje badanie wypadnie pod względem obu typów trafności.
Każde z tych pojęć jest zwykle przedstawiane w artykule naukowym publikowanym w czasopiśmie naukowym. Ma to na celu umożliwienie innym badaczom oceny badania i podjęcia decyzji, czy wyniki są przydatne i ważne.
Różnice
Zasadnicza różnica między trafnością wewnętrzną i zewnętrzną polega na tym, że trafność wewnętrzna odnosi się do struktury badania i jego zmiennych, podczas gdy trafność zewnętrzna odnosi się do uniwersalności wyników.
Ważność wewnętrzna-
Wnioski są uzasadnione
-
Kontroluje zmienne zewnętrzne
-
Eliminuje alternatywne wyjaśnienia
-
Postaw na dokładność i mocne metody badawcze
-
Ustalenia można uogólniać
-
Wyniki dotyczą praktycznych sytuacji
-
Wyniki dotyczą całego świata
-
Wyniki można przełożyć na inny kontekst
Trafność wewnętrzna skupia się na wykazaniu różnicy, która wynika z samej zmiennej niezależnej, podczas gdy wyniki trafności zewnętrznej można przełożyć na cały świat.
Przykłady ważności
Przykładem badania o dobrej trafności wewnętrznej byłoby postawienie przez badacza hipotezy, że korzystanie z określonej aplikacji uważności zmniejszy negatywny nastrój. Aby przetestować tę hipotezę, badacz losowo przypisuje próbę uczestników do jednej z dwóch grup: tych, którzy będą korzystać z aplikacji przez określony czas, oraz tych, którzy zaangażują się w zadanie kontrolne.
Badacz zapewnia, że nie ma systematycznych uprzedzeń w sposobie przypisywania uczestników do grup, a także zaślepia swoich asystentów badawczych na grupy, w których znajdują się uczniowie podczas eksperymentów.
Stosowany jest ścisły protokół badania, który określa procedury badania. Potencjalne zmienne zakłócające są mierzone wraz z nastrojem, takimi jak status społeczno-ekonomiczny uczestników, płeć, wiek i inne czynniki. Jeśli uczestnicy rezygnują z badania, ich cechy są sprawdzane, aby upewnić się, że nie ma systematycznych uprzedzeń w zakresie tego, kto pozostaje w badaniu.
Przykładem badania o dobrej trafności zewnętrznej może być w powyższym przykładzie, badacz zapewnił również, że badanie ma trafność zewnętrzną, ponieważ uczestnicy korzystają z aplikacji w domu, a nie w laboratorium. Badacz jasno określa badaną populację i dobierając reprezentatywną próbę, a także powiela badanie dla różnych urządzeń technologicznych.
Słowo od Verywell
Skonfigurowanie eksperymentu tak, aby miał solidną wewnętrzną i zewnętrzną ważność, wymaga od samego początku uważności na temat czynników, które mogą wpłynąć na każdy aspekt twoich badań.
Najlepiej poświęcić dodatkowy czas na zaprojektowanie solidnego konstrukcyjnie badania, które ma dalekosiężne implikacje, niż szybko przebiec przez fazę projektowania tylko po to, by później odkryć problemy. Tylko wtedy, gdy zarówno trafność wewnętrzna, jak i zewnętrzna są wysokie, można wyciągnąć mocne wnioski na temat wyników.
Przegląd metody naukowej