Psychometria · Moduł 6

Błędy
w psychometrii

Każdy pomiar psychologiczny zawiera błąd. Pytanie nie brzmi „czy jest błąd?" — ale „jaki to rodzaj błędu i jak duży jest jego wpływ na wyniki?"

X
Wynik obserwowalny
=
T
Wynik prawdziwy
+
E
Błąd pomiaru
Błąd pomiaru (E) to różnica między wynikiem otrzymanym (X) a wynikiem prawdziwym (T). Im mniejszy błąd, tym wynik obserwowany bardziej odpowiada rzeczywistości.

Dwa rodzaje błędów

Błędy pomiaru dzielą się na systematyczne i losowe — różnią się przyczyną, przewidywalnością i konsekwencjami.

Systematyczny ⚙️

Błąd systematyczny (SEM)

  • Stały lub proporcjonalny do czynnika zakłócającego
  • Spowodowany cechami osoby lub narzędzia
  • Powtarza się w taki sam sposób przy kolejnym badaniu
  • Powoduje przesunięcie wszystkich wyników równolegle
  • W psychometrii — znikome znaczenie praktyczne
Losowy 🎲

Błąd losowy

  • Przypadkowy — wartość i znak nieznane
  • Wynika z przyczyn przypadkowych
  • Może zarówno zawyżać, jak i zaniżać wynik
  • Czynniki: konstrukcja testu, sytuacja, ocena wyników
  • Główne zagrożenie dla rzetelności pomiaru

Błędy w szczegółach

Każdy rodzaj błędu ma swoją charakterystykę — poznaj je bliżej.

Systematyczny (SEM)

Standardowy błąd pomiaru

SEM to przeciętna odległość, w jakiej leżą wyniki otrzymane od wyniku prawdziwego charakteryzującego osobę. Mówiąc inaczej — jest to odchylenie standardowe w rozkładzie wszystkich możliwych wyników, jakie osoba mogłaby uzyskać przy wielokrotnym testowaniu tym samym narzędziem.

Błąd systematyczny nie ma nic wspólnego z mierzoną cechą psychologiczną. Wynika ze stałych cech osoby (np. tendencji odpowiedzi) lub narzędzia pomiarowego (np. dwuznacznych pytań). Jego wartość jest zawsze taka sama lub proporcjonalna do siły czynnika zakłócającego.

Kluczowa właściwość: błąd systematyczny przesuwa równolegle wyniki wszystkich osób — dlatego w psychometrii ma zwykle znikome znaczenie dla porównań między osobami.

Przykład: Osoba badana zawsze odpowiada „nie zgadzam się", gdy nie rozumie treści pytania. Ponieważ w kolejnym badaniu będzie reagowała tak samo, błąd będzie systematyczny i wpłynie identycznie na wyniki za pierwszym i drugim razem.
Losowy

Błąd losowy (błąd drugiego rodzaju)

Błędy losowe powstają w wyniku działania przyczyn przypadkowych — czynników, które nie są przewidywalne ani kontrolowalne. W odróżnieniu od błędu systematycznego, mogą zarówno zawyżać, jak i zaniżać wynik testowy.

Czynniki losowo wpływające na wynik testu to:

  • Sposób konstrukcji testu — dobór i kolejność pozycji
  • Sytuacja testowania — hałas, zmęczenie, nastrój osoby badanej
  • Sposób oceny wyników — subiektywność oceniającego, niekonsekwencja
Przykład: W dniu badania osoba jest przeziębiona i rozkojarzona. Jej wynik jest przypadkowo niższy niż zwykle. Gdyby badanie odbyło się tydzień wcześniej, wynik byłby inny — to błąd losowy.

Wizualizacja SEM: rozkład wyników wokół wyniku prawdziwego

Ustaw wynik prawdziwy (T) i SEM — zobaczysz, jak szeroki jest „pas niepewności" wokół T.

50
5
Wynik prawdziwy (T) Możliwe wyniki obserwowane (X = T ± SEM)

Błąd różnicy i estymacji

Gdy porównujemy wyniki z dwóch testów lub szacujemy wynik prawdziwy — pojawiają się kolejne rodzaje błędów.

1

Błąd różnicy między wynikami otrzymanymi

To odległość między różnicą otrzymaną (np. X₁ − X₂) a różnicą prawdziwą (T₁ − T₂). Błąd różnicy to prosta różnica między błędami pomiaru w dwóch badaniach.

E_diff = E₁ − E₂
2

Standardowy błąd różnicy między wynikami

Przeciętna odległość, w jakiej leżą różnice otrzymane od różnicy prawdziwej. Jest to odchylenie standardowe w rozkładzie wszystkich potencjalnych różnic między wynikami osoby w dwóch różnych testach lub w rozkładzie nieskończenie wielu błędów różnicy.

3

Istotna statystycznie różnica wyników

Jeśli różnica między wynikami jest istotna statystycznie, oznacza to, że istnieje rzeczywista różnica między wynikami prawdziwymi. Można wtedy mówić o różnicy w nasileniu mierzonej cechy lub cech.

4

Błąd estymacji wyniku prawdziwego

Różnica między estymowanym wynikiem prawdziwym (T̂) i wynikiem prawdziwym (T). Standardowy błąd estymacji to przeciętna odległość, w jakiej leżą estymowane wyniki prawdziwe od wyniku prawdziwego — odchylenie standardowe w rozkładzie wszystkich możliwych estymowanych wyników prawdziwych.

? Jak SEM, błąd różnicy i błąd estymacji są ze sobą powiązane?

Wszystkie trzy to odchylenia standardowe błędów, ale w różnych rozkładach:

  • SEM — SD błędów pomiaru (jak bardzo X odchyla się od T)
  • Standardowy błąd różnicy — SD błędów różnic między X₁ i X₂
  • Standardowy błąd estymacji T — SD błędów szacowania T na podstawie X

Im wyższa rzetelność testu, tym mniejszy SEM — i tym mniejsze są pozostałe błędy standardowe.

Co to znaczy, że różnica jest „istotna statystycznie"?

Różnica wyników jest istotna statystycznie, gdy jest na tyle duża, że z dużym prawdopodobieństwem nie wynika z samego błędu pomiaru.

Innymi słowy — gdy obserwowana różnica przekracza standardowy błąd różnicy pomnożony przez odpowiedni próg (np. 1,96 dla p < 0,05), możemy powiedzieć, że wyniki prawdziwe tych osób prawdopodobnie się różnią.

Brak istotności nie oznacza braku różnicy — może oznaczać zbyt duży błąd pomiaru, by ją wykryć.

Ćwiczenie: systematyczny czy losowy?

Oceń każdą sytuację — to błąd systematyczny czy losowy?

Klasyfikuj błędy

Kliknij odpowiedź dla każdego przykładu. Po odpowiedzi zobaczysz wyjaśnienie.

Słowniczek

Kliknij kartę, żeby zobaczyć definicję.

Błąd pomiaru (E)
Różnica między wynikiem otrzymanym (X) a wynikiem prawdziwym (T). X = T + E.
Błąd systematyczny
Stały błąd spowodowany cechami osoby lub narzędzia. Przesuwa wyniki wszystkich równolegle — znikome znaczenie w psychometrii.
SEM
Standardowy błąd pomiaru — przeciętna odległość wyników otrzymanych od wyniku prawdziwego. Odchylenie SD rozkładu błędów pomiaru.
Błąd losowy
Przypadkowy, nieprzewidywalny błąd. Może zawyżać lub zaniżać wynik. Czynniki: konstrukcja testu, sytuacja testowania, ocena.
Błąd różnicy wyników
Odległość między różnicą otrzymaną (X₁−X₂) a różnicą prawdziwą (T₁−T₂). Równa różnicy błędów pomiaru: E₁−E₂.
Standardowy błąd różnicy
SD w rozkładzie wszystkich potencjalnych różnic między wynikami osoby w dwóch testach. Miara niepewności porównania wyników.
Istotna statystycznie różnica
Różnica wyników przekraczająca to, co może wynikać z samego błędu pomiaru. Świadczy o rzeczywistej różnicy wyników prawdziwych.
Błąd estymacji T
Różnica między estymowanym wynikiem prawdziwym (T̂) a wynikiem prawdziwym (T). Standardowy = SD rozkładu estymowanych T.
Wynik prawdziwy (T)
Hipotetyczny rzeczywisty poziom cechy — niemierzalny bezpośrednio. Wynik, który osoba uzyskałaby przy nieskończonej liczbie pomiarów.
Sytuacja testowania
Jeden z czynników losowych — hałas, zmęczenie, nastrój, temperatura. Wpływa na wynik w sposób nieprzewidywalny.

Quiz

Sprawdź znajomość błędów w psychometrii — 12 pytań.

Pytanie 1 z 12
0 / 12 dobrych

Kluczowe wnioski

1
Każdy wynik zawiera błąd: X = T + E. Wynik obserwowany nigdy nie jest idealnie równy wynikowi prawdziwemu.
2
Dwa rodzaje błędów: systematyczny (stały, proporcjonalny, powtarzalny) i losowy (przypadkowy, nieprzewidywalny, może zawyżać lub zaniżać wynik).
3
Błąd systematyczny ma znikome znaczenie w psychometrii — przesuwa wyniki wszystkich osób równolegle, więc nie wpływa na różnice między osobami.
4
SEM = przeciętna odległość wyników otrzymanych od prawdziwego. Odchylenie standardowe rozkładu błędów pomiaru dla danej osoby.
5
Porównując wyniki z dwóch testów — pojawia się błąd różnicy. Tylko istotna statystycznie różnica świadczy o rzeczywistej różnicy wyników prawdziwych.
6
Błąd estymacji wyniku prawdziwego — gdy szacujemy T na podstawie X, pojawia się kolejne źródło niepewności. Standardowy błąd estymacji opisuje jej typową skalę.