Rzetelna zmiana wyniku — czy różnica między pomiarami jest realna

Pacjent miał na początku 18, po dwunastu tygodniach 13. Pięć punktów mniej — poprawa? Może. A może ten sam człowiek dostałby 13 i bez żadnej interwencji, po prostu dlatego, że pomiar zawsze trochę się waha. Pytanie, czy zmiana jest realna, jest osobnym pytaniem od tego, czy zmiana w ogóle wystąpiła. Odpowiada na nie pojęcie rzetelnej zmiany.

Dwa pomiary, jedna wątpliwość

Gdy badasz tę samą osobę dwukrotnie, różnica między wynikami ma dwa możliwe źródła. Pierwsze — coś się naprawdę zmieniło. Drugie — nic się nie zmieniło, a różnica to przypadkowy szum, ten sam, który otacza każdy pojedynczy wynik.

Problem w tym, że na pierwszy rzut oka tych dwóch źródeł nie odróżnisz. Pięć punktów może być realną poprawą albo zwykłym wahaniem. Żeby je rozdzielić, trzeba wiedzieć, jak duże wahanie jest „normalne” — a to wiemy ze standardowego błędu pomiaru.

Wskaźnik rzetelnej zmiany

Narzędziem, które to formalizuje, jest wskaźnik rzetelnej zmiany (Reliable Change Index, RCI). Pomysł jest prosty: odnosi się różnicę między dwoma wynikami do błędu pomiaru tej różnicy.

Jeśli różnica jest duża w porównaniu z błędem, RCI rośnie i w pewnym momencie przekracza umowny próg — często bierze się około 1,96, co odpowiada mniej więcej 95% pewności. Powyżej tego progu mówi się, że zmiana jest rzetelna: na tyle duża, że samym szumem trudno ją wyjaśnić. Poniżej — zmiana mieści się w granicach błędu i nie ma podstaw, by uznać ją za realną.

Kluczowy wniosek: ile punktów potrzeba na „rzetelną” zmianę, zależy od rzetelności narzędzia. Im pomiar dokładniejszy, tym mniejsza różnica wystarcza, żeby uznać ją za realną. Narzędziem chwiejnym trzeba zobaczyć dużą zmianę, zanim cokolwiek będzie można orzec — bo próg wyznaczony przez szum jest wysoki.

Realna to nie znaczy ważna

Warto rozdzielić dwie rzeczy, które łatwo zlać w jedno. Rzetelna zmiana to taka, której nie tłumaczy błąd pomiaru — pytanie statystyczne. Istotna zmiana to taka, która ma znaczenie dla życia osoby — pytanie merytoryczne. To nie to samo.

Zmiana może być rzetelna i jednocześnie błaha — wykraczać poza szum, ale nie zmieniać niczego, co ważne. Może też być odwrotnie: na granicy rzetelności, lecz dotykać progu, za którym zaczyna się funkcjonowanie bez objawów. Dlatego obok RCI często stawia się drugie kryterium — czy wynik przekroczył granicę dzielącą populację z problemem od populacji bez niego. Dopiero razem dają pełniejszy obraz.

Gdzie się tego używa

Naturalne miejsce to monitorowanie efektów — terapii, treningu, interwencji. Zamiast mówić „pacjentowi się poprawiło”, można powiedzieć, czy poprawa wykracza poza to, co dałoby się przypisać przypadkowi. To zmienia rozmowę: z wrażenia na ocenę.

Drugie miejsce to ocena pojedynczego przypadku w diagnozie, gdy decyzja zależy od tego, czy stan się zmienił. Rzetelna zmiana chroni przed dwoma błędami naraz — ogłaszaniem postępu, którego nie ma, i przeoczeniem realnego pogorszenia ukrytego w „normalnych wahaniach”.

Rzetelna zmiana wyniku to narzędzie przeciw myleniu ruchu z sygnałem. Liczba spadła — pytanie brzmi, czy spadła naprawdę. Jeśli oceniasz efekty interwencji i chcesz odróżniać realną zmianę od szumu pomiaru — odezwij się.