Krzywe ROC Ocena trafności testu diagnostycznego

Prezentacja na temat: "Krzywe ROC Ocena trafności testu diagnostycznego"— Zapis prezentacji:

1 Krzywe ROC Ocena trafności testu diagnostycznego
Ewa Diakowska

2 Co to jest test diagnostyczny ?

3

4 Ocena trafności testu diagnostycznego
Założenie: Wiemy które osoby mają cechę X. Liczebności obserwowane Obiektywna diagnoza Cecha X Brak cechy X Suma Test diagnostyczny TP FP TP + FP FN TN FN + TN TP + FN FP + TN N

5 Ocena trafności testu diagnostycznego
Założenie: Wiemy które osoby mają cechę X. Liczebności obserwowane Obiektywna diagnoza Cecha X Brak cechy X Suma Test diagnostyczny TP FP TP + FP FN TN FN + TN TP + FN FP + TN N

6 Ocena trafności testu diagnostycznego
Założenie: Wiemy które osoby mają cechę X. Liczebności obserwowane Obiektywna diagnoza Cecha X Brak cechy X Suma Test diagnostyczny TP FP TP + FP FN TN FN + TN TP + FN FP + TN N

7 Jakość testu diagnostycznego jest oceniana przez:

8 Jakość testu diagnostycznego jest oceniana przez:

9 Jakość testu diagnostycznego jest oceniana przez:

10 Porównywanie testów diagnostycznych
Wybór „najlepszego” testu diagnostycznego Budowa przedziałów ufności dla wartości oceniającej trafność testu

11 Zmiana wartości decyzyjnej testu diagnostycznego
Przesunięcie punktu odcięcia w lewo

12 Zmiana wartości decyzyjnej testu diagnostycznego
Przesunięcie punktu odcięcia w prawo

13 Moc diagnostyczna testu
Krzywa ROC Funkcja zależności [1 – specyficzności] od [czułości] dla różnych punktów odcięcia. Moc diagnostyczna testu AUC – wartość pola po krzywą ROC. Liczba z przedziału <0,1>.

14 Przykład 200 pacjentów z rozpoznaną cukrzycą
Dane: występowanie cukrzycy (tak/nie) Dane: wiek płeć (K/M) insulina (tak/nie) BMI glukoza

15 Test diagnostyczny dla glukozy
AUC = 0,829 P < 0,0001 Czułość = 74,36 Swoistość = 86,11 Kryterium podziału = 114 58 15 73 20 93 113 78 108 186

16 Krzywa ROC dla glukozy

17 Test diagnostyczny dla insuliny
AUC = 0,722 P < 0,0001 Czułość = 45,24 Swoistość = 99,13 Kryterium podziału = 1 38 1 39 46 114 160 84 115 199

18 Krzywa ROC dla insuliny

19 Test diagnostyczny dla wieku
AUC = 0,57 P = 0,0875 brak istotności statystycznej Czułość = 54,76 Swoistość = 61,21 Kryterium podziału = 64 46 45 91 38 71 109 84 116 200

20 Krzywa ROC dla wieku

21 Model regresji logistycznej
Zmienna objaśniana: występowanie cukrzycy Zmienne objaśniające: wiek płeć insulina glukoza BMI

22 Test diagnostyczny dla regresji logistycznej
AUC = 0,881 P < 0,0001 Czułość = 80,77 Swoistość = 89,62 Kryterium podziału = 0,3849

23 Krzywa ROC dla regresji logistycznej

24 Porównanie krzywych ROC

25 Test dla dwóch krzywych ROC

26 Podsumowanie AUC dla regresjalog = 0,881 AUC dla glukoza = 0,828

27 Pytania ?