evaluation d'un test diagnostique -...
TRANSCRIPT
![Page 1: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/1.jpg)
.
......Evaluation d’un test diagnostique - Concordance
Michael Genin
Universite de Lille 2EA 2694 - Sante Publique : Epidemiologie et Qualite des soins
![Page 2: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/2.jpg)
Plan
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 1 / 35
![Page 3: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/3.jpg)
Plan
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 1 / 35
![Page 4: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/4.jpg)
Plan
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 1 / 35
![Page 5: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/5.jpg)
Introduction
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 2 / 35
![Page 6: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/6.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 7: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/7.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 8: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/8.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 9: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/9.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 10: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/10.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 11: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/11.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 12: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/12.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 13: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/13.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 14: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/14.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 15: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/15.jpg)
Introduction
Motivations
...1 Evaluation d’un nouveau test :
Reference (Gold Standard) binaire → Malade (M) / Non malade (M)Nouveau test → M / M
⇒ Quantifier le pouvoir diagnostic du nouveau test
...2 Variable numerique (ex : dosage biologique)
On desire utiliser cette variable pour separer les M des M⇒ Determiner un seuil optimal⇒ Quantifier le pouvoir discriminant de X
...3 2 tests destines a classer les patients (M et M)
⇒ Evaluation de la concordance = similitude entre les 2 tests.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 3 / 35
![Page 16: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/16.jpg)
Evaluation d’un test diagnostique
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostiqueDefinitionsAnalyse ROC
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 4 / 35
![Page 17: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/17.jpg)
Evaluation d’un test diagnostique Definitions
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostiqueDefinitionsAnalyse ROC
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 5 / 35
![Page 18: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/18.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 19: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/19.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 20: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/20.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 21: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/21.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 22: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/22.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 23: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/23.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 24: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/24.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 25: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/25.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 26: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/26.jpg)
Evaluation d’un test diagnostique Definitions
Definitions
...1 On cherche a separer les malades (M) des non-malades (M)
...2 On dispose d’une reference qui permet de les classer de maniere certaine(Gold Standard)
Considerons un test :
T+ : test positif en faveur de M
T− : test negatif en faveur de M
Considerons N patients
NM : nombre de malades (reference)
NM : nombre de non-malades (reference)
NT+ : nombre de tests positifs
NT− : nombre de tests negatifs
M M
T+ vp fp NT+
T− fn vn NT−
NM NM N
vp : vrai-positifs
vn : vrai-negatifs
fp : faux-positifs
fn : faux negatifs
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 6 / 35
![Page 27: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/27.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 28: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/28.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 29: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/29.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 30: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/30.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 31: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/31.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 32: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/32.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite intrinseque du test (Probabilites pre-test)
Le pourcentage de ”bien classes” defini par vp+vnN ne reflete pas les 2 types
d’erreurs qui peuvent avoir des consequence tres =...1 Dire que le patient est non-malade a tort (fn)...2 Dire que le patient est malade a tort (fp)
Ces 2 types d’erreur sont quantifies par
.Sensibilite (Se)..
......
Pourcentage de vrai-positifs (vp) chez les malades :
vp
NM= P(T+/M)
.Specificite (Sp)..
......
Pourcentage de vrai-negatifs (vn) chez les non-malades :
vn
NM
= P(T−/M)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 7 / 35
![Page 33: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/33.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 34: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/34.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 35: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/35.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 36: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/36.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 37: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/37.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 38: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/38.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 39: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/39.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 40: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/40.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 41: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/41.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 42: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/42.jpg)
Evaluation d’un test diagnostique Definitions
Un test est caracterise par ces deux parametres (Se,Sp).
Remarque 1
Les tests tres sensibles sont utiles pour s’assurer que la maladie n’est paspresente (peu de faux negatifs)
→ La maladie est grave et ne doit pas etre ignoree
Les tests tres specifiques sont utiles pour s’assurer que la maladie est bienpresente (peu de faux positifs)
→ Maladie incurable, traitement lourd
Remarque 2
Ces 2 parametres sont independants de la prevalence de la maladie
→ pas besoin de respecter la prevalence de la population (echantillonrepresentatif)
→ En general, on trouve 100 M et 100 M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 8 / 35
![Page 43: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/43.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite extrinseque du test (Probabilites post-test)
.Valeur Predictive Positive (VPP)..
......
Probabilite qu’un individu soit reellement malade sachant que le test est positif :
P(M/T+) =vp
NT+
.Valeur Predictive Negative (VPN)..
......
Probabilite qu’un individu soit reellement non-malade sachant que le test estnegatif :
P(M/T−) =vn
NT−
Tres important en situation clinique car on ignore tres souvent le diagnostic dereference.
Ces formules sont utilisables lorsque l’echantillon est representatif de lapopulation !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 9 / 35
![Page 44: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/44.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite extrinseque du test (Probabilites post-test)
.Valeur Predictive Positive (VPP)..
......
Probabilite qu’un individu soit reellement malade sachant que le test est positif :
P(M/T+) =vp
NT+
.Valeur Predictive Negative (VPN)..
......
Probabilite qu’un individu soit reellement non-malade sachant que le test estnegatif :
P(M/T−) =vn
NT−
Tres important en situation clinique car on ignore tres souvent le diagnostic dereference.
Ces formules sont utilisables lorsque l’echantillon est representatif de lapopulation !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 9 / 35
![Page 45: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/45.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite extrinseque du test (Probabilites post-test)
.Valeur Predictive Positive (VPP)..
......
Probabilite qu’un individu soit reellement malade sachant que le test est positif :
P(M/T+) =vp
NT+
.Valeur Predictive Negative (VPN)..
......
Probabilite qu’un individu soit reellement non-malade sachant que le test estnegatif :
P(M/T−) =vn
NT−
Tres important en situation clinique car on ignore tres souvent le diagnostic dereference.
Ces formules sont utilisables lorsque l’echantillon est representatif de lapopulation !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 9 / 35
![Page 46: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/46.jpg)
Evaluation d’un test diagnostique Definitions
Definitions - Validite extrinseque du test (Probabilites post-test)
.Valeur Predictive Positive (VPP)..
......
Probabilite qu’un individu soit reellement malade sachant que le test est positif :
P(M/T+) =vp
NT+
.Valeur Predictive Negative (VPN)..
......
Probabilite qu’un individu soit reellement non-malade sachant que le test estnegatif :
P(M/T−) =vn
NT−
Tres important en situation clinique car on ignore tres souvent le diagnostic dereference.
Ces formules sont utilisables lorsque l’echantillon est representatif de lapopulation !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 9 / 35
![Page 47: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/47.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 48: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/48.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 49: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/49.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 50: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/50.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 51: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/51.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 52: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/52.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 53: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/53.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 54: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/54.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 55: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/55.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 56: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/56.jpg)
Evaluation d’un test diagnostique Definitions
Remarque 1
Une VPP faible → examens supplementaires lourds chez des non-malades
Une VPN faible → rassurer des patients a tort
→ Indice de fiabilite du test
Remarque 2
Ces deux parametres dependent de l’echantillon etudie (prevalence de lamaladie). Donc si l’echantillon n’est pas representatif (prevalence) :
→ Calcul de VPP et VPN en utilisant une formule faisant intervenir Se, Sp etprevalence de la maladie (Formule de Bayes).
→ Un prevalence importante va ameliorer la VPP mais diminuer la VPN
→ Un prevalence faible va diminuer la VPP mais ameliorer la VPN
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 10 / 35
![Page 57: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/57.jpg)
Evaluation d’un test diagnostique Definitions
Exemple : Se = 0.8 et Sp = 0.9
Echantillon 1M M
T+ 80 10 90
T− 20 90 110
100 100 200
VPP =80
90≈ 0.89
VPN =90
110≈ 0.82
Echantillon 2M M
T+ 160 10 170
T− 40 90 130
200 100 300
VPP =160
170≈ 0.94
VPN =90
130≈ 0.69
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 11 / 35
![Page 58: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/58.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 59: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/59.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 60: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/60.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 61: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/61.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 62: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/62.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 63: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/63.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 64: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/64.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 65: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/65.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 66: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/66.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 67: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/67.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 68: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/68.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 69: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/69.jpg)
Evaluation d’un test diagnostique Definitions
En situation clinique, on ne dispose pas du diagnostic de reference mais ondispose de
Sensibilite et Specificite du test
La prevalence de la maladie dans la population (P(M) = p)
On souhaite calculer la VPP et la VPN en utilisant ces informations :
VPP = P(M/T+) =P(T+/M)P(M)
P(T+)=
P(T+/M)P(M)
P(T+/M)P(M) + P(T+/M)P(M)
.
......VPP =
Se.p
Se.p + (1− Sp)(1− p)
VPN = P(M/T−) =P(T−/M)P(M)
P(T−)=
P(T−/M)P(M)
P(T−/M)P(M) + P(T−/M)P(M)
.
......VPN =
Sp(1− p)
Sp(1− p) + (1− Se)p
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 12 / 35
![Page 70: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/70.jpg)
Evaluation d’un test diagnostique Analyse ROC
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostiqueDefinitionsAnalyse ROC
...3 Concordance
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 13 / 35
![Page 71: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/71.jpg)
Evaluation d’un test diagnostique Analyse ROC
Problematique
On dispose d’une variable quantitative X (ex : dosage biologique). On souhaite :
Determiner le seuil optimal (pour separer les M des M)
Quantifier le pouvoir diagnostic de X
Le seuil optimal est celui qui separe au mieux les M des M en respectant les deuxtypes de risques (fp,fn).
⇒ max(Se, Sp)
Probleme : les deux parametres varient en sens contraire !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 14 / 35
![Page 72: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/72.jpg)
Evaluation d’un test diagnostique Analyse ROC
Problematique
On dispose d’une variable quantitative X (ex : dosage biologique). On souhaite :
Determiner le seuil optimal (pour separer les M des M)
Quantifier le pouvoir diagnostic de X
Le seuil optimal est celui qui separe au mieux les M des M en respectant les deuxtypes de risques (fp,fn).
⇒ max(Se, Sp)
Probleme : les deux parametres varient en sens contraire !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 14 / 35
![Page 73: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/73.jpg)
Evaluation d’un test diagnostique Analyse ROC
Problematique
On dispose d’une variable quantitative X (ex : dosage biologique). On souhaite :
Determiner le seuil optimal (pour separer les M des M)
Quantifier le pouvoir diagnostic de X
Le seuil optimal est celui qui separe au mieux les M des M en respectant les deuxtypes de risques (fp,fn).
⇒ max(Se, Sp)
Probleme : les deux parametres varient en sens contraire !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 14 / 35
![Page 74: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/74.jpg)
Evaluation d’un test diagnostique Analyse ROC
Problematique
On dispose d’une variable quantitative X (ex : dosage biologique). On souhaite :
Determiner le seuil optimal (pour separer les M des M)
Quantifier le pouvoir diagnostic de X
Le seuil optimal est celui qui separe au mieux les M des M en respectant les deuxtypes de risques (fp,fn).
⇒ max(Se, Sp)
Probleme : les deux parametres varient en sens contraire !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 14 / 35
![Page 75: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/75.jpg)
Evaluation d’un test diagnostique Analyse ROC
Problematique
On dispose d’une variable quantitative X (ex : dosage biologique). On souhaite :
Determiner le seuil optimal (pour separer les M des M)
Quantifier le pouvoir diagnostic de X
Le seuil optimal est celui qui separe au mieux les M des M en respectant les deuxtypes de risques (fp,fn).
⇒ max(Se, Sp)
Probleme : les deux parametres varient en sens contraire !!
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 14 / 35
![Page 76: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/76.jpg)
Evaluation d’un test diagnostique Analyse ROC
Exemple - 2 cas extremes
M M
Xs1
vn pour s1
fp pour s1
vp pour s1
Seuil s1 :
Si X < s1 alors M (pas de fn)
Si X ≥ s1 alors M et M (bcp de fp)
⇒ Se = 1 mais Sp mauvaise
M M
T+ (X ≥ s1) vp fp
T− (X < s1) 0 vn
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 15 / 35
![Page 77: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/77.jpg)
Evaluation d’un test diagnostique Analyse ROC
Exemple - 2 cas extremes
M M
Xs1
vn pour s1
fp pour s1
vp pour s1
Seuil s1 :
Si X < s1 alors M (pas de fn)
Si X ≥ s1 alors M et M (bcp de fp)
⇒ Se = 1 mais Sp mauvaise
M M
T+ (X ≥ s1) vp fp
T− (X < s1) 0 vn
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 15 / 35
![Page 78: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/78.jpg)
Evaluation d’un test diagnostique Analyse ROC
Exemple - 2 cas extremes
M M
Xs2vn pour s2
fn pour s2
vp pour s2
Seuil s2 :
Si X < s2 alors M et M (bcp de fn)
Mais si X ≥ s2 alors M (pas de fp)
⇒ Sp = 1 mais Se mauvaise
M M
T+ (X ≥ s2) vp 0
T− (X < s2) fn vn
→ Necessite de trouver un compromis !! ←
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 16 / 35
![Page 79: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/79.jpg)
Evaluation d’un test diagnostique Analyse ROC
Exemple - 2 cas extremes
M M
Xs2vn pour s2
fn pour s2
vp pour s2
Seuil s2 :
Si X < s2 alors M et M (bcp de fn)
Mais si X ≥ s2 alors M (pas de fp)
⇒ Sp = 1 mais Se mauvaise
M M
T+ (X ≥ s2) vp 0
T− (X < s2) fn vn
→ Necessite de trouver un compromis !! ←
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 16 / 35
![Page 80: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/80.jpg)
Evaluation d’un test diagnostique Analyse ROC
Exemple - 2 cas extremes
M M
Xs2vn pour s2
fn pour s2
vp pour s2
Seuil s2 :
Si X < s2 alors M et M (bcp de fn)
Mais si X ≥ s2 alors M (pas de fp)
⇒ Sp = 1 mais Se mauvaise
M M
T+ (X ≥ s2) vp 0
T− (X < s2) fn vn
→ Necessite de trouver un compromis !! ←
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 16 / 35
![Page 81: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/81.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
● Point idéal (0,1)
● s2
●
s1
Objectif : determiner le seuil s qui separe au mieux les M des M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 17 / 35
![Page 82: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/82.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
● Point idéal (0,1)
● s2
●
s1
Objectif : determiner le seuil s qui separe au mieux les M des M
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 17 / 35
![Page 83: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/83.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
● Point idéal (0,1)
● s2
●
s1
●
Seuil s optimal
Solution : determiner le seuil s qui minimise la distance euclidienne du point (0, 1)
d((0, 1), s) =√
(0− xs)2 + (1− ys)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 18 / 35
![Page 84: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/84.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
● Point idéal (0,1)
● s2
●
s1
●
Seuil s optimal
Solution : determiner le seuil s qui minimise la distance euclidienne du point (0, 1)
d((0, 1), s) =√
(0− xs)2 + (1− ys)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 18 / 35
![Page 85: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/85.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
La courbe ROC presente 2 interets :
Choix du meilleur seuil
Permet de visualiser puis quantifier le pouvoir discriminant de X
→ Calcul de l’aire sous la courbe ROC (AUC)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 19 / 35
![Page 86: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/86.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
La courbe ROC presente 2 interets :
Choix du meilleur seuil
Permet de visualiser puis quantifier le pouvoir discriminant de X
→ Calcul de l’aire sous la courbe ROC (AUC)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 19 / 35
![Page 87: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/87.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
La courbe ROC presente 2 interets :
Choix du meilleur seuil
Permet de visualiser puis quantifier le pouvoir discriminant de X
→ Calcul de l’aire sous la courbe ROC (AUC)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 19 / 35
![Page 88: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/88.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
La courbe ROC presente 2 interets :
Choix du meilleur seuil
Permet de visualiser puis quantifier le pouvoir discriminant de X
→ Calcul de l’aire sous la courbe ROC (AUC)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 19 / 35
![Page 89: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/89.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
La courbe ROC presente 2 interets :
Choix du meilleur seuil
Permet de visualiser puis quantifier le pouvoir discriminant de X
→ Calcul de l’aire sous la courbe ROC (AUC)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 19 / 35
![Page 90: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/90.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrimination
→ 0.5 ≤ AUC ≤ 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrim. parfaite
→ Se = 1, Sp = 1
→ AUC = 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
∅ Discrimination
→ AUC = 0.5
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 20 / 35
![Page 91: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/91.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrimination
→ 0.5 ≤ AUC ≤ 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrim. parfaite
→ Se = 1, Sp = 1
→ AUC = 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
∅ Discrimination
→ AUC = 0.5
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 20 / 35
![Page 92: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/92.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrimination
→ 0.5 ≤ AUC ≤ 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrim. parfaite
→ Se = 1, Sp = 1
→ AUC = 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
∅ Discrimination
→ AUC = 0.5
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 20 / 35
![Page 93: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/93.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrimination
→ 0.5 ≤ AUC ≤ 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
Discrim. parfaite
→ Se = 1, Sp = 1
→ AUC = 1
0.0 0.2 0.4 0.6 0.8 1.0
0.0
0.2
0.4
0.6
0.8
1.0
1−Sp
Se
∅ Discrimination
→ AUC = 0.5
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 20 / 35
![Page 94: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/94.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
AUC Discrimination
0.5 Nulle0.7 - 0.8 Acceptable0.8 - 0.9 Excellente> 0.9 Exceptionnelle
Remarques :
Si AUC = 0.5 alors on classe de maniere completement aleatoire lesobservations
Si AUC > 0.9 le classement est tres bon, voire trop bon, il faut evaluer s’il ya overfitting
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 21 / 35
![Page 95: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/95.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
AUC Discrimination
0.5 Nulle0.7 - 0.8 Acceptable0.8 - 0.9 Excellente> 0.9 Exceptionnelle
Remarques :
Si AUC = 0.5 alors on classe de maniere completement aleatoire lesobservations
Si AUC > 0.9 le classement est tres bon, voire trop bon, il faut evaluer s’il ya overfitting
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 21 / 35
![Page 96: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/96.jpg)
Evaluation d’un test diagnostique Analyse ROC
Courbe ROC (Receiver Operating Characteristic)
AUC Discrimination
0.5 Nulle0.7 - 0.8 Acceptable0.8 - 0.9 Excellente> 0.9 Exceptionnelle
Remarques :
Si AUC = 0.5 alors on classe de maniere completement aleatoire lesobservations
Si AUC > 0.9 le classement est tres bon, voire trop bon, il faut evaluer s’il ya overfitting
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 21 / 35
![Page 97: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/97.jpg)
Concordance
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 ConcordanceIntroductionCoefficient kappaTest de significativite du coefficientIntervalle de confiance du coefficient
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 22 / 35
![Page 98: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/98.jpg)
Concordance Introduction
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 ConcordanceIntroductionCoefficient kappaTest de significativite du coefficientIntervalle de confiance du coefficient
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 23 / 35
![Page 99: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/99.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 100: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/100.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 101: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/101.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 102: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/102.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 103: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/103.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 104: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/104.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 105: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/105.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 106: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/106.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 107: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/107.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 108: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/108.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 109: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/109.jpg)
Concordance Introduction
Objectif
Evaluer la concordance (accord, similitude,. . . ) entre
2 techniques
2 jugements
2 tests
. . .
par rapport a un critere
quantitatif
→ Mesure biologique faite avec 2 appareils differents
qualitatif
→ Tests vivant/deces
Cette notion inclue celle de reproductibilite (ex : p mesures avec le meme appareil→ validation de l’appareil)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 24 / 35
![Page 110: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/110.jpg)
Concordance Introduction
Difference entre concordance et liaison
Exemple : Accord entre 2 radiologues R1 et R2 sur une meme serie deradiographies
R1\R2 Malade Non-MaladeMalade 95 8Non-Malade 5 92
Pour evaluer la concordance entre R1 et R2 un test du χ2 n’est pas suffisant car :
L’existence d’une liaison entre R1 et R2 n’implique pas forcement laconcordance entre eux
R1\R2 Malade Non-MaladeMalade 10 95Non-Malade 105 20
En revanche, une concordance importante → un liaison significative.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 25 / 35
![Page 111: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/111.jpg)
Concordance Introduction
Difference entre concordance et liaison
Exemple : Accord entre 2 radiologues R1 et R2 sur une meme serie deradiographies
R1\R2 Malade Non-MaladeMalade 95 8Non-Malade 5 92
Pour evaluer la concordance entre R1 et R2 un test du χ2 n’est pas suffisant car :
L’existence d’une liaison entre R1 et R2 n’implique pas forcement laconcordance entre eux
R1\R2 Malade Non-MaladeMalade 10 95Non-Malade 105 20
En revanche, une concordance importante → un liaison significative.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 25 / 35
![Page 112: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/112.jpg)
Concordance Introduction
Difference entre concordance et liaison
Exemple : Accord entre 2 radiologues R1 et R2 sur une meme serie deradiographies
R1\R2 Malade Non-MaladeMalade 95 8Non-Malade 5 92
Pour evaluer la concordance entre R1 et R2 un test du χ2 n’est pas suffisant car :
L’existence d’une liaison entre R1 et R2 n’implique pas forcement laconcordance entre eux
R1\R2 Malade Non-MaladeMalade 10 95Non-Malade 105 20
En revanche, une concordance importante → un liaison significative.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 25 / 35
![Page 113: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/113.jpg)
Concordance Introduction
Difference entre concordance et liaison
Exemple : Accord entre 2 radiologues R1 et R2 sur une meme serie deradiographies
R1\R2 Malade Non-MaladeMalade 95 8Non-Malade 5 92
Pour evaluer la concordance entre R1 et R2 un test du χ2 n’est pas suffisant car :
L’existence d’une liaison entre R1 et R2 n’implique pas forcement laconcordance entre eux
R1\R2 Malade Non-MaladeMalade 10 95Non-Malade 105 20
En revanche, une concordance importante → un liaison significative.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 25 / 35
![Page 114: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/114.jpg)
Concordance Coefficient kappa
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 ConcordanceIntroductionCoefficient kappaTest de significativite du coefficientIntervalle de confiance du coefficient
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 26 / 35
![Page 115: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/115.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 116: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/116.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 117: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/117.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 118: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/118.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 119: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/119.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 120: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/120.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Considerons 2 tests A et B effectues un echantillon de N individus.
A\B T+ T−
T+ a b nA+
T− c d nA−
nB+ nB− N
Idee : La concordance entre A et B peut etre decomposee en...1 Une concordance aleatoire (liee au hasard)...2 Une concordance reelle
La concordance observee est definie par
.
......po =
a+ d
N
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 27 / 35
![Page 121: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/121.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Sous l’hypothese d’independance des tests, on peut reconstituer le tableau deseffectifs theoriques :
A\B T+ T−
T+ nA+ nB+
N
nA+ nB−
NnA+
T− nA− nB+
N
nA− n
B−N
nA−
nB+ nB− N
Et ainsi en deduire la concordance due au hasard :.
......pc =
nA+nB+
N +nA−nB−
N
N
Il faut corriger la concordance observee (po) en tenant compte de celle qui seraitdue au hasard (pc)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 28 / 35
![Page 122: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/122.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Sous l’hypothese d’independance des tests, on peut reconstituer le tableau deseffectifs theoriques :
A\B T+ T−
T+ nA+ nB+
N
nA+ nB−
NnA+
T− nA− nB+
N
nA− n
B−N
nA−
nB+ nB− N
Et ainsi en deduire la concordance due au hasard :.
......pc =
nA+nB+
N +nA−nB−
N
N
Il faut corriger la concordance observee (po) en tenant compte de celle qui seraitdue au hasard (pc)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 28 / 35
![Page 123: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/123.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Sous l’hypothese d’independance des tests, on peut reconstituer le tableau deseffectifs theoriques :
A\B T+ T−
T+ nA+ nB+
N
nA+ nB−
NnA+
T− nA− nB+
N
nA− n
B−N
nA−
nB+ nB− N
Et ainsi en deduire la concordance due au hasard :.
......pc =
nA+nB+
N +nA−nB−
N
N
Il faut corriger la concordance observee (po) en tenant compte de celle qui seraitdue au hasard (pc)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 28 / 35
![Page 124: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/124.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Sous l’hypothese d’independance des tests, on peut reconstituer le tableau deseffectifs theoriques :
A\B T+ T−
T+ nA+ nB+
N
nA+ nB−
NnA+
T− nA− nB+
N
nA− n
B−N
nA−
nB+ nB− N
Et ainsi en deduire la concordance due au hasard :.
......pc =
nA+nB+
N +nA−nB−
N
N
Il faut corriger la concordance observee (po) en tenant compte de celle qui seraitdue au hasard (pc)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 28 / 35
![Page 125: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/125.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Sous l’hypothese d’independance des tests, on peut reconstituer le tableau deseffectifs theoriques :
A\B T+ T−
T+ nA+ nB+
N
nA+ nB−
NnA+
T− nA− nB+
N
nA− n
B−N
nA−
nB+ nB− N
Et ainsi en deduire la concordance due au hasard :.
......pc =
nA+nB+
N +nA−nB−
N
N
Il faut corriger la concordance observee (po) en tenant compte de celle qui seraitdue au hasard (pc)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 28 / 35
![Page 126: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/126.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
On definit ainsi le coefficient kappa k :
.
......k =
po − pc1− pc
Interpretation en termes de concordance :
k ≤ 0.2 → Negligeable
0.2 < k ≤ 0.4 → Faible
0.4 < k ≤ 0.6 → Moyenne
0.6 < k ≤ 0.8 → Bonne
0.8 < k ≤ 1 → Excellente
On montre que
.
......
E[K ] = κ
V[K ] =po(1− po)
N(1− pc)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 29 / 35
![Page 127: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/127.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
On definit ainsi le coefficient kappa k :
.
......k =
po − pc1− pc
Interpretation en termes de concordance :
k ≤ 0.2 → Negligeable
0.2 < k ≤ 0.4 → Faible
0.4 < k ≤ 0.6 → Moyenne
0.6 < k ≤ 0.8 → Bonne
0.8 < k ≤ 1 → Excellente
On montre que
.
......
E[K ] = κ
V[K ] =po(1− po)
N(1− pc)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 29 / 35
![Page 128: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/128.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
On definit ainsi le coefficient kappa k :
.
......k =
po − pc1− pc
Interpretation en termes de concordance :
k ≤ 0.2 → Negligeable
0.2 < k ≤ 0.4 → Faible
0.4 < k ≤ 0.6 → Moyenne
0.6 < k ≤ 0.8 → Bonne
0.8 < k ≤ 1 → Excellente
On montre que
.
......
E[K ] = κ
V[K ] =po(1− po)
N(1− pc)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 29 / 35
![Page 129: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/129.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
On definit ainsi le coefficient kappa k :
.
......k =
po − pc1− pc
Interpretation en termes de concordance :
k ≤ 0.2 → Negligeable
0.2 < k ≤ 0.4 → Faible
0.4 < k ≤ 0.6 → Moyenne
0.6 < k ≤ 0.8 → Bonne
0.8 < k ≤ 1 → Excellente
On montre que
.
......
E[K ] = κ
V[K ] =po(1− po)
N(1− pc)2
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 29 / 35
![Page 130: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/130.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Exemple
Effectifs observes
A\B T+ T−
T+ 45 15 60
T− 5 35 40
50 50 100
po =45 + 35
100= 0.8
Effectifs theoriques
A\B T+ T−
T+ 30 30 60
T− 20 20 40
50 50 100
pc =30 + 20
100= 0.5
k =po − pc1− pc
=0.8− 0.5
0.5= 0.6
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 30 / 35
![Page 131: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/131.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Exemple
Effectifs observes
A\B T+ T−
T+ 45 15 60
T− 5 35 40
50 50 100
po =45 + 35
100= 0.8
Effectifs theoriques
A\B T+ T−
T+ 30 30 60
T− 20 20 40
50 50 100
pc =30 + 20
100= 0.5
k =po − pc1− pc
=0.8− 0.5
0.5= 0.6
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 30 / 35
![Page 132: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/132.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Exemple
Effectifs observes
A\B T+ T−
T+ 45 15 60
T− 5 35 40
50 50 100
po =45 + 35
100= 0.8
Effectifs theoriques
A\B T+ T−
T+ 30 30 60
T− 20 20 40
50 50 100
pc =30 + 20
100= 0.5
k =po − pc1− pc
=0.8− 0.5
0.5= 0.6
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 30 / 35
![Page 133: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/133.jpg)
Concordance Coefficient kappa
Concordance entre 2 jugements categoriels : Coefficient Kappa
Exemple
Effectifs observes
A\B T+ T−
T+ 45 15 60
T− 5 35 40
50 50 100
po =45 + 35
100= 0.8
Effectifs theoriques
A\B T+ T−
T+ 30 30 60
T− 20 20 40
50 50 100
pc =30 + 20
100= 0.5
k =po − pc1− pc
=0.8− 0.5
0.5= 0.6
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 30 / 35
![Page 134: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/134.jpg)
Concordance Test de significativite du coefficient
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 ConcordanceIntroductionCoefficient kappaTest de significativite du coefficientIntervalle de confiance du coefficient
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 31 / 35
![Page 135: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/135.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 136: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/136.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 137: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/137.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 138: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/138.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 139: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/139.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 140: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/140.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 141: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/141.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Condition d’application : N ≥ 30
Les hypotheses de test sont les suivantes :
.
......
{H0 : κ = 0 Concordance aleatoire po = pc
H1 : κ > 0 Concordance non aleatoire po > pc
Sous H0, E[K ] = 0 et po = pc donc
V[K ] =po(1− po)
N(1− pc)2=
pc(1− pc)
N(1− pc)2=
pcN(1− pc)
. Sous H0, pour N ≥ 30, la statistique de test est
.
......Z =
K − E[K ]√V[K ]
=K√V[K ]
∼ N (0, 1)
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 32 / 35
![Page 142: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/142.jpg)
Concordance Test de significativite du coefficient
Test de significativite du coefficient kappa
Retour a l’exemple : pc = 0.5√s2k =
√0.5
100× 0.5= 0.1
z =k
sk=
0.6
0.1= 6
Donc rejet de H0 → concordance statistiquement significative.
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 33 / 35
![Page 143: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/143.jpg)
Concordance Intervalle de confiance du coefficient
Point etudie
...1 Introduction
...2 Evaluation d’un test diagnostique
...3 ConcordanceIntroductionCoefficient kappaTest de significativite du coefficientIntervalle de confiance du coefficient
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 34 / 35
![Page 144: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/144.jpg)
Concordance Intervalle de confiance du coefficient
Intervalle de confiance du coefficient kappa
Si test est NS → STOP.
Sinon nous devons donner une estimation de la vraie valeur κ → IC.
L’intervalle de confiance de κ au niveau de confiance 1− α est donne par :
.
......
IC1−ακ =
[k ± z1−α/2
√po(1− po)
N(1− pc)2
]
Retour a l’exemple : po = 0.8, pc = 0.5, N = 100, k = 0.6
IC95%κ =
[0.6± 1.96
√0.8× 0.2
100× (1− 0.5)2
]
IC95%κ = [0.4432; 0.7568]
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 35 / 35
![Page 145: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/145.jpg)
Concordance Intervalle de confiance du coefficient
Intervalle de confiance du coefficient kappa
Si test est NS → STOP.
Sinon nous devons donner une estimation de la vraie valeur κ → IC.
L’intervalle de confiance de κ au niveau de confiance 1− α est donne par :
.
......
IC1−ακ =
[k ± z1−α/2
√po(1− po)
N(1− pc)2
]
Retour a l’exemple : po = 0.8, pc = 0.5, N = 100, k = 0.6
IC95%κ =
[0.6± 1.96
√0.8× 0.2
100× (1− 0.5)2
]
IC95%κ = [0.4432; 0.7568]
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 35 / 35
![Page 146: Evaluation d'un test diagnostique - Concordancecerim.univ-lille2.fr/fileadmin/user_upload/statistiques/michael_genin/... · Evaluation d’un test diagnostique D e nitions D e nitions](https://reader034.vdocument.in/reader034/viewer/2022042322/5f0c91267e708231d4360bc7/html5/thumbnails/146.jpg)
Concordance Intervalle de confiance du coefficient
Intervalle de confiance du coefficient kappa
Si test est NS → STOP.
Sinon nous devons donner une estimation de la vraie valeur κ → IC.
L’intervalle de confiance de κ au niveau de confiance 1− α est donne par :
.
......
IC1−ακ =
[k ± z1−α/2
√po(1− po)
N(1− pc)2
]
Retour a l’exemple : po = 0.8, pc = 0.5, N = 100, k = 0.6
IC95%κ =
[0.6± 1.96
√0.8× 0.2
100× (1− 0.5)2
]
IC95%κ = [0.4432; 0.7568]
Michael Genin (Universite de Lille 2) Evaluation d’un test diagnostique - Concordance Version - 18 avril 2014 35 / 35