타당도(Validity,Accuracy) 용어 해설
타당도(Validity; Accuracy)란
측정값이 실제 대표하는 값과 일치하는 정도를 의미한다.
황금기준(Gold standard)은 특정한 진단법의 진단능력을 평가하기 위해서는 비교의 기준이 되는 표준진단법이 필요하며 이를 황금기준이라고 한다. 황금기준을 이용한 진단결과는 연구대상 질병을 가진 환자 군에서는 항상 '양성'으로 나타나야 하고, 그 질병을 가지지 않은 대조 군에서는 항상 '음성'으로 나타나야 한다. 따라서 표준진단법은 가장 완벽한 것이어야 하지만 현실적으로 그런 진단법은 거의 존재하지 않는다.
실제로 의학분야에서 '확진법'으로 통용되고 있는 여러 진단법들은 인위적으로 정의된 가정하에서 기존의 다른 방법들보다 정확도 측면에서 더 나을 뿐, 모두 특정오차의 가능성을 가지고 있다. 황금기준이란 비록 완벽한 것은 아니지만 현재의 지식과 기술을 考慮할 때 비교적 정확도가 높다고 인정된 판정기준을 말한다.
|
|
Disease |
|
|
+ |
- |
|
Test |
+ |
True Positive
(TP) |
False Positive
(FP) |
All with Positive Test
TP+FP |
Positive Predictive Value
TP/(TP+FP) |
Post-Test Probability Given Positive Test
= PPV |
|
- |
False Negative
(FN) |
True Negative
(TN) |
All with Negative Test
FN+TN |
Negative Predictive Value
TN/(FN+TN) |
Post-Test Probability Given Negative Test
= 100%-NPV |
|
|
All with Disease
TP+FN |
All without Disease
FP+TN |
Everyone=N
TP+FP+FN+TN |
|
|
Sensitivity
TP/(TP+FN) |
Specificity
TN/(FP+TN) |
Pre-Test Probability
(TP+FN)/(TP+FP+FN+TN) |
타당도에는 체계 타당도 .도구 타당도, 표본추출 타당도, 관찰자 또는 평가자 타당도, 연구대상자 타당도, 연구관리 타당도, 분석 타당도가 있으며
타당도 평가를 위해서 민감도와 특이도가 사용된다. 민감도는 병이 있는 환자를 있다고 하는 척도이며 특이도는 병이 없는 사람을 없다고 판단하는 척도이다.
|
임상기준 |
Pheochromocytoma |
|
|
있음 |
없음 |
합계 |
|
양성 |
51 |
9 |
60 |
|
음성 |
2 |
16 |
18 |
|
|
53 |
25 |
78 |
Pheochromcytoma
의 진단을 위해 임상 증상을 이용한 등급법(scoring system)을 고안했다고 가정하자. 이를 확진된 pheochromocytoma 환자와 타 질환 환자를 비교한 결과는 다음과 같다.
민감도: 51/53 = 0.962 (96.2%) 특이도: 16/25 = 0.640 (64.0%)
이때 양성 판정 기준 설정에서 두 가지 판정오류는 위양성과 위음성이다
예측도
예측도에는 양성 예측도 및 음성 예측도가 있다. 양성 예측도는 특정 진단법에 의해 양성으로 나타난 사람이 해당 질병을 가지고 있을 확률이며 음성 예측도는 동일 진단법에 의해 음성으로 나타난 사람이 해당 질병을 가지고 있지 않을 확률이다.
예측도와 유병률의 관계
특정 인구집단에서 특정한 질병의 유병률이 낮을 때는 그 집단에 속한 개인의 검사 결과가 양성으로 나왔다 할지라도 위양성 가능성이 높아 실제로 그 질병을 가지고 있을 확률은 낮아진다. 반대로 매우 흔한 질병 진단에서 양성으로 판정 받은 개인은 실제로 그 질병을 가지고 있을 확률이 그렇지 않은 경우에 비해 높을 것으로 예상할 수 있다. 정확도의 지표인 민감도나 특이도는 연구대상에서의 그 질병 유병률에 의해 영향을 받지 않는 반면에, 예측도 지표는 연구대상 집단에서 그 질병의 유병률에 의하여 크게 영향을 받는다.
예측도 추정
양성 예측도
음성 예측도
우도비(likelyhood ratio)
진단법의 타당도을 평가하기 위하여 개발된 새로운 지표이다. 특정 질병을 진단하기 위해 환자의 증상이나 징후를 관찰하거나 실험실 검사를 한 경우 그 결과의 특정한 수준(예, 양성)에서, 대상질병이 있는 환자들에서 그러한 수준(양성)을 보일 분율과 대상질병이 없는 환자들에서 그러한 수준(양성)을 보일 분율의 비로 나타낸다.
심근경색증과 CK
|
|
심근경색증 있다 |
없다 |
|
CK 양성(>=80) |
215 (a) |
16 (b) |
|
CK 음성(<80) |
15 (c) |
114 (d) |
|
|
230 |
130 |
양성 결과의 우도비 = [(a)/(a)+(c)] / [(b)/(b)+(d)] = 7.6 : 분자는 민감도를, 분모는 (1-특이도)를 나타낸다.
음성 결과의 우도비 = [(c)/(a)+(c)] / [(d)/(b)+(d)] = 0.07 : 분자는 (1-민감도)를, 분모는 특이도를 나타낸다. 성 및 음성 결과의 우도비
양성 결과의 우도비 (Likelihood ratio of Positive Predictive value)
