■ 저번 시간에 이어서 오늘도 직업 심리 검사에 대해 알아보도록 하겠다. 신뢰도, 신뢰도의 종류, 신뢰도 계수에 영향을 주는 요인 등에 대해 궁금하신 분은 아래의 글을 참조하여 주시기 바란다.
✔[직업 심리학] 직업 심리 검사④(직상 기출, 신뢰도, 타당도, 검사 재검사, 동형 검사, 반분, 문
◆ 저번 시간에 이어서 오늘도 직업 심리 검사에 대해서 알아보도록 하겠다. 규준, Z점수, T점수, 백분위, 표준 점수 등에 대해 궁금하신 분은 아래의 글을 참조하여 주시기 바란다. 2024.06.10 - [
narrare3.tistory.com
2. 타당도(Validity)
(1) 의의 :
타당도란 검사가 측정하고자 하는 것을 얼마나 정확하게, 또는 적합하게 측정하는지를 나타내는 지표이다.
(2) 타당도의 종류 :
① 내용 타당도(Content Validity) :
㉮ 검사의 문항들이 측정하고자 하는 내용 영역을 얼마나 잘 반영하고 있는지를 말한다. 주로 *성취도 검사(achievement test,
학력 검사 등)의 타당도를 평가하는 방법으로 많이 사용된다.
성취도 검사
주어진 주제나 기술에서 개인의 능력이나 학습 정도를 측정하는 검사. 성취도 검사란 개인이 특정 지식, 정보, 기술을 획득하거나 습득한 정도 혹은 유능한 정도를 측정하는 도구를 말한다. 독
terms.naver.com
㉯ 다시 말해, 측정 항목이 연구자가 의도한 내용대로 실제로 측정되고 있는가 하는 문제와 연관된다. 예를 들어 직업 상담사 자격 시험용으로 출제된 문항 가운데 대학 수학 능력을 측정하는 문항이 쌓여있을 경우 연구자가 의도한 바대로 측정을 하는 것이 어려우며, 그로 인해 내용 타당도가 문제될 수 있다.
㉰ 해당 분야의 전문가들이 내용에 대해 주관적으로 판단하기 때문에, 내용 타당도를 나타내는 타당도 계수를 산출하기가 어렵다.
② 안면 타당도(Face Validity) :
㉮ 안면 타당도는 실제로 무엇을 재는가의 문제가 아니라, 검사가 잰다고 말하는 것을 재는 것처럼 보이는 가의 문제이다.
㉯ 즉, 수검자(검사를 받는 사람, 내담자 = 피검자)에게 그 검사가 타당한 것처럼 보이는가를 뜻한다.
㉰ 전문가가 아닌 일반인이 검사의 문항을 평가하는 것으로, 검사 제작시 참고할 수 있는 방법이다.
③ 준거 타당도(Criterion - related Validity) :
어떤 심리 검사가 특정 준거와 어느 정도 관련성이 있는가를 나타내는 것이다. 즉, 그 검사가 직무 성과나 학업 성적 등의 특정 활동 영역의 준거를 얼마나 잘 예측해 주는지의 정도를 말한다.
㉮ 예언(예측) 타당도 :
- 검사를 먼저 실시하고 일정 기간이 지난 후 준거를 측정하여 두 점수 간의 상관 계수를 구하는 방법이다. 다시 말해 한 검사가 수검자의 미래의 행동이나 특성을 얼마나 제대로 측정하였는가의 정도를 말한다.
- 준거는 미래의 행동이나 특성이다. 즉, 검사가 실시되고 일정 기간이 지난 후에 준거 변인의 측정이 가능한 경우이다.
- 타당도는 선행 검사 점수와 준거 점수 간의 상관 계수로 나타낸다. 만약 상관 계수가 크면 예측의 정확성이 크고, 상관 계수가 낮으면 예측의 정확성이 낮다.
- 시간이 많이 걸린다는 단점이 있다.
✅ 예 : 대입 수학 능력 시험 점수가 높은 학생이 입학 후에도 대학 성적이 우수하다면, 대입 수학 능력 시험은 예언(예측) 타당도가 높다고 할 수 있다.
㉯ 동시(공인) 타당도 :
- 검사와 준거를 동시에 측정하여 두 점수 간의 상관 계수를 구하는 방법이다. 다시 말해 예측에 관계없이 한 검사가 수검자의 현재의 행동이나 특성을 얼마나 제대로 측정하였는가의 정도를 말한다.
- 준거는 현재의 행동이나 특성이다. 즉, 검사를 실시하는 때와 같은 시기에 준거 변인에 관한 자료의 획득이 가능한 경우이다.
- 타당도는 한 검사 점수와 준거 점수 간의 상관 계수로 나타낸다. 상관 계수가 크면 동시 타당도가 높고, 상관 계수가 낮으면 동시 타당도가 낮다.
- 예언 타당도의 시간이 많이 걸린다는 단점을 보완하기 위한 것이 동시(공인) 타당도이다.
- 준거에 대하여 미래를 예측하는 것이 아니라, 한 준거 간 공통 요인의 유뮤를 확인하는 것으로 한 검사를 준거를 대체할 수 있는지를 알아보고자 할 때 쓰이는 타당도이다.
✅ 예 : 현재 사용하고 있는 영어 학력 검사 점수가 높은 학생이 새로 만든 영어 학력 검사 점수에서 높은 점수를 받았다면, 새로 제작한 영어 학력 검사는 동시(공인) 타당도가 높다고 할 수 있다.
④ 구성 타당도(Constructs Validity) :
검사가 해당 이론적 구성 개념이나 특성을 잘 측정하는 정도를 말하며, '구인 타당도'라고도 부른다. 구성 타당도는 객관적으로 관찰 가능하지 않은 추상적인 개념, 즉 적성, 지능, 흥미, 직무 만족, 동기, 내향성과 같은 성격 특성 등을 얼마나 잘 측정하는지를 나타낸 것이다.
㉮ 수렴 타당도 :
기존 검사와 새로 개발한 검사의 같은 특성의 상괌 계수를 구하는 방법으로, 상관 관계가 높을수록 수렴 타당도는 높다(관계 있는 변인과 상관 계수가 높을수록 수렴 타당도는 높다).
㉯ 변별 타당도 :
기존 검사와 새로 개발한 검사의 다른 특성의 상관 계수를 구하는 방법으로, 상관 관계가 낮을수록 변별 타당도는 높다(관계 없는 변인과 상관 관계가 낮을수록 변별 타당도는 높다).
㉰ 요인 분석법 :
검사의 구성 타당도를 알아보기 위하여 가장 많이 사용하는 방법으로, 검사를 구성하는 문항들의 상관 관계를 분석해서 상관이 높은 문항들을 묶어 주는 통계적 방법이다.
(3) 준거 타당도 계수의 크기에 영향을 미치는 요인 :
① 표집 오차 :
㉮ 검사 점수와 준거 점수의 상관 계수는 일부 표본을 대상으로 얻게 되는데, 이 표본이 모집단을 잘 대표하지 못하면 표집 오차가 커지고, 그 결과 타당도 계수가 낮아진다.
㉯ 즉, 표집 오차는 표본의 크기가 작아지면 급격하게 증가한다.
② 준거 측정치의 신뢰도 :
㉮ 어떤 검사의 준거 타당도 계산을 위해 준거 측정치의 신뢰도는 그 검사의 준거 타당도에 영향을 미친다.
㉯ 즉, 준거 측정치의 신뢰도가 낮으면 검사의 준거 타당도 계수는 낮아진다.
③ 준거 측정치의 타당도 :
㉮ 실제 타당도 계수를 확인하기 위해서는 검사 점수와 준거 측정치(실제 준거)를 얻어야 하는데, 이때 준거 측정치가 해당 개념(개념 준거)을 얼마나 잘 반영하는가 하는 준거 측정치의 타당도가 그 검사의 준거 타당도에 영향을 미친다.
㉯ 즉, 준거 측정치의 타당도가 낮으면 검사의 준거 타당도 계수는 낮아진다.
✅ 준거 왜곡 :
✔준거 결핍 : 준거 측정 도구가 개념 준거의 내용을 충분히 반영하지 못하는 경우
✔준거 오염 : 준거 측정 도구가 개념 준거와 관련이 없는 내용을 포함하고 있는 경우
✅ 개념 준거와 실제 준거 :
✔개념 준거 : 실질적으로 측정할 수 있는 추상적 · 이론적 준거, 즉 측정하고자 하는 준거를 이론적으로 정리한 것을 말한다.
✔실제 준거 : 개념 준거를 실제로 측정하는 준거를 말한다.
④ 범위 제한 :
㉮ 준거 타당도 계산을 위해 얻은 자료들이 검사 점수와 준거 점수의 전체 범위를 포괄하지 않고 일부 범위만을 포괄하는 경우 타당도 계수가 낮아진다.
㉯ 표본의 크기를 확대하게 되면 타당도 계수는 높아진다. 예를 들어, 70명의 신입 사원에 대한 적성 검사의 타당도 계수가 0.40일 때, 입사하지 못한 사람을 포함한 모든 응시자를 대상으로 하면 검사의 타당도 계수가 높아진다.
■ 다음 시간에 계속, 직업 심리 검사에 대해 알아보도록 하겠다.
* 출처 및 참조 : [직업 심리학], 직업 심리 검사
댓글