사회조사분석사 2급 측정의 타당성과 신뢰성 개념 정리
중요도 ★★★★★ · 35% (추정)
2027년 출제기준 반영
개요
이 단원은 '만족', '태도'처럼 눈에 보이지 않는 개념을 숫자로 재는 과정과, 그렇게 잰 값을 믿어도 되는지 따지는 기준을 배웁니다. 먼저 개념의 뜻을 말로 정하고, 이어서 실제로 어떤 질문을 몇 개 써서 어떻게 점수를 매길지 정해야 비로소 측정할 수 있습니다.
숫자를 붙이는 방식에는 네 가지 수준이 있습니다. 이름표처럼 구분만 하는 수준, 높고 낮은 순서까지 있는 수준, 눈금 사이 간격이 같지만 0이 '없음'을 뜻하지 않는 수준, 0이 정말 아무것도 없음을 뜻해 몇 배인지까지 말할 수 있는 수준입니다. 수준이 높을수록 쓸 수 있는 계산과 통계가 늘어납니다.
태도를 재는 척도는 여러 문항을 묶어 만듭니다. 동의 정도에 매긴 점수를 더하는 방식, 뜻이 반대인 두 낱말 사이에서 고르게 하는 방식, 강한 문항에 동의하면 약한 문항에도 동의하도록 계단처럼 쌓는 방식, 평가자들이 문항마다 값을 매겨 두는 방식이 대표적입니다.
잰 값이 쓸모 있으려면 두 가지를 갖춰야 합니다. 몇 번을 재도 비슷하게 나오는 성질이 신뢰도이고, 재려던 것을 정확히 재는 성질이 타당도입니다. 늘 한쪽으로 똑같이 틀리는 오차는 일관성은 해치지 않지만 정확성을 해치므로, 신뢰도가 높아도 타당도가 낮을 수 있습니다.
핵심 개념
조작적 정의
추상적인 개념을 실제로 잴 수 있게, 무엇을 어떤 방법으로 재어 몇 점으로 나타낼지 정한 것입니다. 개념적 정의가 뜻을 정한다면 조작적 정의는 재는 방법을 정합니다.
외우는 요령뜻 다음에 잣대.
매개변수
독립변수의 영향을 받아 다시 종속변수에 영향을 주어 두 변수를 이어 주는 변수입니다. 교육 수준이 소득을 거쳐 건강에 영향을 준다면 소득이 매개변수입니다.
외우는 요령원인과 결과 사이의 다리.
등간척도와 비율척도
둘 다 눈금 간격이 같지만, 비율척도에만 '전혀 없음'을 뜻하는 절대 0이 있어 곱하기와 나누기가 의미를 가집니다.
외우는 요령0이 '없음'이면 비율척도.
리커트 척도
여러 문장에 대해 동의하는 정도를 5점 등으로 답하게 하고, 문항 점수를 합해 태도를 재는 척도입니다. 만들기 쉬워 널리 쓰입니다.
외우는 요령점수를 더하면 리커트.
거트만 척도
문항을 강도 순서로 쌓아, 강한 문항에 '예'라고 한 사람은 약한 문항에도 모두 '예'라고 답하도록 만든 누적 척도입니다. 이 구조가 얼마나 잘 맞는지 재생계수로 확인합니다.
외우는 요령계단식 누적.
기준 관련 타당도
측정 점수를 근무 성과 같은 바깥 기준과 비교해 확인하는 타당도입니다. 기준이 나중에 나타나면 예측타당도, 같은 때 있으면 동시타당도라고 부릅니다.
외우는 요령점수가 바깥 결과를 맞히는가.
크론바흐 알파
한 번 실시한 자료에서 여러 문항이 같은 개념을 얼마나 일관되게 재는지 나타내는 계수입니다. 보통 0과 1 사이이며 1에 가까울수록 일관됩니다.
외우는 요령한 번만 재도 구하는 신뢰도.
헷갈리는 것 비교: 측정 수준(척도) 네 가지
| 척도 | 할 수 있는 것 | 예 |
|---|---|---|
| 명목척도 | 구분 | 성별, 혈액형 |
| 서열척도 | 구분 + 순서 | 학력, 석차 |
| 등간척도 | 순서 + 같은 간격 | 섭씨온도 |
| 비율척도 | 같은 간격 + 절대 0 | 소득, 몸무게, 나이 |
측정의 타당성과 신뢰성, 핵심정리
- 척도 4단계: 명목(구분만, 최빈값) → 서열(순서, 중앙값·최빈값) → 등간(같은 간격, 절대 0 없음, 섭씨온도) → 비율(절대 0, '몇 배' 가능, 소득·몸무게·나이·근무 연수).
- 개념적 정의 = 사전적·이론적 뜻. 조작적 정의 = 무엇을 어떻게 재어 몇 점으로 나타낼지(10개 문항 점수 합계).
- 독립변수(원인) → 매개변수(사이를 이음) → 종속변수(결과). 통제변수 = 섞여 드는 영향을 없애려고 고정.
- 리커트 = 문항별 점수 합산(총화평정). 의미분화 = 반대 형용사 쌍. 거트만 = 강도 순 누적, 재생계수(보통 0.9 이상). 서스톤 = 평가자들이 문항 값 결정. 사회적 거리 = 다른 집단을 받아들이는 거리.
- 체계적 오차(늘 같은 방향·크기) → 타당도↓. 무작위 오차(잴 때마다 들쭉날쭉) → 신뢰도↓.
- 타당도: 내용(전문가 판단, 내용을 고루 대표), 기준 관련(예측 = 나중 기준, 동시 = 같은 시점), 구성(이론적 개념), 액면(겉보기).
- 신뢰도: 재검사법(같은 도구 두 번), 복수양식법(비슷한 두 검사지), 반분법(한 번 실시 후 둘로 나눔), 내적 일관성(크론바흐 알파). 신뢰도는 타당도의 필요조건. 높이는 법: 문항 수 늘리기, 애매한 문항 고치기, 절차 표준화, 모르는 내용 묻지 않기.
측정의 타당성과 신뢰성, 자주 틀리는 함정
틀린 생각: 신뢰도가 높은 측정이면 타당도도 반드시 높다
바른 내용: 늘 1kg 더 나오는 체중계처럼 결과가 일관되어도 실제 값을 틀리게 잴 수 있습니다. 신뢰도는 타당도의 필요조건이어서, 타당도가 높으려면 신뢰도가 높아야 하지만 그 반대는 성립하지 않습니다.
틀린 생각: 섭씨온도는 간격이 같으므로 20°C는 10°C보다 2배 덥다고 말할 수 있다
바른 내용: 섭씨온도는 등간척도라 0°C가 '열이 없음'을 뜻하지 않으므로 '몇 배'라는 비교가 성립하지 않습니다. 몇 배라고 말할 수 있는 것은 절대 0이 있는 비율척도(소득, 몸무게)입니다.
틀린 생각: 같은 개념을 재는 문항 수를 줄이면 신뢰도가 높아진다
바른 내용: 문항이 많을수록 한두 문항의 우연한 오차가 서로 상쇄되어 신뢰도가 높아집니다. 그래서 신뢰도를 높이려면 문항을 줄이는 것이 아니라 늘립니다.
측정의 타당성과 신뢰성 대표 문제 10개
문제 1. 성별(남·여), 혈액형처럼 대상을 구분하는 것만 가능하고 크기나 순서는 없는 척도는?
- ① 서열척도
- ② 등간척도
- ③ 명목척도
- ④ 비율척도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ③ 명목척도
핵심: 명목척도 = 구분만 (성별·혈액형·종교)
명목척도는 숫자를 붙여도(남=1, 여=2) 이름표 역할만 합니다. 더하거나 크기를 비교하는 것은 의미가 없고, 대표값으로 최빈값을 씁니다.
틀린 선지
- 서열척도: 순서(높고 낮음)가 있는 척도입니다. 성별·혈액형에는 순서가 없습니다.
- 등간척도: 간격이 같은 숫자로 나타내는 척도입니다.
- 비율척도: 절대 0이 있어 비율 계산까지 가능한 척도입니다.
문제 2. 학력(중졸·고졸·대졸)이나 석차처럼 순서는 있지만 간격이 같다고 할 수 없는 척도는?
- ① 등간척도
- ② 명목척도
- ③ 비율척도
- ④ 서열척도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ④ 서열척도
핵심: 서열척도 = 구분 + 순서 (간격은 같지 않음)
서열척도는 '더 높다/낮다'는 말할 수 있지만 '얼마나 더'는 말할 수 없습니다. 대표값으로 중앙값과 최빈값을 쓸 수 있습니다.
틀린 선지
- 등간척도: 간격이 같아야 등간척도입니다. 1등과 2등의 차이가 2등과 3등의 차이와 같다고 할 수 없습니다.
- 명목척도: 구분만 하는 척도입니다. 학력에는 높고 낮은 순서가 있습니다.
- 비율척도: 절대 0과 같은 간격이 모두 있어야 합니다.
문제 3. 'A의 월소득은 B의 2배이다'처럼 비율로 비교할 수 있는 척도는?
- ① 등간척도
- ② 비율척도
- ③ 서열척도
- ④ 명목척도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ② 비율척도
핵심: 비율척도 = 절대 0 있음 → 몇 배 비교 가능 (소득·몸무게)
비율척도는 0이 '전혀 없음'을 뜻하는 절대 0이 있습니다. 소득, 몸무게, 나이, 근무 연수가 여기에 속하며, 모든 사칙연산과 통계 분석을 할 수 있는 가장 높은 수준의 척도입니다.
틀린 선지
- 등간척도: 간격은 같지만 절대 0이 없어 '몇 배'라고 말할 수 없습니다.
- 서열척도: 순서만 있고 간격이 같지 않습니다.
- 명목척도: 구분만 할 수 있습니다.
문제 4. 여러 문항에 대해 '전혀 그렇지 않다(1)'부터 '매우 그렇다(5)'까지 답하게 한 뒤 점수를 합해 태도를 재는 척도는?
- ① 의미분화척도
- ② 거트만 척도
- ③ 리커트 척도
- ④ 서스톤 척도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ③ 리커트 척도
핵심: 리커트 = 여러 문항 동의 정도 점수를 합산(총화평정)
리커트 척도는 만들기 쉽고 널리 쓰입니다. 각 문항 점수를 더해 총점을 내므로 총화평정척도라고도 합니다.
틀린 선지
- 의미분화척도: 양 끝에 뜻이 반대인 형용사 쌍(예: 친절하다–불친절하다)을 두고 고르게 하는 척도입니다.
- 거트만 척도: 문항을 강도 순서로 쌓아 누적적으로 응답하게 만드는 척도입니다.
- 서스톤 척도: 평가자들이 각 문항에 점수를 매겨 문항 값을 정하는 척도입니다.
문제 5. 섭씨온도처럼 간격은 같지만 절대적인 0(아무것도 없음)이 없어 '20°C는 10°C의 2배로 덥다'고 말할 수 없는 척도는?
- ① 등간척도
- ② 비율척도
- ③ 서열척도
- ④ 명목척도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ① 등간척도
핵심: 등간척도 = 같은 간격, 절대 0 없음 (섭씨온도·IQ)
등간척도는 더하기·빼기는 의미가 있지만(10°C 올랐다), 0이 '없음'을 뜻하지 않아 곱하기·나누기(2배)는 의미가 없습니다.
틀린 선지
- 비율척도: 비율척도는 절대 0이 있어 '2배'라고 말할 수 있습니다. 섭씨 0°C는 열이 없다는 뜻이 아닙니다.
- 서열척도: 섭씨온도는 1°C 간격이 어디서나 같으므로 순서만 있는 서열척도보다 수준이 높습니다.
- 명목척도: 온도에는 크기와 순서가 있습니다.
문제 6. 같은 측정 도구를 같은 사람들에게 일정한 시간 간격을 두고 두 번 실시해, 두 결과의 상관으로 신뢰도를 구하는 방법은?
- ① 반분법
- ② 재검사법
- ③ 복수양식법(동형검사법)
- ④ 내적 일관성 분석
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ② 재검사법
핵심: 재검사법 = 같은 도구로 두 번 측정, 두 결과의 상관
재검사법은 이해하기 쉽지만, 첫 번째 측정을 기억해 같은 답을 하거나(검사 효과), 두 측정 사이에 실제로 대상이 변할 수 있다는 한계가 있습니다.
틀린 선지
- 반분법: 한 번 실시한 검사의 문항을 두 묶음으로 나눠 두 점수의 상관을 구합니다. 두 번 실시하지 않습니다.
- 복수양식법(동형검사법): 내용이 비슷한 서로 다른 두 검사지를 씁니다. 같은 도구를 두 번 쓰지 않습니다.
- 내적 일관성 분석: 한 번 실시한 자료에서 문항들끼리 얼마나 일관된지(크론바흐 알파 등)를 봅니다.
문제 7. 여러 문항으로 된 척도에서, 문항들이 같은 개념을 얼마나 일관되게 재는지(내적 일관성)를 나타내는 대표적인 계수는?
- ① 재생계수
- ② 결정계수
- ③ 크론바흐 알파
- ④ 변동계수
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ③ 크론바흐 알파
핵심: 크론바흐 알파 = 문항 간 내적 일관성 신뢰도 (0~1)
크론바흐 알파는 보통 0에서 1 사이 값을 가지며 1에 가까울수록 문항들이 일관되게 같은 것을 잰다는 뜻입니다. 한 번만 실시해도 계산할 수 있어 가장 널리 쓰입니다.
틀린 선지
- 재생계수: 거트만 척도에서 누적 구조가 얼마나 잘 맞는지를 나타내는 계수입니다.
- 결정계수: 회귀분석에서 독립변수가 종속변수를 얼마나 설명하는지 나타내는 값입니다.
- 변동계수: 표준편차를 평균으로 나눈 값으로, 흩어진 정도를 비교할 때 씁니다.
문제 8. 신뢰도와 타당도의 관계로 옳은 것은?
- ① 신뢰도가 높다고 해서 타당도가 반드시 높은 것은 아니다
- ② 신뢰도가 높으면 타당도도 반드시 높다
- ③ 타당도가 높아도 신뢰도는 낮을 수 있다
- ④ 신뢰도와 타당도는 서로 아무 관계가 없다
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ① 신뢰도가 높다고 해서 타당도가 반드시 높은 것은 아니다
핵심: 신뢰도는 타당도의 필요조건(충분조건은 아님)
타당도가 높으려면 먼저 결과가 일관되어야(신뢰도) 합니다. 그러나 일관되기만 하고 엉뚱한 것을 잴 수도 있으므로, 신뢰도가 높다고 타당도가 보장되지는 않습니다.
틀린 선지
- 신뢰도가 높으면 타당도도 반드시 높다: 늘 1kg 더 나오는 체중계처럼, 결과는 일관되지만(신뢰도 높음) 틀릴 수(타당도 낮음) 있습니다.
- 타당도가 높아도 신뢰도는 낮을 수 있다: 결과가 들쭉날쭉하면 정확하게 잰다고 할 수 없으므로, 타당도가 높으려면 신뢰도도 높아야 합니다.
- 신뢰도와 타당도는 서로 아무 관계가 없다: 신뢰도는 타당도의 필요조건이라는 관계가 있습니다.
문제 9. '직무 만족'을 '직무 만족 설문 10개 문항 점수의 합계'로 정해 실제로 잴 수 있게 만든 것은?
- ① 개념적 정의
- ② 조작적 정의
- ③ 가설
- ④ 이론
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ② 조작적 정의
핵심: 조작적 정의 = 개념을 측정 가능한 절차·지표로 정함
추상적인 개념은 그대로는 잴 수 없습니다. 개념적 정의로 뜻을 정한 뒤, 조작적 정의로 '무엇을 어떻게 재서 몇 점으로 나타낼지'를 정해야 측정할 수 있습니다.
틀린 선지
- 개념적 정의: '일에 대해 느끼는 긍정적인 감정 상태'처럼 사전적·이론적으로 뜻을 밝히는 것으로, 재는 방법까지 정하지는 않습니다.
- 가설: 변수 사이의 관계에 대한 잠정적 답입니다.
- 이론: 여러 개념과 명제를 체계적으로 묶은 설명 틀입니다.
문제 10. 시험 문항들이 가르친 내용 전체를 고루 대표하고 있는지를 전문가가 판단하는 타당도는?
- ① 내용타당도
- ② 예측타당도
- ③ 구성타당도
- ④ 재검사 신뢰도
▼ 정답과 해설 보기▲ 정답과 해설 접기
정답: ① 내용타당도
핵심: 내용타당도 = 측정 내용이 재려는 영역을 고루 대표하는가
내용타당도는 주로 전문가의 판단으로 확인합니다. 예를 들어 10개 단원을 가르쳤는데 시험이 2개 단원에서만 나왔다면 내용타당도가 낮습니다.
틀린 선지
- 예측타당도: 측정 점수가 미래의 결과(예: 입사 후 성과)를 얼마나 잘 맞히는지를 봅니다.
- 구성타당도: 측정이 이론적 개념(구성 개념)을 제대로 재는지 다른 개념과의 관계로 확인합니다.
- 재검사 신뢰도: 타당도가 아니라 신뢰도를 확인하는 방법입니다.
직접 풀어서 확인해 보세요.
- 중요도
- ★★★★★ (5 / 5)
- 출제 비중
- 조사관리와 자료처리 25문항 중 약 9문항 (35%)
AI 작성 · 검수 완료 · AI가 새로 쓴 글 가운데, 작성과 분리된 AI 검증(다시 읽고 사실·수치 확인)을 통과한 단원만 싣습니다. 틀린 곳을 발견하면 알려 주세요.