설문 개발의 출발점, 구인 추출이란 무엇인가
설문 기반 양적 연구에서 가장 먼저 해야 할 일은 무엇을 측정할 것인지를 이론적으로 정의하는 것이다. 이 과정을 구인 추출(Construct Extraction)이라 한다. 논문 제목과 초록에서 핵심 변수(독립, 종속, 매개, 조절)를 식별하고, 각 변수의 하위 요인(Factor)을 도출한 뒤, 요인 간 관계 모형(Path Diagram)을 설계하는 것이 C1 단계의 전체 흐름이다.
여기서 빠지기 쉬운 함정이 있다. 구인은 반드시 선행 문헌에 이론적 뿌리를 두고 있어야 한다. 연구자의 직관이나 편의로 만들어낸 구인은 심사 과정에서 "이 요인의 이론적 근거는 무엇인가"라는 질문에 답하기 어렵다.
이론적 근거 고정이 왜 중요한가
내용 타당도(Content Validity)는 측정 도구가 개념적으로 측정하려는 대상을 얼마나 잘 포괄하는지를 나타낸다. 이를 정량적으로 평가하는 대표적 방법이 Lawshe(1975)의 CVR(Content Validity Ratio)과 Lynn(1986)의 CVI(Content Validity Index)이다.
CVR은 전문가 패널(최소 3인, 권장 5~7인)이 각 요인에 대해 "필수적이다 / 유용하나 필수 아님 / 불필요하다"의 3점 척도로 평정할 때, 필수라고 응답한 비율에서 기대 비율을 뺀 값이다. Lawshe의 기준표에서 전문가 수에 따른 최소 CVR 임계값을 초과해야 해당 요인이 내용 타당도를 갖는다고 판단한다.
CVI는 문항 수준(I-CVI)과 척도 전체 수준(S-CVI/UA)으로 구분된다. S-CVI/UA가 0.78 이상이어야 전문가 집단 수준의 합의가 확보된다(Lynn, 1986).
C1 단계의 산출물
C1이 완료되면 다음 네 가지 산출물이 확보된다. 요인 정의서에는 각 구인의 조작적 정의와 최소 3편의 선행 연구 인용이 포함된다. Path Diagram은 변수 간 경로 구조를 시각화하며 모형 식별 가능성(자유도 ≥ 0)을 사전 점검한다. CVR/CVI 분석 결과표는 전문가 패널 평정 결과를 수치로 정리한 것이다. 감사 기록에는 요인 확정, 수정, 삭제에 대한 근거가 모두 기록된다.
CVI가 0.78 미만인 요인은 수정 권고안과 함께 C1을 재수행하는 분기로 이어진다. 기준을 충족한 요인만 다음 단계인 문항 생성(C2)으로 진행한다.
modidoc은 논문 초록을 입력하면 C1 단계 전체를 자동화한다.