안녕하세요SKY논문통계연구소입니다.교육학 논문 KCI 심사,측정 도구와 타당도에서자주 지적되는 이유는생각보다 패턴이 명확합니다.교육학 연구에서설문지나 검사 도구를사용하는 논문이 많습니다.
그런데 심사위원회에서측정 도구와 타당도 관련 지적이반복적으로 나오는논문들을 보면,공통된 지점이 있습니다.도구를 사용했다는 것과도구의 타당성을입증했다는 것은다른 이야기입니다.심사위원이 요구하는 것은후자입니다.교육학 논문 KCI 심사에서측정 도구 관련 지적이나오는 이유,하나씩 짚어드립니다.
타당도, 심사위원이 실제로 확인하는 것
타당도(validity)는측정 도구가측정하고자 하는 것을실제로 측정하고 있는지에관한 개념입니다.
PMC에 등재된 연구(Tabari-Khomeiran & Barrett, 2025 /Evidence-Based Nursing)는구성타당도(construct validity)를다음과 같이 정리합니다.구성타당도는측정 도구가 이론적으로정의된 구성개념을얼마나 잘 반영하는지를평가하는 것으로,이를 위해 수렴타당도(convergent validity)와판별타당도(discriminant validity)를함께 확인해야 합니다.(Tabari-Khomeiran & Barrett,2025 / PMC)교육학 KCI 심사위원이측정 도구에서 확인하는 것은크게 세 가지입니다.이 도구가이 연구의 구성개념을측정하는 데 적합한가,타당도 검증 절차를이 연구 맥락에서 직접 수행했는가,신뢰도 계수가하위 척도별로 모두 보고됐는가.
① 선행연구 도구를 그대로 쓰면서타당도 검증을 생략한 경우기존 선행연구에서타당도가 검증된 도구라도,이 연구의 대상과 맥락에서동일하게 적용된다는보장이 없습니다.심사위원은선행연구의 타당도 결과를인용하는 것이 아니라,이 연구 데이터로직접 검증한 결과를요구합니다.확인적 요인분석(CFA) 결과나내용타당도(content validity)검토 과정 없이"선행연구에서 타당도가확인된 도구를 사용했다"는서술만으로는 지적을피하기 어렵습니다.② 탐색적 요인분석(EFA)만 하고CFA를 생략한 경우
EFA는 요인 구조를탐색하는 단계입니다.이미 이론적 구조가 있는 도구를사용하는 경우라면CFA로 그 구조를확인하는 절차가 필요합니다.실제로 CFA를 실패한 후에야EFA를 수행하는 것이 적절하며,이론적 근거 없이EFA만 수행하고타당도 검증을 마쳤다고서술하면 심사위원의지적 대상이 됩니다.(Lambert & Newman, 2022)③ 수렴타당도와 판별타당도를보고하지 않은 경우
구성타당도를 주장하려면수렴타당도와 판별타당도를함께 제시해야 합니다.수렴타당도는같은 구성개념을 측정하는지표들이 높은 상관을 보이는지,판별타당도는다른 구성개념을 측정하는지표들과는 낮은 상관을보이는지를 확인하는 것입니다.AVE ≥ .50, CR ≥ .70이일반적인 수렴타당도 기준이며,판별타당도는 HTMT ≤ .85 또는 Fornell-Larcker기준으로 보고합니다.④ 신뢰도 계수를전체 척도로만 보고한 경우
Cronbach's α를전체 척도의 합산 값으로만보고하고 하위 척도별 계수를생략하면 지적받습니다.하위 척도 각각의 α를보고해야 하며,α ≥ .70이일반적인 허용 기준입니다.하위 척도 중 기준을하회하는 것이 있다면그 이유와 해석의 한계를논의 섹션에서서술해야 합니다.
교육학 연구에서 측정 도구 지적이 특히 많은 이유
교육학 연구에서측정 도구 관련 지적이다른 분야보다빈번한 이유가 있습니다.교육학은 태도, 인식, 역량,동기, 학습 성과 같은추상적 구성개념을측정하는 경우가 많습니다.이런 개념들은직접 관찰이 어렵고,측정 도구의 타당성에의존하는 정도가 높습니다.그런데 연구자들이기존 도구를 그대로가져다 쓰면서이 연구 맥락에서의 적합성을검토하지 않는경우가 많습니다.대상이 달라지거나,교육 환경이 달라지거나,문화적 맥락이 달라지면동일한 도구가 동일하게기능한다는 보장이 없습니다.
측정 도구 관련 심사 지적을사전에 방지하기 위한점검 항목입니다.이 연구 데이터로직접 CFA를 수행했는가,수렴타당도(AVE, CR)와판별타당도(HTMT 또는 Fornell-Larcker)를 보고했는가,하위 척도별 Cronbach's α를모두 보고했는가,도구 수정이 있었다면내용타당도 검토절차를 서술했는가.이 네 가지를 방법론섹션에서 확인하는 것만으로도주요 지적 상당수를막을 수 있습니다.
교육학 논문 KCI 심사에서측정 도구와 타당도 지적이반복되는 이유는도구 자체의 문제가 아닌경우가 많습니다.검증 절차를이 연구 맥락에서직접 수행하고,수렴타당도와 판별타당도를함께 보고하고,신뢰도 계수를하위 척도별로 제시하는 것이핵심입니다.패턴을 알면 투고 전에막을 수 있습니다.교육학 논문 KCI 심사,교육학 논문 KCI 심사는측정 도구의 타당성을입증하는 것에서통과율이 달라집니다.현재 원고, 심사의견서,분석결과표,투고 예정 학술지를 보내주시면게재 가능성과 보완 범위를검토해드릴 수 있습니다.
참고문헌Tabari-Khomeiran, R., & Barrett, D. (2025). What is construct validity?Evidence-Based Nursing, 28, 38–40. PMC.Lambert, L. S., & Newman, D. A. (2022). Construct development and validation in three practical steps.Organizational Research Methods, 26(4).Roy, R., et al. (2023). Face, content, criterion and construct validity assessment of a newly developed tool.PLOS ONE, 18, e0280189. PMC9927793.Repke, L., Birkenmaier, L., & Lechner, C. M. (2024). Validity in survey research. GESIS Survey Guidelines.Menon, V., et al. (2022). Why do manuscripts get rejected?Indian Journal of Psychological Medicine, 44, 59–65. PMC9022928.
교육학 논문 KCI 심사, 측정 도구와 타당도에서 자주 지적되는 이유교육학 논문 KCI 심사, 측정 도구와 타당도에서 자주 지적되는 이유#교육학논문KCI심사#교육학논문#KCI논문#측정도구타당도#구성타당도#수렴타당도#판별타당도#신뢰도계수#CFA#확인적요인분석#Cronbach#AVE#HTMT#논문심사#심사위원지적#교육연구#논문수정전략#SKY논문통계연구소#논문컨설팅#KCI등재지#연구방법론#논문통계#학술논문#연구자지원#논문전문가#논문도움#교육학연구#측정도구#게재전략#논문투고
