번역한 설문 문항의 뜻이 달라질 때: 허가 확인부터 인지면담·사전검사까지

외국어 설문지를 한국어로 옮긴 뒤 연구팀이 번역문을 읽어 보면 대체로 자연스럽게 느껴질 수 있다. 그러나 응답자는 연구자가 예상하지 못한 뜻으로 문항을 해석하거나, 질문은 이해하면서도 선택지에서 자신의 답을 찾지 못할 수 있다. 특히 연령, 직업, 의료 이용, 정서처럼 언어와 생활 맥락의 영향을 받는 문항은 단어 하나를 매끄럽게 바꾸는 것으로 해결되지 않는다.

핵심 결론은 번역과 역번역만 끝낸 설문지를 바로 본조사에 투입하지 말아야 한다는 것이다. 먼저 번역·수정 권한을 확인하고, 측정 개념과 대상 집단을 고정한 뒤, 복수 번역과 합의, 전문가 검토, 실제 대상자의 인지면담, 운영 환경에서의 사전검사를 거쳐야 한다. 기존 척도의 신뢰도와 타당도 근거도 새 언어와 집단에 자동으로 이전되지 않으며, 필요한 검증 범위는 점수의 사용 목적에 따라 정해야 한다.

이 글은 2026년 9월 18일 기준으로 국제검사위원회 지침, 미국 인구조사국의 번역 및 설문 품질 자료, COSMIN 자료와 세계보건기구가 게재한 문화적 조정 사례를 검토해 구성했다. 특정 척도의 법적 허가 상태나 한국어판의 실제 성능을 직접 시험한 결과는 포함하지 않는다.

단순 번역으로 끝내기 어려운 경우

연락 안내문이나 연구팀 내부 참고자료를 번역하는 일과, 응답을 점수화해 집단의 특성을 추론하는 측정도구를 번역하는 일은 위험의 수준이 다르다. 후자는 번역 결과가 점수의 의미, 절단점, 집단 비교와 연구 결론에 영향을 줄 수 있으므로 대체로 언어 번역을 넘어선 문화적 조정이 필요하다. 문화적 조정은 문항이 측정하려는 개념을 유지하면서 대상 집단의 언어, 생활 조건, 제도와 조사 방식에 맞게 표현과 형식을 검토하는 과정이다.

다음 중 하나라도 해당하면 별도의 검증 계획을 세우는 편이 안전하다.

한국어 공식판이 없거나 출처가 불분명한 번역본을 사용한다.
기존 한국어판의 단어, 선택지, 회상 기간, 문항 순서 또는 채점법을 수정한다.
원래 개발된 집단과 연령, 질환, 직업, 교육 수준 또는 생활 맥락이 다르다.
종이 설문을 웹이나 모바일 설문으로 바꾸면서 화면 배치와 응답 방식을 변경한다.
원어 집단과 한국어 집단의 평균 점수를 직접 비교하려 한다.
점수를 선별, 진단 보조, 자원 배분과 같은 개인 수준의 결정에 활용한다.

COSMIN 내용타당도 매뉴얼은 내용타당도를 특정 개념, 대상 집단, 사용 맥락을 기준으로 판단해야 한다고 설명한다. 여기서 내용타당도는 문항이 관련성이 있는지, 중요한 내용이 빠지지 않았는지, 응답자가 의도대로 이해하는지를 포괄한다. 따라서 원척도가 타당하다는 사실만으로 새로운 한국어 적용까지 타당하다고 단정할 수 없다.

설문지 번역 방법의 전체 흐름

단계	핵심 질문	남겨야 할 결과
허가 확인	누가 번역과 수정을 승인할 권리를 갖는가	허가서, 라이선스 조건, 연락 기록
범위 고정	무엇을 누구에게 어떤 방식으로 측정하는가	원문 버전, 대상 집단, 조사 방식, 채점 규칙
독립 번역과 합의	직역과 개념적 표현 중 무엇이 적합한가	복수 번역안, 합의본, 결정 사유
역번역과 전문가 검토	의미 손실이나 문화적 부적합이 있는가	차이 목록, 검토 의견, 수정본
인지면담	실제 응답자가 무엇을 떠올리고 어떻게 답하는가	문항별 해석 문제와 수정 근거
사전검사	실제 설문 환경에서 오류 없이 작동하는가	누락·편중·분기·화면 오류와 조치 기록
측정 특성 검토	연구 목적에 필요한 점수 해석 근거가 있는가	신뢰도·타당도·집단 비교 분석 계획과 결과

1단계: 원저자보다 먼저 권리 보유자를 확인한다

인터넷에서 원문을 내려받을 수 있거나 논문 부록에 문항이 공개돼 있다는 사실이 번역과 수정의 허가를 뜻하지는 않는다. 저자가 저작권을 출판사나 배포기관에 이전했거나, 비영리 연구만 허용하거나, 승인된 번역 업체와 절차를 요구할 수 있다. 국제검사위원회 번역·조정 지침 2판도 조정에 앞서 지식재산권 보유자에게 필요한 허가를 받도록 제시한다.

문의할 때는 도구명만 적지 말고 원문 판본, 번역 언어, 연구 목적, 대상 국가와 집단, 표본 모집 범위, 문항 수정 가능성, 전자 설문 사용 여부, 결과물 공개 범위를 함께 적는 것이 좋다. 허가 답변에서는 번역만 가능한지, 선택지의 현지화나 문항 삭제가 가능한지, 최종 번역본을 권리자에게 제출해야 하는지, 논문 부록과 데이터 저장소에 문항을 공개할 수 있는지를 구분해 기록한다.

2단계: 번역 전에 개념과 버전을 고정한다

번역자는 문장만 받아서는 적절한 표현을 선택하기 어렵다. 각 문항이 측정하는 하위 개념, 회상 기간, 채점 방향, 역채점 문항, 응답 선택지의 간격과 원척도의 개발 대상이 함께 제공돼야 한다. 같은 단어라도 현재 상태, 평소 경향, 지난 일주일의 경험 중 무엇을 묻는지에 따라 한국어 표현이 달라진다.

이 단계에서는 사용할 원문 파일과 판본을 고정하고, 중간에 새 버전이 발견되면 조용히 교체하지 말아야 한다. 대상 집단의 연령, 건강 상태, 문해력, 지역과 조사 방식도 번역 지침서에 적는다. 대면 면접용 표현을 자기기입식 웹 설문에 그대로 넣으면 주어가 불분명해지거나 면접원용 지시문이 응답자에게 노출될 수 있다.

3단계: 복수의 독립 번역을 하나의 합의본으로 만든다

가능하다면 두 명 이상이 서로의 결과를 보지 않고 먼저 번역한다. 번역팀 전체가 모든 역량을 동시에 갖출 필요는 없지만, 합쳐서 원어와 한국어, 대상 문화, 측정 개념, 설문 문항 작성 원리를 다룰 수 있어야 한다. 국제검사위원회 지침도 한 명의 번역자에게 모든 판단을 맡기기보다 서로 다른 전문성을 가진 팀을 구성하는 접근을 권고한다.

합의 회의에서는 어느 문장이 더 자연스러운지만 투표하지 않는다. 문항별로 측정 개념, 의미 범위, 난이도, 정서적 강도, 존대 수준, 회상 기간과 선택지의 연결을 살핀다. 직역을 버렸다면 왜 바꿨는지, 문화적 사례를 교체했다면 원래 개념을 어떻게 보존했는지 기록한다.

문항 관리표에는 원문, 번역안 A와 B, 합의본, 쟁점, 결정 사유, 검토자, 날짜와 버전을 두는 것이 실용적이다. 이 표는 이후 역번역과 인지면담에서 문제가 발견됐을 때 어떤 결정으로 돌아가야 하는지를 알려 주는 감사 추적 자료가 된다.

4단계: 역번역은 합격 판정이 아니라 이상 탐지에 쓴다

역번역은 한국어 합의본을 원문을 보지 않은 번역자가 다시 원어로 옮겨 원문과 비교하는 절차다. 누락, 의미 확대·축소, 부정 표현의 변화와 시간 범위의 오류를 발견하는 데 도움이 된다. 그러나 역번역 문장이 원문과 비슷하다는 결과가 한국어 문항의 이해 가능성이나 타당성을 보증하지는 않는다.

국제검사위원회 지침은 순방향 번역과 역번역 모두 한계가 있으며, 두 절차만으로 번역·조정된 검사를 타당화할 충분한 근거가 되기 어렵다고 설명한다. 한국어 문장을 원어로 쉽게 되돌리려다 보면 실제 응답자에게는 딱딱하고 낯선 표현이 남을 수도 있다. 그러므로 역번역 차이를 발견하면 원문과 역번역문만 비교하지 말고, 한국어 문항이 대상자의 현실에서 어떤 뜻으로 읽히는지를 다시 논의해야 한다.

5단계: 전문가는 정확성만이 아니라 내용타당도를 본다

전문가 검토에는 해당 개념의 연구자, 대상 집단이나 현장을 아는 실무자, 설문 방법 전문가와 언어 전문가가 필요하다. 검토 질문은 COSMIN이 제시하는 관련성, 포괄성, 이해 가능성을 실무에 맞게 풀어 쓸 수 있다. 문항과 선택지가 측정 개념에 관련되는지, 대상자에게 필요한 핵심 내용이 빠지지 않았는지, 안내문·회상 기간·선택지를 의도대로 이해할 수 있는지를 확인한다.

전문가가 문장을 이해했다는 사실은 대상자가 이해한다는 근거가 아니다. 전문가는 개념적 오류와 문화적 부적합을 찾는 역할을 맡고, 실제 이해 과정은 다음 단계의 대상자 면담으로 확인해야 한다. 전문가 의견이 갈리면 평균 점수만 계산해 끝내기보다 쟁점과 최종 결정의 이유를 기록한다.

6단계: 인지면담으로 응답자의 사고 과정을 확인한다

인지면담은 응답자가 질문을 이해하고, 관련 경험을 떠올리고, 판단한 뒤, 선택지에 답을 대응시키는 과정을 질적으로 살펴보는 방법이다. 표본의 통계적 대표성을 확보하는 예비 설문과 목적이 다르다. 대상 집단 안에서 연령, 교육 수준, 경험, 문해력과 디지털 이용 능력이 다른 참여자를 의도적으로 포함해 서로 다른 실패 가능성을 찾는 것이 중요하다.

각 문항에 다음과 같은 질문을 사용할 수 있다.

이 문항이 무엇을 묻는다고 생각했는가?
자신의 말로 다시 설명하면 어떻게 표현하겠는가?
답을 고를 때 어떤 경험이나 기간을 떠올렸는가?
선택한 응답과 가장 가까운 선택지는 무엇이었으며, 맞지 않는 부분은 없었는가?
이해하기 어렵거나 불편하거나 판단할 수 없는 단어가 있었는가?

WHO 동지중해지역 학술지에 실린 결핵 환자 비용 설문의 조정 사례에서도 순방향 번역, 역번역과 전문가 검토 뒤 인지면담을 실시했다. 참여자에게 문항의 의미, 자신의 말로 바꾼 표현, 답을 떠올린 과정과 이해하지 못한 용어를 질문했고, 문항뿐 아니라 응답 선택지와 현지 제도에 맞지 않는 항목도 수정했다. 이는 역번역에서 드러나지 않는 회상 문제와 제도적 불일치를 실제 응답 과정에서 찾을 수 있음을 보여 주는 사례다.

7단계: 최종 설문 환경에서 사전검사한다

인지면담으로 문항의 의미를 다듬은 뒤에는 본조사와 가능한 한 같은 플랫폼, 기기, 분기와 모집 절차로 소규모 사전검사를 진행한다. 여기서는 응답 누락, 특정 선택지 쏠림, 응답 불가능한 문항, 소요 시간, 중도 이탈, 필수 응답 경고, 건너뛰기 규칙, 역채점 코드와 데이터 내보내기를 점검한다. 질문 문장만 보여 주고 검사해서는 실제 조사 화면에서 생기는 문제를 찾기 어렵다.

미국 인구조사국 Statistical Quality Standard A2는 인구조사국이 실제 자료 수집에 사용하는 비영어 언어판을 해당 언어로 사전검사하도록 요구한다. 또한 내용, 문항 순서, 분기, 형식, 탐색과 편집 기능의 문제를 확인하고 수정하도록 규정한다. 이는 미국 인구조사국 업무에 적용되는 기관 기준이지만, 전문가 검토만으로 응답자 사전검사를 대체하기 어렵다는 점은 일반 연구 설계에도 참고할 수 있다.

온라인 설문에서는 언어가 같아도 화면이 달라지면 응답 과제가 달라질 수 있다. 2026년 4월 1일판 미국 인구조사국 조사 방식별 설계 자료는 웹, 전화, 대면 방식의 문항 구성과 탐색 조건을 별도로 다룬다. 연구자는 이를 보편적 플랫폼 규격으로 받아들이기보다, 모바일 줄바꿈, 행렬형 문항, 긴 선택지, 오류 메시지와 뒤로 가기가 응답 의미를 바꾸지 않는지 직접 확인하는 참고 자료로 사용해야 한다.

어디까지 다시 타당화해야 하는가

모든 번역 연구에 동일한 분석 목록을 적용할 필요는 없다. 반대로 원척도 논문의 신뢰도 계수 하나를 인용하는 것으로도 충분하지 않다. 국제검사위원회는 새 언어판의 규준, 신뢰도와 타당도 근거가 원판에서 자동으로 이전되지 않으며, 점수의 사용 목적에 맞는 경험적 근거를 마련해야 한다고 제시한다.

승인된 기존 한국어판을 같은 판본·대상·맥락에서 그대로 사용하는 경우: 개발 및 검증 연구와 허가 조건을 확인하고, 현재 표본에서 점수 해석에 필요한 신뢰도와 자료 적합성을 검토한다. 표현을 임의로 현대화하면 기존판과 같은 도구라고 보기 어려울 수 있다.
새로 번역하거나 문항·선택지·회상 기간·채점법을 바꾼 경우: 내용타당도와 응답 과정 근거를 확보하고, 척도 구조와 신뢰도 등 연구 목적에 필요한 측정 특성을 새 자료에서 평가한다.
언어 또는 문화 집단의 평균을 비교하는 경우: 각 집단에서 타당한지만 보는 데서 그치지 않고, 측정불변성이나 차별문항기능처럼 같은 점수가 같은 개념을 나타내는지 확인할 분석이 필요하다.
종이판을 웹·전화·대면 방식으로 변경한 경우: 문항 표현을 유지했더라도 화면 배치, 면접원 지시, 선택 방식과 분기가 달라졌다면 방식별 사전검사 범위를 정한다.

필요 표본 수와 분석법은 문항 수, 응답 범주, 모형, 비교 집단과 사용 목적에 따라 달라진다. ‘예비조사 몇 명이면 타당화가 끝난다’는 고정 숫자를 적용하지 말고, 인지면담을 통한 질적 점검과 본격적인 측정 특성 분석을 별개의 단계로 계획해야 한다.

논문 방법 절과 연구 파일에 남길 기록

미국 인구조사국 번역 지침 개발 문서는 준비, 번역, 사전검사, 수정, 문서화의 다섯 단계를 제시하며 번역팀 접근을 권고한다. 국제검사위원회도 조정 과정의 변경 사항과 동등성 근거를 재현 가능할 정도로 문서화하도록 요구한다. 논문에는 지면 때문에 모든 문항별 논의를 넣기 어렵더라도 연구 파일에는 다음 정보를 보존해야 한다.

원척도 이름, 판본, 출처, 권리 보유자와 허가 범위
측정 개념, 대상 집단, 조사 방식과 번역 원칙
번역자와 검토자의 역할 및 관련 전문성
독립 번역, 합의, 역번역과 전문가 검토의 순서
문항·안내문·선택지별 쟁점, 수정 사유와 결정자
인지면담 참여자 선정 기준, 질문 방식, 발견된 문제와 조치
사전검사 환경, 분기·화면·코딩 오류와 수정 결과
최종본 버전 번호, 날짜, 채점 규칙과 사용 제한
수행한 신뢰도·타당도·집단 비교 분석과 남은 불확실성

자주 실패하는 세 가지 방식

번역자 한 명에게 완성본을 맡긴다

언어 능력이 뛰어나도 개념, 조사 방법과 대상 문화의 문제를 한 사람이 모두 발견하기는 어렵다. 최소한 독립적인 대안 번역과 합의 검토가 가능하도록 역할을 나누고, 자원이 제한되면 어떤 단계가 축소됐는지 투명하게 밝힌다.

역번역의 문장 일치율을 합격 기준으로 삼는다

역번역은 의미 변화의 경보 장치이지 타당도 점수가 아니다. 원문으로 잘 되돌아가는 직역이 한국어 응답자에게는 부자연스럽거나 다른 정서적 강도로 읽힐 수 있으므로, 한국어 문항 자체에 대한 전문가 검토와 대상자 면담이 필요하다.

문항 본문만 검사한다

응답자는 안내문, 예시, 회상 기간, 선택지, 단위와 화면을 합쳐 질문을 이해한다. ‘해당 없음’이 빠지거나 분기가 잘못 연결되면 번역문이 정확해도 측정 오류가 생긴다. 최종 사전검사는 본조사에 사용할 전체 언어판과 실제 작동 화면을 대상으로 해야 한다.

바로 적용하는 점검 목록

사용할 원문 판본과 채점 지침을 확보했는가?
권리 보유자에게 번역, 수정, 전자화와 공개 범위를 확인했는가?
측정 개념, 대상 집단과 조사 방식을 번역 전에 고정했는가?
복수의 독립 번역안과 문항별 합의 사유를 남겼는가?
역번역을 한국어판의 합격 판정이 아닌 차이 탐지에 사용했는가?
문항뿐 아니라 안내문, 선택지, 회상 기간과 채점 범주를 검토했는가?
실제 대상자가 문항을 자신의 말로 설명하도록 확인했는가?
본조사 플랫폼에서 모바일 화면, 분기, 필수 응답과 데이터 코딩을 시험했는가?
연구 목적에 맞는 신뢰도·타당도·집단 간 동등성 분석 범위를 정했는가?
수정 이력과 최종본의 버전 번호를 고정했는가?

최종 판단

외국어 설문지를 한국어로 옮기는 작업의 완료 기준은 번역문이 자연스럽거나 역번역문이 원문과 닮았다는 데 있지 않다. 사용 권한이 명확하고, 개념과 대상이 고정돼 있으며, 번역팀이 선택의 근거를 남기고, 실제 응답자가 문항과 선택지를 의도대로 이해하며, 최종 조사 환경이 오류 없이 작동해야 한다.

이미 검증된 한국어판이 있다면 새 번역을 시작하기 전에 판본, 대상 집단, 사용 허가와 조사 방식이 현재 연구에 맞는지 먼저 확인한다. 새 번역이나 실질적 수정이 필요하다면 인지면담과 사전검사를 연구 일정의 선택 사항이 아니라 번역 검증의 일부로 배정하는 것이 적절하다.

검증이 더 필요한 부분

사용하려는 개별 척도의 권리 보유자, 최신 판본, 한국어 공식판 유무와 번역·수정·온라인 배포 허가 범위
소속 기관의 연구윤리 심의에서 번역 인지면담과 사전검사 참여자를 본 연구 대상자로 다루는지 여부
실제 설문 플랫폼의 모바일·데스크톱 화면, 분기 로직, 필수 응답, 역채점, 무응답 코드와 데이터 내보내기 결과
대상 집단을 포함한 인지면담에서 문항·선택지·회상 기간이 의도대로 해석되는지 여부
투고 예정 학술지와 연구 분야가 요구하는 번역 절차, 보고 항목, 신뢰도·타당도 및 측정불변성 근거의 범위

출처 및 확인일

국제검사위원회 번역·조정 지침 2판 v2.4, 미국 인구조사국 번역 지침 개발 문서와 Statistical Quality Standard A2, COSMIN 내용타당도 매뉴얼, WHO 동지중해지역 학술지의 문화적 조정 사례, 미국 인구조사국의 2026년 조사 설계 자료를 확인했다. 웹 자료 확인일은 2026년 9월 18일이다.