한국에서는 조사의 가장 근본적인 도구인 설문지 설계에 관한 조사방법론 연구가 거의 없다. 본 연구는 2016년 한국종합사회조사의 표본분할을 통한 조사실험을 통하여 한국의 가장 중요한 문제에 대한 폐쇄형 질문과 개방형 질문에 대한 응답의 차이를 분석하였다. 폐쇄형과 개방형에서 모두 경제(35% 대 33.2%)가 가장 많이 언급되었고, 폐쇄형 설문에서는 범죄(24.4%), 교육(15.4%), 빈곤(6.3%)순으로, 개방형에서는 정치(10.8%), 범죄(9.5%), 교육(7.6%)순이었다. 즉, 정치가 포함되지 않은 폐쇄형 질문 응답과 개방형에서 응답순위가 일관성이 있었다. 최대 응답범주였던 경제를 답한 응답자의 특성이 폐쇄형과 개방형에서 인구학적 변수 중 연령과 가구소득 그리고 경제상태만족도 측면에서 제한적으로 차이가 있음을 확인하였다. 본 연구는 타국의 설문문항을 수용할 때 한국적 맥락에서 설문의 질문 부분뿐만 아니라 응답범주의 적정성에 대한 주의가 필요하고, 사전조사에 조사실험이 더 많이 시도될 필요가 있다는 점을 제시한다.