Cho, Sung Kyum;LoCascio, Sarah Prusoff;Kim, Sungjoong
Asian Journal for Public Opinion Research
/
제9권2호
/
pp.188-211
/
2021
Decreasing response rates to traditional survey methods, like face-to-face and telephone interviews, have led survey practitioners around the world to seek new ways of conducting surveys in recent years." The COVID-19 pandemic exacerbated this problem because it made conducting face-to-face interviews even more difficult than before. For example, it made conducting face-to-face surveys infeasible in 2020 in South Korea, and so the Korean Academic Multimode Open Survey (KAMOS) was unable to conduct a planned face-to-face survey to recruit new panel members. The entire 8,514-member panel, established via two-stage probability-based sampling from 2016 to 2019, was invited to take three online/telephone surveys in 2020. Of these panel members, 1,352 responded to at least one survey in 2020. To test to what extent the panel remained representative of the adult South Korean population, we compared the two groups of panel members: those who responded to at least one survey in 2020 and those who did not. After weighting both groups on the basis of age, sex, and geographical area, we analyzed their responses to some of the questions that were asked during multiple rounds of the face-to-face panel-recruiting interviews. Using Cohen's d for survey items that could be analyzed numerically and Cramér's V for categorical items, we were able to conclude that the respondents to the 2020 surveys were equivalent to the non-respondents in terms of both demographics and in the answers they originally gave to substantive questions on a variety of topics related to social science or public opinion research, including questions about quality of life, societal issue, and politics (Cohen's d items <0.2, 95% CI; Cramér's V items <0.1, 95% CI). This analysis may provide a model for others who wish to test the continued representativeness of their panel or who would like to use a different survey mode or change some other aspect of their methodology and test whether it is equivalent to their former methodology. Our success in building a panel that retained its representativeness may be useful to those in other countries where face-to-face surveys had previously been the norm but are becoming increasingly difficult to conduct.
패널조사가 시점 간 변화를 알아내는 데 있어 매우 유용한 조사방법론이기는 하지만 조사차수가 넘어갈수록 패널표본이 모집단 대표성을 잃어 간다는 단점이 있다. 이러한 표본의 왜곡은 패널 이탈과 조건화에 기인하는 것으로 알려져 있다. 본 연구는 4개월 동안 5회 측정된 KBS-MBMR의 2007년 대통령 선거 패널조사에서의 이탈과 조건화를 통계적 관점에서 검토해 본 것이다. 주요 결과는 다음과 같다. 첫째, 패널 이탈 성향은 여자가 남자보다 20대 60이하와 30대, 이상이 40대, 50대보다 선호(적합/지지) 후보를 묻는 질문에 대해 "없다/모른다/무응답"으로 대답한 사람(=DK 응답자)들이 선호후보 밝힘 응답자들보다 컸다. 둘째, 패널조사라는 반복측정이 선호후보 밝힘을 응답하도록 밀어붙이는 조건화 효과가 있음을 확인하였다. 셋째, 이러한 패널 이탈과 조건화에도 불구하고, DK 응답을 제외하는 경우 반복조사가 지지후보 응답에 영향을 주지 않았고 최종 투표의향에도 영향을 주지 않았다.
Cho, Sung Kyum;LoCascio, Sarah Prusoff;Lee, Kay-O;Jang, Deok-Hyun;Lee, Jong Min
Asian Journal for Public Opinion Research
/
제4권2호
/
pp.73-87
/
2017
The Korean Academic Multimode Open Survey (KAMOS) is a national survey first conducted in 2016. Stratified cluster random sampling was used in an initial face-to-face survey during which panel members were recruited. The second survey allowed invited panel members to answer online or by phone. KAMOS includes both longitudinal items and omnibus items, i.e., researchers can propose questions to include on KAMOS. This paper seeks to establish that KAMOS is representative of the South Korean adult population. The demographic variables from the first survey were comparable to demographic variables from two well-respected surveys in South Korea: the KOSTAT Social Survey and the Gallup Korea Omnibus Survey. To ensure that there was no substantial difference between those who answered the first survey and those who answered the second survey, we compared the results of 22 items from the first survey. The 2,000 panel members who were invited to participate in the second survey had similar responses to the 1,008 of those who responded to the second survey. Based on our findings, KAMOS can be considered a representative sample.
본 논문은 선거연구의 핵심적 쟁점을 설명하고 이와 관련하여 일반여론조사의 대안으로 부상한 패널 여론조사의 장 단점을 논의한다. 패널 여론조사는 개별투표결정요인의 역동성은 물론 요인간 인과관계에 대한 분석에서 일반여론조사의 한계를 극복하는 대안으로 간주된다. 이의 구체적인 사례로 5 31 지방선거 패널조사의 기획과정과 결과를 보고한다. 동아시아연구원은 중앙일보, SBS, 한국리서치와 컨소시엄을 구성하여 5 31 지방선거에서의 민심의 변화를 중심으로 우리나라 선거와 관련한 최초의 체계적인 패널조사를 시도하였다. 지역 패널의 경우 서울, 부산, 광주, 충남의 4개 지역 광역단체장 선거를 중심으로 투표결정요인 간의 인과관계, 선거운동의 영향력, 부동층 등 선거연구의 핵심 쟁점에 대한 분석을 가능케 하는 자료를 구축하였다.
본 연구의 목적은 훈련 교·강사를 모집단으로 데이터 기반 의사결정을 위한 토대를 마련하고자 직업훈련기관 수준에서의 패널조사 표집설계 방안을 제시하여 지속적이고 체계적인 훈련 교·강사 실태조사의 기초를 제공하는데 있다. 이에 본 연구에서는 체계적인 조사 설계를 위한 요소인 목표 모집단과 표본추출틀을 제안하였으며, 전문가 자문과 실증 자료 분석을 토대로 데이터의 대표성, 자료 수집의 효율성 및 지속가능성 등을 종합적으로 고려하여 표본추출단위, 외층변인과 내층변인을 고려한 표본추출방법 등을 제시하였다. 연구 결과 패널의 단위를 직업훈련기관으로 하여 패널로 선정된 기관과 그 기관에 소속된 훈련 교·강사가 설문조사에 참여할 수 있도록 2단계 층화 비례 표집 방안을 마련하였으며, 이를 바탕으로 패널조사 표본 설계 방안에 대한 시사점을 제시하였다.
본 연구는 농가경제조사를 패널자료화한 결과와 패널화된 자료를 이용하여 실제로 자료를 분석하는 예를 제시하였다. 본고의 분석결과 예시는 농가경제조사와 같은 반복횡단면자료의 경우 사후적으로 패널화함으로써 다양한 동태분석이 가능함을 보여주고 있다. 또한 횡단면가중치의 존재를 감안하였을 때 종단면가중치 문제도 비교적 수월하게 해결할 수 있는 가능성이 있음을 알 수 있다. 본고의 경험을 바탕으로 할 때 최근 통계청에서 새롭게 패널조사를 실시하려는 계획을 수립, 집행하고 있는 바, 이와 더불어 통계청에서 기존에 실시하고 있는 유사한 구조의 반복횡단면조사의 경우에도 패널화 작업을 수행할 필요가 있다고 판단된다. 물론 이러한 패널화 작업의 이점은 실제로 패널조사로 진행되고 있는 사업체조사에서 더욱 명확하게 나타날 것으로 예상되며, 향후에는 사업체 횡단면자료의 패널화작업을 시도할 필요가 있다고 할 것이다.
In this paper we used the KLIPS(Korean Labor and Income Panel tudy) data that surveyed from 2006(wave 9) to 2009(wave 12). Other previous studies are concerned with the panel attrition in the early wave, but this study classifies the response pattern and investigates some factors that influence panel attrition when the panel tends to stabilize. It was revealed that panel attrition was influenced by relocation and housing type through the logit model. Besides it was appeared that panel attrition was affected by the monthly living expenses and the overall household income through the decision tree.
Conducting face-to-face surveys is difficult and cost prohibitive, necessitating a new attempt to build a probability-based panel in South Korea. Since 99.9% of adult Koreans own a mobile phone, mobile phone numbers provide a viable sampling frame. Random digit dialing (RDD) surveys were conducted August-December 2021. Of the 288,056 valid phone numbers dialed, 13,655 respondents between the ages of 19 and 69 completed a phone survey. These respondents were later invited by text message to join a panel; 3,202 of these (23.4% or 1.2% based on the number initially contacted) joined the panel. When compared to official government statistics like resident registration data, the census, or the Social Survey, this new probability-based panel can be said to be representative of the Korean population on the basis of age, gender, location, marital status, and household size after weighting is applied. However, even after weighting, panel members are more educated than the general population, white-collar workers and self-employed people are overrepresented, and blue-collar workers are underrepresented. As of February 2023, this panel has grown to 10,471 participants with plans to continue to invite more panel members in the same way. Based on the comparisons in this paper, we can regard this panel as a cost-effective, probability-based panel that may be used for various kinds of public opinion research, by researchers both within and outside of Korea. As we continue to refine and grow this panel, we hope it will become more widely used by researchers as well as provide a model for those building similar panels in other countries.
이 글은 패널자료의 유용성을 설명하고 패널자료를 사용해서 분석할 수 있는 주제를 사례로 설명하고 있다. 패널자료는 동일한 응답자를 여러 차례에 걸쳐 설문함으로써 응답자 특성을 통제한 조건에서 연구변수가 응답자 태도변화에 미치는 영향력을 측정할 수 있다는 장점을 가지고 있다. 그러나 수차례 설문을 시도하는 과정에서 응답자들이 오염될 가능성이 높다는 점과 응답자들이 탈락한다는 점에서 모집단의 특성이 제대로 반영될 수 없다는 점이 문제점으로 지적될 수 있다. 그럼에도 불구하고 집합자료 정보가 제공할 수 없는 패널자료만의 정보가치가 있다는 점에서 연구주제에 따라서는 반드시 패널자료가 필요한 경우가 있다. 본 논문에서는 선거관심이 응답자의 투표결정과 어떠한 관련이 있는지를 살펴보고, TV시청 등 선거자극이 응답자에 따라 차별적으로 영향을 미친다는 것을 확인할 수 있었다. 일관투표자에게는 TV시청 등 선거자극이 선거관심을 증가시키는 역할을 하지만, 중도기권자에게 선거자극은 선거관심을 높이는데 통계적으로 유의한 영향을 미치지 못하는 것으로 나타났다.
This paper suggests a new method of compensating for wave nonresponse in panel survey, which combines weighting adjustment and imputation. By deleting less frequent nonresponse patterns, we can get simplicity. A new mean estimator under the new combining method is provided and a limited simulation study employing a real data is conducted.
본 웹사이트에 게시된 이메일 주소가 전자우편 수집 프로그램이나
그 밖의 기술적 장치를 이용하여 무단으로 수집되는 것을 거부하며,
이를 위반시 정보통신망법에 의해 형사 처벌됨을 유념하시기 바랍니다.
[게시일 2004년 10월 1일]
이용약관
제 1 장 총칙
제 1 조 (목적)
이 이용약관은 KoreaScience 홈페이지(이하 “당 사이트”)에서 제공하는 인터넷 서비스(이하 '서비스')의 가입조건 및 이용에 관한 제반 사항과 기타 필요한 사항을 구체적으로 규정함을 목적으로 합니다.
제 2 조 (용어의 정의)
① "이용자"라 함은 당 사이트에 접속하여 이 약관에 따라 당 사이트가 제공하는 서비스를 받는 회원 및 비회원을
말합니다.
② "회원"이라 함은 서비스를 이용하기 위하여 당 사이트에 개인정보를 제공하여 아이디(ID)와 비밀번호를 부여
받은 자를 말합니다.
③ "회원 아이디(ID)"라 함은 회원의 식별 및 서비스 이용을 위하여 자신이 선정한 문자 및 숫자의 조합을
말합니다.
④ "비밀번호(패스워드)"라 함은 회원이 자신의 비밀보호를 위하여 선정한 문자 및 숫자의 조합을 말합니다.
제 3 조 (이용약관의 효력 및 변경)
① 이 약관은 당 사이트에 게시하거나 기타의 방법으로 회원에게 공지함으로써 효력이 발생합니다.
② 당 사이트는 이 약관을 개정할 경우에 적용일자 및 개정사유를 명시하여 현행 약관과 함께 당 사이트의
초기화면에 그 적용일자 7일 이전부터 적용일자 전일까지 공지합니다. 다만, 회원에게 불리하게 약관내용을
변경하는 경우에는 최소한 30일 이상의 사전 유예기간을 두고 공지합니다. 이 경우 당 사이트는 개정 전
내용과 개정 후 내용을 명확하게 비교하여 이용자가 알기 쉽도록 표시합니다.
제 4 조(약관 외 준칙)
① 이 약관은 당 사이트가 제공하는 서비스에 관한 이용안내와 함께 적용됩니다.
② 이 약관에 명시되지 아니한 사항은 관계법령의 규정이 적용됩니다.
제 2 장 이용계약의 체결
제 5 조 (이용계약의 성립 등)
① 이용계약은 이용고객이 당 사이트가 정한 약관에 「동의합니다」를 선택하고, 당 사이트가 정한
온라인신청양식을 작성하여 서비스 이용을 신청한 후, 당 사이트가 이를 승낙함으로써 성립합니다.
② 제1항의 승낙은 당 사이트가 제공하는 과학기술정보검색, 맞춤정보, 서지정보 등 다른 서비스의 이용승낙을
포함합니다.
제 6 조 (회원가입)
서비스를 이용하고자 하는 고객은 당 사이트에서 정한 회원가입양식에 개인정보를 기재하여 가입을 하여야 합니다.
제 7 조 (개인정보의 보호 및 사용)
당 사이트는 관계법령이 정하는 바에 따라 회원 등록정보를 포함한 회원의 개인정보를 보호하기 위해 노력합니다. 회원 개인정보의 보호 및 사용에 대해서는 관련법령 및 당 사이트의 개인정보 보호정책이 적용됩니다.
제 8 조 (이용 신청의 승낙과 제한)
① 당 사이트는 제6조의 규정에 의한 이용신청고객에 대하여 서비스 이용을 승낙합니다.
② 당 사이트는 아래사항에 해당하는 경우에 대해서 승낙하지 아니 합니다.
- 이용계약 신청서의 내용을 허위로 기재한 경우
- 기타 규정한 제반사항을 위반하며 신청하는 경우
제 9 조 (회원 ID 부여 및 변경 등)
① 당 사이트는 이용고객에 대하여 약관에 정하는 바에 따라 자신이 선정한 회원 ID를 부여합니다.
② 회원 ID는 원칙적으로 변경이 불가하며 부득이한 사유로 인하여 변경 하고자 하는 경우에는 해당 ID를
해지하고 재가입해야 합니다.
③ 기타 회원 개인정보 관리 및 변경 등에 관한 사항은 서비스별 안내에 정하는 바에 의합니다.
제 3 장 계약 당사자의 의무
제 10 조 (KISTI의 의무)
① 당 사이트는 이용고객이 희망한 서비스 제공 개시일에 특별한 사정이 없는 한 서비스를 이용할 수 있도록
하여야 합니다.
② 당 사이트는 개인정보 보호를 위해 보안시스템을 구축하며 개인정보 보호정책을 공시하고 준수합니다.
③ 당 사이트는 회원으로부터 제기되는 의견이나 불만이 정당하다고 객관적으로 인정될 경우에는 적절한 절차를
거쳐 즉시 처리하여야 합니다. 다만, 즉시 처리가 곤란한 경우는 회원에게 그 사유와 처리일정을 통보하여야
합니다.
제 11 조 (회원의 의무)
① 이용자는 회원가입 신청 또는 회원정보 변경 시 실명으로 모든 사항을 사실에 근거하여 작성하여야 하며,
허위 또는 타인의 정보를 등록할 경우 일체의 권리를 주장할 수 없습니다.
② 당 사이트가 관계법령 및 개인정보 보호정책에 의거하여 그 책임을 지는 경우를 제외하고 회원에게 부여된
ID의 비밀번호 관리소홀, 부정사용에 의하여 발생하는 모든 결과에 대한 책임은 회원에게 있습니다.
③ 회원은 당 사이트 및 제 3자의 지적 재산권을 침해해서는 안 됩니다.
제 4 장 서비스의 이용
제 12 조 (서비스 이용 시간)
① 서비스 이용은 당 사이트의 업무상 또는 기술상 특별한 지장이 없는 한 연중무휴, 1일 24시간 운영을
원칙으로 합니다. 단, 당 사이트는 시스템 정기점검, 증설 및 교체를 위해 당 사이트가 정한 날이나 시간에
서비스를 일시 중단할 수 있으며, 예정되어 있는 작업으로 인한 서비스 일시중단은 당 사이트 홈페이지를
통해 사전에 공지합니다.
② 당 사이트는 서비스를 특정범위로 분할하여 각 범위별로 이용가능시간을 별도로 지정할 수 있습니다. 다만
이 경우 그 내용을 공지합니다.
제 13 조 (홈페이지 저작권)
① NDSL에서 제공하는 모든 저작물의 저작권은 원저작자에게 있으며, KISTI는 복제/배포/전송권을 확보하고
있습니다.
② NDSL에서 제공하는 콘텐츠를 상업적 및 기타 영리목적으로 복제/배포/전송할 경우 사전에 KISTI의 허락을
받아야 합니다.
③ NDSL에서 제공하는 콘텐츠를 보도, 비평, 교육, 연구 등을 위하여 정당한 범위 안에서 공정한 관행에
합치되게 인용할 수 있습니다.
④ NDSL에서 제공하는 콘텐츠를 무단 복제, 전송, 배포 기타 저작권법에 위반되는 방법으로 이용할 경우
저작권법 제136조에 따라 5년 이하의 징역 또는 5천만 원 이하의 벌금에 처해질 수 있습니다.
제 14 조 (유료서비스)
① 당 사이트 및 협력기관이 정한 유료서비스(원문복사 등)는 별도로 정해진 바에 따르며, 변경사항은 시행 전에
당 사이트 홈페이지를 통하여 회원에게 공지합니다.
② 유료서비스를 이용하려는 회원은 정해진 요금체계에 따라 요금을 납부해야 합니다.
제 5 장 계약 해지 및 이용 제한
제 15 조 (계약 해지)
회원이 이용계약을 해지하고자 하는 때에는 [가입해지] 메뉴를 이용해 직접 해지해야 합니다.
제 16 조 (서비스 이용제한)
① 당 사이트는 회원이 서비스 이용내용에 있어서 본 약관 제 11조 내용을 위반하거나, 다음 각 호에 해당하는
경우 서비스 이용을 제한할 수 있습니다.
- 2년 이상 서비스를 이용한 적이 없는 경우
- 기타 정상적인 서비스 운영에 방해가 될 경우
② 상기 이용제한 규정에 따라 서비스를 이용하는 회원에게 서비스 이용에 대하여 별도 공지 없이 서비스 이용의
일시정지, 이용계약 해지 할 수 있습니다.
제 17 조 (전자우편주소 수집 금지)
회원은 전자우편주소 추출기 등을 이용하여 전자우편주소를 수집 또는 제3자에게 제공할 수 없습니다.
제 6 장 손해배상 및 기타사항
제 18 조 (손해배상)
당 사이트는 무료로 제공되는 서비스와 관련하여 회원에게 어떠한 손해가 발생하더라도 당 사이트가 고의 또는 과실로 인한 손해발생을 제외하고는 이에 대하여 책임을 부담하지 아니합니다.
제 19 조 (관할 법원)
서비스 이용으로 발생한 분쟁에 대해 소송이 제기되는 경우 민사 소송법상의 관할 법원에 제기합니다.
[부 칙]
1. (시행일) 이 약관은 2016년 9월 5일부터 적용되며, 종전 약관은 본 약관으로 대체되며, 개정된 약관의 적용일 이전 가입자도 개정된 약관의 적용을 받습니다.