• 지능정보연구
• /
• 제21권2호
• /
• pp.1-18
• /
• 2015

협업 필터링은 학계나 산업계에서 우수한 성능으로 인해 많이 사용되는 추천기법이지만, 정량적 정보인 사용자들의 평가점수에만 국한하여 추천결과를 생성하므로 간혹 정확도가 떨어지는 문제가 발생한다. 이에 새로운 정보를 추가로 고려하여, 협업 필터링의 성능을 개선하려는 연구들이 지금까지 다양하게 시도되어 왔다. 본 연구는 최근 Web 2.0 시대의 도래로 인해 사용자들이 구입한 상품에 대한 솔직한 의견을 인터넷 상에 자유롭게 표현한다는 점에 착안하여, 사용자가 직접 작성한 리뷰를 참고하여 협업 필터링의 성능을 개선하는 새로운 추천 알고리즘을 제안하고, 이를 스마트폰 앱 추천 시스템에 적용하였다. 정성 정보인 사용자 리뷰를 정량화하기 위해 본 연구에서는 텍스트 마이닝을 활용하였다. 구체적으로 본 연구의 추천시스템은 사용자간 유사도를 산출할 때, 사용자 리뷰의 유사도를 추가로 반영하여 보다 정밀하게 사용자간 유사도를 산출할 수 있도록 하였다. 이 때, 사용자 리뷰의 유사도를 산출하는 접근법으로 중복 사용된 색인어의 빈도로 산출하는 방안과 TF-IDF(Term Frequency - Inverse Document Frequency) 가중치 합으로 산출하는 2가지 방안을 제시한 뒤 그 성능을 비교해 보았다. 실험결과, 제안 알고리즘을 통한 추천, 즉 사용자 리뷰의 유사도를 추가로 반영하는 알고리즘이 평점만을 고려하는 전통적인 협업 필터링과 비교해 더 우수한 예측정확도를 나타냄을 확인할 수 있었다. 아울러, 중복 사용 단어의 TF-IDF 가중치의 합을 고려했을 때, 단순히 중복 사용 단어의 빈도만을 고려했을 때 보다 조금 더 나은 예측정확도를 얻을 수 있음도 함께 확인할 수 있었다.

• 한국전자거래학회지
• /
• 제25권4호
• /
• pp.33-60
• /
• 2020

스마트폰의 등장으로 우리는 언제 어디서나 쇼핑이 가능하고, 소셜미디어로 연결된 광범위한 인적 네트워크와 웹사이트를 통해 손쉽게 다양한 정보와 전문가들의 의견을 살펴볼 수 있게 되었다. 제한된 정보 창구로 인해 브랜드 인지도에 의존하였던 과거와는 다르게, 다양한 창구를 통해 제품과 서비스에 대한 정보를 손쉽게 얻을 수 있는 시대가 도래한 것이다. 그 결과, 디지털 시대의 소비자들은 과거와는 다르게 기업의 일방적인 의도대로 브랜드 이미지를 수용하는 것에서 벗어나, 소비자들 간의 소통을 통해 브랜드 이미지의 형성에 영향을 미칠 정도로 그 영향력이 증대되었다. 소비자들은 더 이상은 그 브랜드를 안다고 해서 혹은 그 브랜드가 유명하다고 해서 바로 구매를 하지 않는다. 따라서, 이렇게 변화한 시대에 전통적인 브랜드 측정 방법의 유효성에 대해 의문을 제시하게 되었다. 그러나 아직까지 변화한 사회환경을 반영한 측정 방법은 논의된 바가 없으며, 실무자들은 현재까지 전통적인 측정 방법을 이용해 오고 있는 것이 현실이다. 따라서 본 연구에서는 기존 브랜드의 정의와 측정방법에 대해 한번 살펴보고, 디지털 시대에 보다 적합하면서 직접적인 측정 방법을 제안하고자 한다. 본 연구에서 제안하는 측정 방법은 "친구를 보면 그 사람을 알 수 있다"는 속담처럼, 함께 구매되는 상품의 브랜드를 통해 해당 브랜드의 진정한 위치와 이미지를 파악하는 방법이다. 이를 위해 온라인 커머스 사이트인 아마존에서 함께 구매되는 화장품 데이터를 브랜드 단위의 네트워크로 구축하고, 이를 토대로 브랜드 이미지를 평가하는 방법을 제시하였다. 기존에는 소비자의 인식 혹은 인지적인 측면을 설문조사로 파악하거나 기업의 재무상태를 통해 브랜드를 측정했던 과거와는 달리, 본 연구에서 제시하는 방법은 실질적인 구매 데이터를 통해 구축된 제품의 네트워크를 분석함으로써 관련 브랜드 지표와 실질적인 구매 행동 간의 간극을 좁히고자 한 데에 의의가 있다. 또한 연결된 세상의 네트워크 관점을 바탕으로 전통적인 브랜드 개념을 보다 확장하였으며, 이를 통해 보다 현실에 적합한 측정도구를 제시하였다는 것에 의의가 있다.

• 지능정보연구
• /
• 제22권4호
• /
• pp.157-176
• /
• 2016

스마트폰, 태블릿PC와 같은 모바일 기기의 확산과 더불어 앱의 보급도 크게 늘어나면서 우리 일상의 다양한 분야에서 활용되고 있다. 게임, 생활, 엔터테인먼트, 정보, 전자상거래 등 다양한 종류의 수많은 앱이 생겨나고 있으나, 그들 중 대부분이 사용자의 구매 선택조차 받지 못하고 있으며, 구매가 이루어진 이후에도 많은 수는 오랫동안 사용되지 않고 외면당하고 있다. 사용자가 앱을 선택하고 사용하는 데에 영향을 미치는 요인을 찾는 연구는 사용자에게 적합한 앱을 선별적으로 추천하는 데에 활용됨으로써 마케팅 효과를 높일 수 있다는 점에서 앱 개발자나 배포자 및 사용자 모두에게 기여하는 실무적 가치가 크다고 할 수 있을 것이다. 이런 관점에서, 본 연구는 앱의 사용에 영향을 미치는 요인이 앱 유형별로 어떻게 달라지는지를 파악하려는 목적에서 수행되었다. 앱 사용에 영향을 미치는 요인으로서 사용자의 인구통계학적 특성뿐만 아니라 사용자가 앱을 구매하고 사용한 경험, 구매 시 참고한 앱에 대한 객관적 평가인 별점, 마케팅의 수단으로서 상품의 소개 화면에 노출되는 배지(Badge)의 영향을 살펴보았다. 사용자의 앱 선택에 영향을 미치는 요인에 대한 기존 연구들은 대부분 설문에 대한 응답 결과를 분석에 사용함으로써 사용기록이 정확히 반영하지 못하는 한계점을 갖는 반면, 본 연구는 특정한 기간 동안 사용자의 실제 사용기록 전체를 측정하고 수집하여, 이 데이터를 기반으로 분석을 실시했다는 점에서 큰 의의를 갖는다고 할 수 있다. 사용자가 자신의 모바일 기기에 설치된 다양한 앱을 설치해놓고 이들 중 자신의 필요에 적합한 것을 선택하여 사용하게 되는데, 이 선택에 영향을 미치는 요인이 카테고리 별로 다를 것이라는 점을 고려하여, 다변량 프로빗 모형을 활용하여 분석을 실시하였다. 분석결과로 앱 사용에 영향을 미치는 요인이 앱 카테고리 별로 달라지는 것과 앱 카테고리 선택 간의 상관관계를 제시하였으며, 사용자의 앱사용 목적에 따라 쾌락성(Hedonic)과 실용성(Utilitarian)으로 구분지어 설명하였다.

• 지능정보연구
• /
• 제19권2호
• /
• pp.39-54
• /
• 2013

전자상거래의 폭발적 증가는 소비자에게 더 유리한 많은 구매 선택의 기회를 제공한다. 이러한 상황에서 자신의 구매의사결정에 대한 확신이 부족한 소비자들은 의사결정 절차를 간소화하고 효과적인 의사결정을 위해 추천을 받아들인다. 온라인 상점의 상품추천시스템은 일대일 마케팅의 대표적 실현수단으로써의 가치를 인정받고 있다. 그러나 사용자의 기호를 제대로 반영하지 못하는 추천시스템은 사용자의 실망과 시간낭비를 발생시킨다. 본 연구에서는 정확한 사용자의 기호 반영을 통한 추천기법의 정교화를 위해 데이터마이닝과 다중모형조합기법을 이용한 상품추천시스템 모형을 제안하고자 한다. 본 연구에서 제안하는 모형은 크게 두 개의 단계로 이루어져 있으며, 첫 번째 단계에서는 상품군 별 우량고객 선정 규칙을 도출하기 위해서 로지스틱 회귀분석 모형, 의사결정나무 모형, 인공신경망 모형을 구축한 후 다중모형조합기법인 Bagging과 Bumping의 개념을 이용하여 세 가지 모형의 결과를 조합한다. 두 번째 단계에서는 상품군 별 연관관계에 관한 규칙을 추출하기 위하여 장바구니분석을 활용한다. 상기의 두 단계를 통하여 상품군 별로 구매가능성이 높은 우량고객을 선정하여 그 고객에게 관심을 가질만한 같은 상품군 또는 다른 상품군 내의 다른 상품을 추천하게 된다. 제안하는 상품추천시스템은 실제 운영 중인 온라인 상점인 'I아트샵'의 데이터를 이용하여 프로토타입을 구축하였고 실제 소비자에 대한 적용가능성을 확인하였다. 제안하는 모형의 유용성을 검증하기 위하여 제안 상품추천시스템의 추천과 임의 추천을 통한 추천의 결과를 사용자에게 제시하고 제안된 추천에 대한 만족도를 조사한 후 대응표본 T검정을 수행하였으며, 그 결과 사용자의 만족도를 유의하게 향상시키는 것으로 나타났다.

• 지능정보연구
• /
• 제20권4호
• /
• pp.107-120
• /
• 2014

본 연구에서는 사회연결망분석기법 중 하나인 구조적 공백 분석 결과를 이용하여 추천과정에 사용자의 정성적이고 감성적인 정보를 반영할 수 있는 협업필터링 기반의 추천시스템을 제안한다. 협업필터링은 추천기술 중 가장 많이 활용되고 있지만 전통적으로 확장성과 희박성 등의 문제점뿐 만 아니라 사용자-상품 매트릭스의 선호도만을 이용하여 추천을 함으로써 사용자의 정성적이고 감성적인 정보를 추천과정에 반영하지 못한다는 한계점이 있다. 본 연구에서 제안하는 추천시스템은 사회연결망분석에서 중심성 분석과 함께 연결망 내의 주요개체를 탐지할 수 있는 구조적 공백 분석을 이용하여 연결망 내의 대표 사용자들을 추출한 후 이들을 중심으로 군집을 형성한 후 각 군집색인 협업필터링을 수행하는 과정을 통해 전통적인 협업필터링에서 반영하지 못했던 정성적, 감성적 정보를 반영한다. 한편, 군집색인 협업필터링을 수행함으로써 추천의 효율성을 높일 수 있는 장점도 있다. 본 연구에서는 실제 사용자들의 상품에 대한 선호도 평가점수와 사용자들의 사회연결망 정보를 수집하여 실험을 수행하고 전통적인 협업필터링과 다양한 형태의 협업필터링과의 추천성과 비교를 통하여 제안하는 시스템의 유용성을 확인한다. 비교모형으로는 전통적인 협업필터링, 임의 군집색인 기반 협업필터링, k평균 군집색인 기반 협업필터링을 이용한 추천시스템이며, 실험 결과, 제안한 모형이 다른 비교모형에 비해 추천성과의 정확도가 가장 우수하였다. 추천성과의 차이에 대한 통계적 유의성 검정 결과, 제안 모형은 전통적인 협업필터링 기반의 추천시스템과는 통계적으로 유의한 성과 차이가 없었으나, 다른 두 모형에 대해서는 통계적으로 유의한 성과의 차이가 있는 것으로 나타났다.

• 지능정보연구
• /
• 제21권2호
• /
• pp.49-67
• /
• 2015

최근 다양한 분야에서 빅데이터의 활용과 분석에 대한 중요성이 대두됨에 따라, 뉴스기사와 댓글과 같은 비정형 데이터의 자연어 처리 기술에 기반한 감성 분석에 대한 관심이 높아지고 있다. 하지만, 한국어는 영어와는 달리 자연어 처리가 어려운 교착어로써 정보화나 정보시스템에의 활용이 미흡한 실정이다. 이에 본 연구는 감성 분석에 활용이 가능한 감성어 사전을 집단지성으로 구축하였고, 누구나 연구와 실무에 사용하도록 API서비스 플랫폼을 개방하였다(www.openhangul.com). 집단지성의 활용을 위해 국내 최대 대학생 소셜네트워크 사이트에서 대학생들을 대상으로 단어마다 긍정, 중립, 부정에 대한 투표를 진행하였다. 그리고 집단지성의 효율성을 높이기 위해 감성을 '정의'가 아닌 '분류'하는 방식인 폭소노미의 '사람들에 의한 분류법'이라는 개념을 적용하였다. 총 517,178(+)의 국어사전 단어 중 불용어 형태를 제외한 후 감성 표현이 가능한 명사, 형용사, 동사, 부사를 우선 순위로 하여, 현재까지 총 35,000(+)번의 단어에 대한 투표를 진행하였다. 본 연구의 감성어 사전은 집단지성의 참여자가 누적됨에 따라 신뢰도가 높아지도록 설계하여, 시간을 축으로 사람들이 단어에 대해 인지하는 감성의 변화도 섬세하게 반영하는 장점이 있다. 따라서 본 연구는 앞으로도 감성어 사전 구축을 위한 투표를 계속 진행할 예정이며, 현재 제공하고 있는 감성어 사전, 기본형 추출, 카테고리 추출 외에도 다양한 자연어 처리에 응용이 가능한 API들도 제공할 계획이다. 기존의 연구들이 감성 분석이나 감성어 사전의 구축과 활용에 대한 방안을 제안하는 것에만 한정되어 있는 것과는 달리, 본 연구는 집단지성을 실제로 활용하여 연구와 실무에 활용이 가능한 자원을 구축하여 개방하여 공유한다는 차별성을 가지고 있다. 더 나아가, 집단지성과 폭소노미의 특성을 결합하여 한글 감성어 사전을 구축한 새로운 시도가 향후 한글 자연어 처리의 발전에 있어 다양한 분야들의 융합적인 연구와 실무적인 참여를 이끌어 개방적 협업의 새로운 방향과 시사점을 제시 할 수 있을 것이라 기대한다.

• 농촌지도와개발
• /
• 제21권4호
• /
• pp.967-1006
• /
• 2014

본 연구는 협동조합기본법에 의해 설립된 농업분야 협동조합의 운영현황과 유형별 특징을 파악하여 시사점을 제시할 목적으로 수행 되었다. 이를 위하여 195개의 협동조합을 설문조사하였다. 결과를 요약하면, 농업분야 협동조합은 설립목적에 따라서 사업자협동조합, 소비자협동조합, 사회적 협동조합으로 구분할 수 있다. 사업자협동조합은 조합원의 소득향상을 목적으로 하는 생산자협동조합과 직원협동조합으로 나누어지지만, 생산자 협동조합 비율이 매우 높다. 사업자 협동조합은 조합규모가 30명 내외 규모가 많고 1인당 출자금은 모든 협동조합 유형중에서 가장 높은 수준이다. 또한, 생산과 가공 그리고 유통업을 겸업하는 것이 일반적이며, 영업방식은 온라인을 활용하거나 안정적인 계약관계에 의존하는 경향이 있다. 소비자 협동조합은 소비자 협동조합과 이해관계자 협동조합으로 나누어지며 조합원의 복지를 설립목적으로 한다. 조합규모는 30명이상의 규모가 많지만 1인당 출자금 액수는 낮은편이다. 유통업을 주업종으로 영위하며 판매방식은 인적 네트워크와 고정점포를 활용하는 경우가 많다. 사회적 협동조합은 공익목적으로 설립되고 10명이하 소규모인 경우가 많으며 1인당 출자금 또한 가장 적다. 운영 및 사업내용은 소비자 협동조합과 유사하다. 본 연구의 시사점은 협동조합의 유형별 사업모델에 따라 적정규모화를 추진할 필요가 있으며 설립과정에서의 지원정책보다는 사업개발 및 경영안정화를 위한 정책이 필요하다는데 있다. 또한 농협과 연계한 지원정책도 마련되어야 할 필요성이 있다. 다만 이러한 정책을 추진하기 위해서는 심층적인 사례연구가 필요할 것으로 보인다.

• Asia pacific journal of information systems
• /
• 제19권1호
• /
• pp.147-165
• /
• 2009

Virtual community(VC) will increasingly be organized as commercial enterprises, with the objective of earning an attractive financial return by providing members with valuable resources and environment. For example, Cyworld.com in Korea uses several community services to enable customers of Cyworld to take control of their own value as potential purchasers of products and services. Although initial adoption is important for online network service success, it does not necessarily result in the desired managerial performance unless the initial usage is continuously related to the continuous usage and purchase. Particularly, the customer who receives relevant online services and is well equipped with online network services, will trust the online service provider and perceive less risk and experience more activities such as continuous usage and purchase. Thus, how to promote continued online service usage or, alternatively, how to prevent discontinuance is a critical issue for VC service providers to consider. By aggregating a wide range of information and online environments for customers and providing trust to its members, the service providers of virtual communities help to reduce the perceived risk of continuous usage and purchase. Drill down, online service managers realize that achieving strong and sustained customers who continuously use online service and purchase on it is crucial. Therefore, the research into this online service continuance will identify the relationship between the initial usage and the continuous usage and purchase. The research of continuous usage or post adoption has recently emerged as an important issue in the IS literature. Individuals' information systems(IS) continuous usage decisions are congruent with consumers' repeat purchase decisions. The TAM(Technology Acceptance Model) paradigm has been strongly confirmed across a wide range from product purchase on EC to online service usage contexts. The analysis of IS usage based on TAM has proven to be successful across almost online service contexts. However, most of previous studies have focused on only an area (i.e., VC or EC). Just little research has tried to analyze the relationship between VC and EC. The effect of some factors on user intention, captured through several theories such as TAM, has been demonstrated. Yet, few studies have explored the salient relationships of VC users' EC acceptance. To fill this gap between VC and EC research, this paper attempts to develop a research model that extends the TAM perspective in view of the additional contributions of trust in the service provider and trust in members on some factors that affect EC and VC adoption. In this extension, we applied the TAM-to-TAM(T2T) model, and analyzed the transfer effect of trust between these two TAMs. The research model was empirically tested on the context of a social network service. The model was to extend TAM with the trust concept for the virtual community environment from the perspective of tasks. By building an extended model of TAM and examining the relationships between trust and the existing variables of TAM, it is aimed to explain a user's continuous intention to use VC and purchase on EC. The unit of analysis in this paper is an individual user of a virtual community. The population of interest is the individual with the experiences in virtual community. The data for this paper was made available via a Web survey of VC users. In total, 281 cases were gathered for about one week, but there were some missing values in the sample and there were some inappropriate cases. Thus, only 248 cases were finally analyzed. We chose the structural equation analysis to test the hypotheses and it is better suited for explaining complex relationships than the other methods. In this test, AMOS was used to test the Structural Equation Model (SEM). Noticeable results have been found in the T2T model regarding the factors affecting the intention to use of virtual community and loyalty. Our result showed that trust transfer plays a key role in forming the two adoption beliefs. Overall, this study preliminarily confirms the salience of trust transfer in online service.

• 한국농림기상학회지
• /
• 제6권2호
• /
• pp.107-117
• /
• 2004

농업분야에서의 IT역할에 대한 요약과 함께, 일본의 경험을 살펴보는 한편 당면 현안의 파악, 그리고 정보기술 활용의 성공사례를 들어 문제해결 방안의 하나로 신기술을 소개하였다. IT 활용능력 여부는 성공적인 IT현장활용의 매우 중요한 요소로,. IT 관련 교육/훈련의 강화 외에, 사용이 용이한 인터페이스 여하는 IT활용력 제고의 커다란 도전이기도 하다. 기존의 자판형 PC 인터페이스는 대다수 농민들이 쉽게 받아들이기 어려운 면이 있는 것이 분명하다. 이러한 최종사용자들에게 사용이 보다 쉬운 컴퓨터시스템을 제공하기 위한 여러 가지 기술들이 현재 개발되어 있다. 예를 들어 휴대폰기반의 사용자 인터페이스는 이러한 문제에 대한 해결책의 하나로 매우 유망한 기술임에 틀림없다. 휴대폰 사용은 개도국에서도 점차 확대되고 있으며, 단 몇 개의 키만으로 쉽게 사용할 수 있는 장점이 있다. 농민들은 복잡한 의사결정지원을 필요로 하지 않기 때문에 휴대폰의 이러한 단순한 화면도 대개 충분한 기능을 구현할 수 있는 것이다. 제2, 3세대 휴대폰은 인터넷에 대한 무결성 접속을 제공하므로, 휴대폰인터페이스에 적합한 활용물을 개발한다면 기존 PC의 역할을 대신할 수도 있을 것이다. 실지로 현재 휴대폰은 자료수집 뿐만 아니라 포장에서의 현장 의사결정지원에 사용되고 있다. 예를 들어 로렌슨 등과 사사끼 등은 휴대폰기반 기상정보취득프로그램을 개발하여 농민이 항상 자신의 포장내 기상상태를 파악할 수 있게 되었다. 병충해예찰시스템과 같은 보다 실용적인 응용 프로그램도 이미 초기모형이 개발되어 있다. PC보다 사용이 용이한 인터페이스와 포장에서의 기동성 등이 농민들에 의해 환영받고 있는 점이다. 또 다른 중요한 문제는 농촌의 미진한 네트워크 하부구조에 기인한다. 불행히도 농촌지역에서는 상업통신업자간 치열한 경쟁을 기대할 수 없기 때문에 이 문제는 결국 정부의 책임일 수 밖에 없다. 거대한 산맥에서 금을 채굴하는 것과 유사한 정보탐색이라는 기술도 매우 중요한 요소이다. 근대농업이 시작된 이래 약 한세기에 걸친 농업 생산과 실험연구의 결과, 일본은 방대한 농업자료를 보유하고 있다 이러한 장기자료는 농업생산에서의 신지식을 생산제공하는 데 필수적인 결정적인 정보원일지 모른다. 정보탐색 기술은 이러한 방대한 자료의 분석을 통한 미지의 사실을 추론하는 유망한 기술로 이용될 것이다. 많은 이들이 IT기술에 의해 농업이 힘을 얻기를 기대하고 있다. 그러나 어떠한 실용적인 IT 대응책이 농업을 강화할 수 있느냐는 질문에 대한 답변에는 궁색할 수밖에 없다. 이는 이러한 질문에 대한 보편적인 해답이 없기 때문이다. 농업은 전형적으로 기후와 토양조건, 작부양식, 시장요구도 등에 좌우되는 지역 특이적 특성을 지닌다. 그러므로 이는 개별 여건에 알맞는 유연한 기술 적용 여부를 결정하는 IT활용시 의사 결정자을 하는 사람의 몫이 될 것이다.

• 해양환경안전학회지
• /
• 제16권2호
• /
• pp.141-151
• /
• 2010

우리나라에서는 적조가 발생하면 적조발생 해역에 황토를 살포하고 있다. 황토가 살포되는 해역은 대부분 가두리 양식장 주변이며 매년 권장 살포량이상으로 대량 살포되고 있다. 본 연구에서는 지금까지 적조가 발생하여 매년 황토가 살포되어온 해역과 황토가 살포되지 않은 해역을 대상으로 추계(2008년 10월)와 춘계(2009년 4월)에 플랑크톤 네트에 의한 채집과 ADCP에 의한 체적산란강도를 계측하여 플랑크톤 분포특성과 플랑크톤의 분포밀도를 조사하였다. 황토를 살포하지 않은 해역에서 채집된 생물의 종수 및 단위체적당 개체수는 높았으나, 황토를 살포한 해역에서는 낮았다. 각 정점에서 채집한 플랑크톤의 종별, 체장별 개체수와 분포밀도의 평균치를 이용한 체적산란강도 $SV_c$와 ADCP에 의해 계측된 체적산란강도 $SV_m$를 비교해 본 결과, 황토를 살포하지 않은 해역의 $SV_c$와 $SV_m$는 거의 일치하였으나, 황토를 살포한 해역의 $SV_m$는 $SV_c$보다 4.3 dB 높았다. 즉 황토를 살포한 해역에서는 부유물이 ADCP에 크게 영향을 미치고 있음을 확인하였다. ADCP에 의해 계측된 체적산란강도의 수평분포도에서 체적산란강도는 황토를 살포한 해역이 황토를 살포하지 않은 해역보다 높았으며, 봄철이 가을철보다 높았다. 또한 체적산란강도 추정에 ADCP를 이용하면 채집에 의한 분포밀도의 과대 또는 과소평가를 방지할 수 있음을 확인할 수 있었다.