• 벤처창업연구
• /
• 제8권2호
• /
• pp.129-139
• /
• 2013

본 연구는 2004년 중소기업청이 창업분야 전문인력 양성을 목적으로 전국 5개권역에 창업대학원을 설립한 후 창업대학원의 기술창업교육 운영의 내실화를 도모하고 자율경쟁을 유도하기 위해 연차별로 그 성과평가를 해오고 있는 상황에 대해 BSC(Balanced Score Card) 기법을 이용해 그 평가방법의 타당성을 평가하고 개선방안을 제시하는 것이 목적이다. 이를 통해 본 논문은 중소기업청의 창업대학원지원사업의 성과평과와 관리의 타당성을 평가하고 정책적 보완점을 도출하고자 하였다. 본 연구는 크게 두 가지의 연구를 수행하였다. 첫째, 창업교육이라는 공공서비스를 제공하는 비영리기관인 창업대학원의 성과평가에 BSC 기법을 도입하는 방안을 기존문헌연구를 통해 제시하였다. 둘째, 중소기업청이 제시하고 있는 창업대학원 평가체계를 BSC적 관점에서 평가하여 평가체계의 타당성을 분석하고 합리성 제고를 위한 개선방안을 도출하였다. 연구결과, 첫째, 창업대학원의 성과평가는 평가에 그치며 차기 성과관리에 큰 기여를 하지 못하는 시스템을 가지고 있다. 둘째, 창업대학원의 성과평가가 정부의 직접적인 정책적 목표 달성 이외에는 큰 성과제고 환경을 구축하지 못하고 있다. 셋째, 창업대학원의 성과평가는 투입재무와 하드웨어적인 요소만 강조할 뿐 창업대학원의 자립적 성장에 큰 기여를 하는 인적자원확보와 정부정책 및 제도 활용 자원의 투입은 부재하였다. 넷째, 창업대학원의 정책목표 자체가 창업자 일변 중심이었다. 다섯째, 창업대학원이 지속적으로 그리고 자립적으로 성장하기 위해서는 학습 및 성장 관점에 대한 전략과 평가지표 수립이 미흡하였다. 본 논문은 최근 정부가 막대한 정부예산을 대학에 투입하여 창업교육을 통한 기업가정신 함양에 정책적 노력을 기울이고 있는 상황에서 정부의 창업교육정책이 표방하는 목표와 이를 수용하는 대학의 수용체계가 적절히 균형을 이루어가고 있는지를 평가하는 새로운 평가토대를 마련해 주는 의의가 있다. 그러나, 본 논문에는 중소기업청의 창업대학원 성과평가에 BSC 모형의 평가지표에 대해 설문조사등의 실증적 연구는 포함되지 않아 연구의 한계를 가지고 있으며 추후연구과제로 남아있다.

• Asia pacific journal of information systems
• /
• 제24권2호
• /
• pp.233-253
• /
• 2014

Can the stock market really be predicted? Stock market prediction has attracted much attention from many fields including business, economics, statistics, and mathematics. Early research on stock market prediction was based on random walk theory (RWT) and the efficient market hypothesis (EMH). According to the EMH, stock market are largely driven by new information rather than present and past prices. Since it is unpredictable, stock market will follow a random walk. Even though these theories, Schumaker [2010] asserted that people keep trying to predict the stock market by using artificial intelligence, statistical estimates, and mathematical models. Mathematical approaches include Percolation Methods, Log-Periodic Oscillations and Wavelet Transforms to model future prices. Examples of artificial intelligence approaches that deals with optimization and machine learning are Genetic Algorithms, Support Vector Machines (SVM) and Neural Networks. Statistical approaches typically predicts the future by using past stock market data. Recently, financial engineers have started to predict the stock prices movement pattern by using the SNS data. SNS is the place where peoples opinions and ideas are freely flow and affect others' beliefs on certain things. Through word-of-mouth in SNS, people share product usage experiences, subjective feelings, and commonly accompanying sentiment or mood with others. An increasing number of empirical analyses of sentiment and mood are based on textual collections of public user generated data on the web. The Opinion mining is one domain of the data mining fields extracting public opinions exposed in SNS by utilizing data mining. There have been many studies on the issues of opinion mining from Web sources such as product reviews, forum posts and blogs. In relation to this literatures, we are trying to understand the effects of SNS exposures of firms on stock prices in Korea. Similarly to Bollen et al. [2011], we empirically analyze the impact of SNS exposures on stock return rates. We use Social Metrics by Daum Soft, an SNS big data analysis company in Korea. Social Metrics provides trends and public opinions in Twitter and blogs by using natural language process and analysis tools. It collects the sentences circulated in the Twitter in real time, and breaks down these sentences into the word units and then extracts keywords. In this study, we classify firms' exposures in SNS into two groups: positive and negative. To test the correlation and causation relationship between SNS exposures and stock price returns, we first collect 252 firms' stock prices and KRX100 index in the Korea Stock Exchange (KRX) from May 25, 2012 to September 1, 2012. We also gather the public attitudes (positive, negative) about these firms from Social Metrics over the same period of time. We conduct regression analysis between stock prices and the number of SNS exposures. Having checked the correlation between the two variables, we perform Granger causality test to see the causation direction between the two variables. The research result is that the number of total SNS exposures is positively related with stock market returns. The number of positive mentions of has also positive relationship with stock market returns. Contrarily, the number of negative mentions has negative relationship with stock market returns, but this relationship is statistically not significant. This means that the impact of positive mentions is statistically bigger than the impact of negative mentions. We also investigate whether the impacts are moderated by industry type and firm's size. We find that the SNS exposures impacts are bigger for IT firms than for non-IT firms, and bigger for small sized firms than for large sized firms. The results of Granger causality test shows change of stock price return is caused by SNS exposures, while the causation of the other way round is not significant. Therefore the correlation relationship between SNS exposures and stock prices has uni-direction causality. The more a firm is exposed in SNS, the more is the stock price likely to increase, while stock price changes may not cause more SNS mentions.

• 대한공업교육학회지
• /
• 제34권2호
• /
• pp.1-19
• /
• 2009

이 연구의 목적은 공업계 고교에서의 산학협력 실태를 조사하고, 산학협력 활성화 방안을 제안하는데 있다. 주요 연구 방법은 문헌 연구와 설문 조사이다. 설문 조사는 공업계 고교를 모집단으로 전수 조사를 실시하였고, 조사 대상은 각 학교의 교무부장, 실과장, 그리고 교육과정 관련 업무를 교무부장이 담당하지 않는 학교의 경우 교육과정 담당부장도 응답에 참여하도록 하였다. 주요 연구 결과는 다음과 같다. 첫째, 공업계 고교에서 산학협력의 목적에 대하여 교사들은 산업현장 맞춤형 직업교육의 기회 제공, 공업계 고교 졸업생의 안정적 직업세계의 진출 확보, 맞춤형 인력의 양성과 공급을 통한 산업체의 경쟁력 확보라고 인식하고 있었다. 둘째, 교사들은 공업계 고교와 산업체간의 산학협력이 잘 이루어지지 않고 있다고 인식하고 있었다. 셋째, 교사들은 공업계 고교에서 산학협력이 강조된 교육과정의 개발과 운영이 필요하다고 인식하고 있었다. 넷째, 공업계 고교에서 학교 교육과정 편성시 산업체의 요구 반영 정도에 대하여 공업계 고교에서는 학교 교육과정 편성시 산업체의 요구를 잘 반영하지 않고 있는 것으로 나타났다. 다섯째, 공업계 고교에서 산업체의 요구를 반영한 주된 교육과정 운영 방법으로는 산업체 현장실습 및 현장 체험 학습 운영, 산학협력에 의한 맞춤식 교육과정 개발 적용, 산업체 인사 참여에 의한 산학겸임교사 제도 운영인 것으로 나타났다. 여섯째, 산학협력 활성화를 위해 학교 교육 영역에서 노력해야 할 사항은 산학협력 대상 기업체 적극 발굴, 산학협력에 기반한 학교 수준 교육과정의 개발 운영 노력, 그리고 정부의 산학협력 기반의 직업교육 정책 사업 적극 참여로 나타났다. 일곱째, 산학협력과 관련하여 공업계 고교 교육과정 선진화를 위해서는 교육과정의 다양화를 위한 선택중심 교육과정 강화, 보통교과 중심의 국가 수준 교육과정 체제 탈피를 통한 전문교과와의 균형성 추구, 원활한 산학협력을 위해 국가수준상의 관련 지침 개정인 것으로 나타났다.

• 대한공업교육학회지
• /
• 제34권2호
• /
• pp.103-127
• /
• 2009

이 연구는 대학생들을 대상으로 진로개발과 취업준비에 대한 인식을 분석하여 진로개발 활동의 문제점과 해결방안의 기초자료를 제공하는데 그 목적이 있으며, 연구의 결과는 다음과 같다. 첫째, 대학 입학 시부터 학생 스스로가 진로계획을 수립하고 이를 준비할 수 있는 교육체계 수립이 요구되어 진다. 이는 대학 교육과정에 진로개발 과목이 교양필수로 포함하여야 하고 취업준비센터 등의 기관과 유기적인 연계성 방안이 필요하다. 둘째, 대학생이 직업세계로의 원활한 이행을 위해 활용되어 질 수 있는 대학생 커리어 포트폴리오(career portfolio)를 객관적인 평가자료로 인정하는 제도가 필요하다. 또한 이를 데이터베이스(Database)화를 통하여 대학생의 커리어가 졸업 후에도 지속적으로 관리 유지한다면 대학경쟁력 강화에 기초가 될 것이다. 셋째, 대학생 자신이 보유하고 있는 직업기초능력의 수준 진단을 통해 개인별, 학과별 진로개발의 방향을 설정하고 필요한 역량을 개발할 수 있는 개인별, 학과별 역량강화 프로그램 개발이 필요하다. 따라서 대학 졸업생의 취업 준비도를 제고할 수 있는 직업기초능력 평가와 그 결과에 따른 진로개발 지원책이 필요하다. 넷째, 고등교육단계의 대학생들이 학과에 대한 만족도, 전공 선택, 현재 대학에서의 진로관련 서비스 등에 대한 학생들의 낮은 인식도(M=2.86)는 대학에서의 학습과 일과의 연계성 있는 체계구축이 요구됨을 보여준다. 따라서 단기적으로 대학 내 운영되고 있는 각 종 취업 및 자기개발 역량 교육프로그램에 대한 양적 질적 평가가 우선적으로 선행되어야 하며, 장기적인 관점에서는 대학 내 진로서비스 기관의 진단을 위한 인적자원개발 전문가 확보 등의 대책 마련이 시급하다.

• 지능정보연구
• /
• 제20권4호
• /
• pp.155-169
• /
• 2014

다양한 빅데이터 기술이 발전함에 따라, 기업의 전략결정에 있어서 과거에는 의사결정자의 직관이나 경험에 의존하는 경향이 있었다면, 현재는 데이터를 활용한 과학적이고 분석적인 접근이 이루어지고 있다. 이에 많은 기업들이 경영정보시스템 중의 하나인 비즈니스 인텔리전스 (Business Intelligence) 시스템의 예측분석 기능을 활용하고 있다. 하지만, 이러한 시스템이 미래의 경영환경 변화를 예측하고 기업의 의사결정을 돕는 조언자 (Advisor)로서 역할을 한다고 가정할 때, 시스템에서 제공하는 분석결과가 의사결정자에게 도움을 주는 조언 (Advice) 의 역할을 하지 못하는 경우가 많은 실정이다. 따라서, 본 연구에서는 미래예측의 문제에 있어 의사결정자가 시스템의 조언을 따르는데 영향을 미치는 요소들과 영향력에 대해 분석하고, 그 결과를 바탕으로 데이터 기반의 의사결정을 보다 적극적으로 지원하는 시스템 환경을 제시하고자 한다. 좀 더 구체적으로는 예측 과정에 대한 자세한 설명이나 근거 제시가 시스템의 예측결과에 대한 의사결정자의 수용정도에 미치는 영향을 연구하였다. 이를 위하여 193명의 실험자를 대상으로 영화의 개봉 주 매출액을 예측하는 업무를 수행하고, 예측에 대한 설명의 길이와 조언자의 유형(사람과 시스템의 조언 비교)뿐 아니라 의사결정자의 개인 특성이 의사결정자의 조언 수용정도에 미치는 영향을 분석하였다. 시스템에서 제공하는 조언 내용인 예측결과와 설명에 대해 의사결정가가 느끼는 유용성, 신뢰성, 만족도가 조언의 수용에 미치는 영향도 분석하였다. 본 연구는 시스템의 분석결과를 조언으로 보고 조언자와 조언에 관한 의사결정학 분야의 선행연구를 접목시켜 경영정보시스템 연구 분야를 확장하였다는 점에서 연구의 의의가 있고, 실무적으로도 데이터 기반의 의사결정을 보다 적극적으로 지원할 수 있는 시스템 환경을 만들기 위해서 고려해야 할 점들을 제시함으로써 시스템 활용을 위한 정책결정에도 도움을 줄 수 있을 것으로 본다.

• 지능정보연구
• /
• 제18권4호
• /
• pp.1-17
• /
• 2012

온라인 상에서 판매되는 상품은 매우 다양하지만, 소비자에게 판매 가격을 제시하거나 소개글을 통해서 상품에 대한 구체적인 설명을 제공한다는 점은 모든 상품에 있어서 가장 기본이 되는 공통적인 특징이다. 만약, 상품의 실제 품질이나 가격과는 독립적으로 상품 소개글이 판매에 미치는 영향력을 파악할 수 있다면 어떠한 소개글이 상품의 판매를 촉진하는 측면에서 더 좋은 글인지 분별할 수 있게 된다. 이런 관점에서 본 연구는 상품 소개글과 판매 성과의 관계를 파악하기 위한 목적으로 수행되었으며, 구체적으로는 온라인 시장에서 한글로 작성된 상품 소개글에 쓰인 각각의 표현 별로 소비자가 구매를 결정하는 데에 어떤 영향을 미치는지를 분석하고자 하였다. 한글 형태소 분석기를 사용하여 국내 앱 시장에서 수집된 앱 소개글 및 판매이력 데이터로부터 상품을 설명하는 주요 속성과 그 속성에 대한 평가를 추출하였으며, 추출된 키워드를 입력 변수로 구성한 계량경제학 모형을 구축하였고, 구체적으로 특정 표현들이 판매 성과에 미치는 영향을 구축된 모형을 사용하여 계량적으로 측정하였다. 앱의 카테고리 별로 표현의 종류가 상이하게 나타남이 관찰됨에 따라, 분석은 각 카테고리 별로 수행되었다. 유료 앱과 무료 앱에 대해서 데이터 분석을 수행한 결과, 판매 성과에 영향을 미치는 '속성과 평가' 키워드를 그 영향력의 크기 별로 파악할 수 있었으며, 특히 무료 앱의 경우는 무료로 이용할 수 있음에도 불구하고 품질이 좋다는 것을 강조했을 때 판매량을 더 높일 수 있다는 것이 확인되었다. 본 연구는 모바일 앱에 대해 수행되었으나, 온라인에서 거래되는 다양한 상품에 대해서도 소개글이 판매 성과에 미치는 영향을 분석할 수 있는 모형으로 활용될 수 있다. 마지막 장에서는 기업의 마케팅 매니저가 본 연구에서 제시하는 연구 방법론과 분석 결과를 활용할 수 있는 방안을 제시하였다.

• 농촌의학ㆍ지역보건
• /
• 제34권1호
• /
• pp.87-100
• /
• 2009

보건소의 금연사업은 정부의 정책이 지역사회에서 대주민 사업을 통해 직접 수행된다는 측면에서 매우 중요하며 따라서 보건소 금연사업을 지속적으로 모니터링하고 발전하도록 할 필요가 있다. 본 연구는 보건소 금연사업 담당자들을 대상으로 한 설문조사를 통해 우리나라 보건소 금연사업의 현황 및 문제점 파악을 하여 이를 근거로 보건소 금연사업의 개선 및 발전방안을 제시하고자 하였다. 2006년 11월에 전국의 보건소 금연사업 담당자를 대상으로 교육 참석자 및 우편 혹은 이메일을 통해 자기기입식 설문조사를 실시하였다. 246개 보건소 중에서 213명이 응답하였고 그 중 응답내용이 부실한 1건을 제외한 212건을 대상으로 분석하였다. 조사 결과 금연사업 담당자들의 업무 경력에서 86.7%가 금연사업 종사 기간이 3년 미만이었고 90% 정도가 87.3%가 다른 업무를 겸하고 있었다. 금연사업의 내용으로서 포스터나 리플렛을 이용한 홍보와 중고등학생 대상 흡연예방 교육을 거의 모든 보건소에서 실시하였으며, 실제적인 사업의 우선순위는 지역사회 진단이 아닌 현실적인 이유에 의해 결정하는 경우가 많았다. 사업수행을 위한 자원에서 예산이 부족하다고 한 경우는 1.9%에 지나지 않았으며 44.7%가 인력이 부족하다고 하였다. 사업에 필요한 지식과 기술의 습득은 스스로 터득하거나 전임자의 도움에 의존하는 경우가 많았다. 금연사업을 위한 부서간 업무 조율이 잘 된다는 경우가 39.5%에 지나지 않았으며, 금연사업 지원을 위한 중앙정부의 기능에 대해서는 대체적으로 만족하는 경향이었다. 보건소 금연사업 발전을 위해 가장 필요한 것으로서 인력의 역량강화가 65.6%로서 가장 많았다. 본 연구 결과 보건소 금연사업의 발전을 위해서 향후 보건소 금연사업의 발전을 위해서는 과학적 근거를 바탕으로 하고 지역사회 여건에 적합한 금연사업의 기획 및 수행이 필요하며 이를 위해 보건소 인력의 역량과 전문성 강화를 위한 교육 훈련 과정의 지속적 개발이 필요하다. 또한 사업대상자의 참여 유도 방안 개발, 지역사회의 인적 자원 활용 강화, 부서간 업무 연계의 강화방안 마련 등이 필요한 것으로 나타났다.

• 농촌지도와개발
• /
• 제7권1호
• /
• pp.121-136
• /
• 2000

This study reports on a comparison between the Korean diffusion of agricultural innovation or extension service and the cooperative extension service in the United States of America. It focuses on relevant differences between the two systems and provides recommendation for improvement of the Korean system to insure success in important areas related to the diffusion of agricultural innovations. After a comparative study on diffusion of innovations it is clear that: in order to have a productive agriculture that makes effective and efficient use of natural resources and helps achieve sustainability goals, a mechanism that delivers knowledge to agricultural communities must be established and maintained. This mechanism is clearly an agricultural extension service that is cooperatively funded by federal, state and local governments and that insures participation of constituents in the process of establishing priorities and evaluating achievements. The success of US agriculture, the most productive in the world, is to a large degree to the Cooperative Extension Service. Based on the results of this study and the differences of the United States and Korea, the following recommendations should be emphasized for more effective communication for agricultural innovation and rural development in Korea: 1) In order to insure that extension educators are high caliber professional individuals, it is important to establish a system that nationally recognizes these individuals as such, and that provides a professional development path. 2) The results of the decision of transfer of extension educators to local governments has not yielded positive outcomes, especially in terms of professional status. It is clearly demonstrable that valuable professionals are leaving the service, that local governments do not have the will and resources to implement a successful extension program. 3) Because of the critical importance of diffusing innovations to agricultural producers in order to insure and quality and steady food supply, it is of critical importance that these issues be addressed before the extension service is further deteriorated. Given the cement situation, it is clear that the extension service should become nationally supported again in cooperation with local and state governments and that extension professionals be given appropriate rank at the national level, commesurate with their peers in research and teaching. 4) The common current committee practice of lengthy reporting and short discussion needs to be changed to one that results in char, brief and substantive action oriented goals. Joint participation by researchers, extension educators and farmers should be encouraged in planning, implementation and evaluation of communication for agricultural innovations. Roles and functions of committees for institutional cooperation, and or agricultural extension committees should be enlarged. 5) Extension educators should be encouraged to adopt new communication technologies to improve their diffusion of innovations methods. Agricultural institutions and organizations should be encouraged to adopt farmer-first and or client-oriented approach in agricultural extension and diffusion of agricultural technologies. The number, complexity and rapid change of information in agricultural extension require the development of a computer based information and report system to support agricultural extension. 6) To facilitate and expand the further development of communication for agricultural innovation and rural development, agricultural communication programs in universities especially in colleges of agriculture and life sciences. 7) To strengthening the sense of national and social responsibility communication for agricultural innovation and rural development among students in agricultural colleges and universities through participation in learning activities by proactive recruitment. 8) To establish and reinforce a policy that insures participation in communication for agricultural innovation and regal development activities. 9) To improve further development of communication for agricultural innovation and rural development in Korea, more research activities should be encouraged.

• 한국가정과교육학회지
• /
• 제22권4호
• /
• pp.91-107
• /
• 2010

본 연구의 목적은 중학교 가정과 교사들의 가정교과관련 교내 자율장학에 관한 인식 및 수행실태를 알아봄으로써 가정과 교사의 가정교과관련 전문성 신장 활동을 지원하는데 필요한 기초 자료를 제공하는데 있다. 본 연구는 전국의 가정과 교사를 대상으로 이메일을 통하여 설문조사를 하였다. 회수된 질문지 150부는 SPSS/Win(Ver 10.1) 프로그램을 이용하여 빈도, 백분율, 평균, 표준편차, ANOVA, T-test로 분석되었다. 중학교 가정과 교사를 대상으로 한 본 연구의 결과는 다음과 같다. 첫째, 가정교과관련 교내 자율장학 인식에 대해서 대부분(88.0%)의 가정과 교사는 이 장학이 자기반성과 전문성 향상에 도움이 되므로 매우 필요하다고 인식하고 있으며, 선호하는 장학은 동료장학으로 나타났다. 둘째, 가정교과 교내 자율장학의 목표 선정 및 구체적인 계획 수립에 대해서 반 정도(50.7%)의 가정과 교사들은 이 장학의 목표 선정 및 계획 수립 과정이 가정교과협의회를 거쳐서 민주적으로 결정된다고 인식하였다. 셋째, 교내장학의 유형별 실시 횟수의 경우, 수업장학과 약식장학은 1년에 1회 정도이었고, 자체연수는 실시되지 않는 편이였다. 동료장학과 자기장학은 수시로 이루어졌다. 장학의 유형별 도움의 정도는 자기장학과 동료장학이 가장 높은 것으로 나타났다. 장학에 도움을 얻는 분야는 장학유형에 상관없이 가정과교수방법이 가장 높게 나왔으며, 다음으로는 교과내용, 교육평가, 교육철학 순이었다. 넷째, 교장이나 교감과 동료교사의 장학에 대한 실제적 도움 정도에 대해서는 별로 도움을 받지 못하는 것으로 나타났다. 동료교사와의 다양한 정보공유는 열심히 하는 편이나 아직도 22.6%에 달하는 중학교 가정과 교사들이 정보공유를 기피하는 것으로 나타났다. 반 정도(43.3%)의 가정과 교사는 교수-학습개선을 위한 수업공개자로 '모든 교사'를 꼽았다. 다섯째, 대부분(70.7%)의 가정과 교사는 가정교과관련 교내 자율장학이 잘 실행되지 않는 이유로 과중한 업무 부담으로 인한 시간 부족, 교수-학습 개선활동에 대한 부정적, 소극적 태도, 교사의 의견이 반영되지 못하는 행정위주의 장학형태, 경제적, 환경적 여건부족을 꼽았다. 대부분의 가정과 교사들은 항상 열심히 교수-학습개선을 위해 노력하는 동료교사를 장학담당자로 가장 선호하며, 교내 자율장학의 수행 후 평가방법으로는 교사 스스로 평가하는 자기 평가를 가장 선호하였다. 여섯째, 교내 자율장학 활성화를 위해서 잡무경감 및 시간적 여유, 가정교육학에 대한 확실한 철학, 2007 개정 교육과정에 적용된 실천적 문제 중심 교육과정의 인지, 다양한 지원 프로그램 제공, 도서, 자료, 도구, 장소 등 물리적 지원, 교내 가정과 동료교사가 없는 경우 관내에서 가정과 교사들과 연계, 장학담당자(교장, 교감)의 장학에 대한 적극적 지원을 요구하였다.

• 인지과학
• /
• 제19권4호
• /
• pp.331-367
• /
• 2008

웹 기반 신경심리검사의 타당도를 저해할 수 있는 요인들에 대한 해결책의 일환으로 검사 툴의 인터페이스 디자인을 개선하고자 세 단계를 거쳐 연구를 진행하였다. 연구 1은 곽호완의 웹 기반 신경심리검사 중 주의력 검사 툴의 UI 디자인 문제점을 파악하기 위한 것으로, 전문가에 의한 발견적 시찰법을 실시하였다. 그 결과, 이 검사 툴의 지시 화면, 조사 양식, 과제 화면, 결과 화면 등의 디자인에서 세부적인 사용성 문제점들이 드러났다. 연구 2는 찾아낸 사용성 문제점을 해결하기 위해 웹 기반 주의력 검사에 특화된 11개 디자인 가이드라인을 도출하였다. 이를 토대로 사용자의 작업 흐름에 맞추어 화면 구성과 사이트 구조 등을 최적화하고 재미 요소를 가미하여 검사 툴을 새롭게 디자인 한 다음, JAVA를 이용하여 프로토타입을 개발하였다. 이렇게 구현한 개선 툴(그래픽 툴)이 기존 툴(텍스트 툴)에 비해 더 효과적임을 검증하기 위해, 연구 3에서 사용자들을 대상으로 수행 측정과 설문 조사를 실시하여, 실수 유형과 출현비율 및 UI 만족도를 측정하였다. 수행 측정 결과, 그래픽 툴이 텍스트 툴에 비해 UI 디자인 문제들로 인해 발생하는 사용자 실수 유형과 출현비율이 유의하게 감소하였다. 사후 설문 조사 분석 결과, 텍스트 툴에 비해 그래픽 툴은 전반적인 만족도, 화면, 용어와 시스템 정보, 학습 용이성, 시스템 성능 등의 만족도 측면에서 우수한 것으로 입증되었다.