• Journal of Internet Computing and Services
• /
• v.8 no.4
• /
• pp.119-128
• /
• 2007

In this paper, We study on the Data Quality Model of ISO/IEC 25012 among the Software product Quality Requirements and Evaluation(SQuaRE) in ISO/IEC 25000 Series. Because of the increasing data, user require the accuracy data, recent data, suitable data for used tools, complied security and not open to be public. We research the data quality management in the point of application of be affect influenced low quality in business. We propose the testing items and we propose the method of the evaluation proposed testing items. We study on the basis international Standards ISO/IEC 25012 and ISO/IEC 9126-2 and we proposed the testing method quantitatively on the basis of ISO/IEC 25000.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2005.11a
• /
• pp.337-340
• /
• 2005

소프트웨어 품질 평가에 대한 관심이 고조되면서 소프트웨어 품질 평가를 위한 방법은 국제적으로 활발히 연구되고 있다. 국내의 시험 평가 기관에서는 대체적으로 ISO/IEC 9126에 의한 품질 평가 방법을 적용하여 소프트웨어 품질을 평가하고 있으나 현재 국제적으로 소프트웨어 품질 평가를 좀더 정량적으로 정확히 하기 위하여 평가 메트릭을 새롭게 제정하기 위한 연구를 진행 중에 있다. 국내에서도 이와 같은 소프트웨어 품질 평가를 위한 모델 연구가 필요할 것으로 보여지며 이러한 기초자료로 현재 진행되어지고 있는 국내외 소프트웨어 품질 평가 표준화 동향 조사를 본 연구에서 진행하였다.

• Journal of the Korean Society for information Management
• /
• v.40 no.3
• /
• pp.77-98
• /
• 2023

Large Language Models (LLMs) are becoming the major trend in the natural language processing field. These models were built based on research data, but information such as types, limitations, and risks of using research data are unknown. This research would present how to analyze and evaluate the LLMs that were built with research data: LLaMA or LLaMA base models such as Alpaca of Stanford, Vicuna of the large model systems organization, and ChatGPT from OpenAI from the perspective of research data. This quality evaluation focuses on the validity, functionality, and reliability of Data Quality Management (DQM). Furthermore, we adopted the Holistic Evaluation of Language Models (HELM) to understand its evaluation criteria and then discussed its limitations. This study presents quality evaluation criteria for LLMs using research data and future development directions.

• Journal of Korea Society of Industrial Information Systems
• /
• v.17 no.7
• /
• pp.59-70
• /
• 2012

This paper provides a model which is used for SOA based system's quality evaluation. This model make evaluation with "Reliability, Usability, Efficiency, Usability and Maintainability", these five aspects which were reference from ISO/IEC 9126. A systems based on SOA was tested by this model in these five aspects. As the results of the evaluation this system satisfied 61.45% users including Service Requester and Service Registry.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2000.10a
• /
• pp.551-554
• /
• 2000

소프트웨어 품질의 중요성이 높아지면서 고품질의 제품을 만들기 위한 노력이 지속적으로 이루어지고 있다. 고품질 소프트웨어는 적은 노력과 비용으로 유지보수가 가능하므로 품질 향상의 중요성은 간과할 수 없는 중요한 문제이다. 현재, 소프트웨어 제품의 품질평가를 위한 프로세스로서 ISO/IEC 14598이 있으며 이 방법을 활용한 품질평가 체계와 메트릭스의 구축을 통해 품질향상을 도모하려는 연구가 활발히 진행되고 있다. 본 연구에서는 개발자가 소프트웨어 제품평가를 위해 적용할 수 있는 품질평가 프로세스를 제안하고 개발자의 제품평가 방법에 관해 기술하였다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2010.11a
• /
• pp.841-844
• /
• 2010

본 연구에서는 침입탐지시스템 제품의 현황을 분석하고 품질평가 기준 및 사용성 품질평가 방법을 개발하고자 한다. 이를 위해 침입탐지시스템(IDS) 제품 유형을 대상으로 특성과 핵심 기술 요소를 분석하고 침입탐지시스템 제품의 구조 및 응용 기술을 분석한다. 그리고 현황 조사 및 분석을 바탕으로 침입탐지시스템 제품의 품질평가 기준과 평가방법론을 개발하였다.

• Proceedings of the Korean Information Science Society Conference
• /
• 1999.10a
• /
• pp.572-574
• /
• 1999

공장자동화는 최근 급격히 발전하고 있는 분야로서 부가가치가 매우 높은 산업에 속한다. 공장자동화는 자동화를 구성하는 기계장치뿐만 아니라 기계의 전반적인 운영을 담당하는 소프트웨어 또한 큰 비중을 차지하고 있다. 결국, 공장자동화를 통해 생산되는 제품의 품질은 기계 장치의 정밀도, 견고성 등의 측면과 함께 운영 소프트웨어의 품질로부터 받는 영향도 무시할 수 없다. 본 연구 과제에서는 공장자동화 소프트웨어의 한 유형인 FMS (Flexible Manufacturing System)나 Cell Controller를 중심으로 품질평가를 수행할 수 있는 평가 메트릭과 방법을 개발하고 이를 적용하여 효율적인 평가를 수행할 수 있는 툴킷의 프로토타입을 설계하고 구현하였다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2001.10a
• /
• pp.532-534
• /
• 2001

영세한 국내 소프트웨어 개발 업체들의 인지도 향상과 소프트웨어 산업의 자발적인 품질 개선 노력 유도를 위해 소프트웨어 품질 인증 사업이 2001년 1월부로 가동되었다. 소프트웨어 품질 인증을 위해서는 소프트웨어 품질을 시험.평가하기 위한 여러 기술들이 필요하다. 본 논문에서는 다양한 소프트웨어 품질 시험.평가 기술들 중 시험.평가 방법 측면에서 현재까지 연구되어 적용되고 있는 현황을 중심으로 기술하고자 한다.

• Proceedings of the Korea Society of Information Technology Applications Conference
• /
• 2002.11a
• /
• pp.85-98
• /
• 2002

인터넷 이용의 폭발적인 증가와 함께 웹사이트에 대한 개인적ㆍ사회적 관심이 증대되고 있다. 이렇게 인터넷에 대한 대중의 관심과 참여가 늘어남에 따라 정보의 무분별한 발생을 막고 검색을 보다 효과적으로 하기 위한 사용자 인터페이스는 가치가 더욱 증대되었다. 최근에는 개별적인 연구자들뿐 아니라 웹사이트 평가기관과 순위기관들이 각각의 평가영역과 평가모형에 따라 웹사이트, 그리고 사용자 인터페이스를 평가하고 있다. 이러한 평가기준들은 웹사이트의 품질을 평가하는데 있어 주로 일원적인 인식방법을 사용하고 있다. 즉, 웹사이트 품질이나 사용자 만족을 측정하는 데 있어 품질의 고저나 만족ㆍ불만족을 일직선상에서 평가하고 있는 것이다. 다시 말하면 어떤 물리적 상황이 충족되면 사용자가 만족을 느끼지만 충족되지 않을 경우에는 불만을 가지게 된다는 가정에서 평가모형들이 개발되고 있는 것이다. 본 연구에서는 Kano의 모형에 따라 품질을 물리적 충족상황을 횡축에, 고객의 만족감을 종축에 두고 품질개념을 이원적으로 해석하여 매력적, 당연적, 일원적 품질요소로 분류하고자 하였다. 웹사이트 평가와 웹사이트 인터페이스 평가를 위한 선행연구들을 종합하여 화면구성, 항해성, 검색성, 상호작용성, 사용자지원성의 5가지 영역에서 25개의 평가항목을 추출하였으며, 이를 Kano의 설문지조사법을 이용하여 설문을 수행하였다. 게임사이트, 커뮤니티 사이트, 쇼핑몰 사이트, 일간신문 사이트를 대상으로 290부의 설문을 수거하여 분석한 결과 각각의 사이트의 인터페이스 품질요소에서 매력적 품질요소, 일원적 품질요소, 당연적 품질요소를 분류했다. 종합적으로 볼 때, 인트로나 메인페이지의 포인트, 다양한 정렬방식, 개인화된 페이지, 개인장치로의 다운로드가 매력적 품질요소로 분류되었으며, 시각적 구성, 링크의 정확성, 링크분류의 체계성, 용어의 명료성, 컨텐츠 이용의 용이성, 적절한 강조의 사용, 고객피드백시스템은 일원적 품질요소로 분류되었다. 또한 당연적 품질요소는 사이트 설계의 일관성, 에러처리, 의견제시 공간, 이용설명서 또는 도움말, FAQ로 나타났다. 이러한 연구의 결과를 통해 웹사이트를 운영하는 기업에 새로운 웹사이트의 설계 및 운영에 있어 우선순위를 부여하는 데 도움이 될 것으로 기대된다.

• Proceedings of the Korea Society for Industrial Systems Conference
• /
• 2002.11a
• /
• pp.85-98
• /
• 2002

인터넷 이용의 폭발적인 증가와 함께 웹사이트에 대한 개인적ㆍ사회적 관심이 증대되고 있다. 이렇게 인터넷에 대한 대중의 관심과 참여가 늘어남에 따라 정보의 무분별한 발생을 막고 검색을 보다 효과적으로 하기 위한 사용자 인터페이스는 가치가 더욱 증대되었다. 최근에는 개별적인 연구자들뿐 아니라 웹사이트 평가기관과 순위기관들이 각각의 평가영역과 평가모형에 따라 웹사이트, 그리고 사용자 인터페이스를 평가하고 있다. 이러한 평가기준들은 웹사이트의 품질을 평가하는데 있어 주로 일원적인 인식방법을 사용하고 있다. 즉, 웹사이트 품질이나 사용자 만족을 측정하는 데 있어 품질의 고저나 만족ㆍ불만족을 일직선상에서 평가하고 있는 것이다. 다시 말하면 어떤 물리적 상황이 충족되면 사용자가 만족을 느끼지만 충족되지 않을 경우에는 불만을 가지게 된다는 가정에서 평가모형들이 개발되고 있는 것이다. 본 연구에서는 Kano의 모형에 따라 품질을 물리적 충족상황을 횡축에, 고객의 만족감을 종축에 두고 품질개념을 이원적으로 해석하여 매력적, 당연적, 일원적 품질요소로 분류하고자 하였다. 웹사이트 평가와 웹사이트 인터페이스 평가를 위한 선행연구들을 종합하여 화면구성, 항해성, 검색성, 상호 작용성, 사용자지원성의 5가지 영역에서 25개의 평가항목을 추출하였으며, 이를 Kano의 설문지조사법을 이용하여 설문을 수행하였다. 게임사이트, 커뮤니티 사이트, 쇼핑몰 사이트, 일간신문 사이트를 대상으로 290부의 설문을 수거하여 분석한 결과 각각의 사이트의 인터페이스 품질요소에서 매력적 품질요소, 일원적 품질요소, 당연적 품질요소를 분류했다. 종합적으로 볼 때, 인트로나 메인페이지의 포인트, 다양한 정렬방식, 개인화 된 페이지, 개인장치로의 다운로드가 매력적 품질요소로 분류되었으며, 시각적 구성, 링크의 정확성, 링크분류의 체계성, 용어의 명료성, 컨텐츠 이용의 용이성, 적절한 강조의 사용, 고객피드백시스템은 일원적 품질요소로 분류되었다. 또한 당연적 품질요소는 사이트 설계의 일관성, 에러처리, 의견제시 공간, 이용설명서 또는 도움말, FAQ로 나타났다. 이러한 연구의 결과를 통해 웹사이트를 운영하는 기업에 새로운 웹사이트의 설계 및 운영에 있어 우선순위를 부여하는 데 도움이 될 것으로 기대된다.