• Journal of Information Processing Systems
• /
• 제14권4호
• /
• pp.916-925
• /
• 2018

The academic research performance is often quantitatively measured by means of using citation frequency. The citation frequency-based indicators, such as h-index and impact factor, are commonly used reflecting the citation quality to some extent. However, these frequency-based indicators are usually carried out based on the assumption that all citations are equal. This may lead to biased evaluations in that, the attributes of the citing objects and cited objects are significant. A high-accuracy evaluation method is needed. In this paper, we review various citation quality-based evaluation indicators, and categorize them considering the algorithms being applied. We discuss the pros and cons of these indicators, and compare them from four dimensions. The outcomes will be useful for our further research on distinguishing citation quality.

• 정보관리학회지
• /
• 제28권2호
• /
• pp.79-96
• /
• 2011

인용분석은 학자들의 연구실적 평가에 가장 많이 사용되는 방법 중 하나이지만 비평가들은 오늘날의 인용분석 자료와 방법론에 근본적인 문제가 있다고 주장한다. 전통적 인용분석 방식은 인용품질과 인용소음뿐만 아니라 언어, 시간, 문화와 같은 비수치적인 요소들을 고려하지 않아 단순하고 그릇된 평가를 가져올 수 있으며, 적용 범위가 각각 다르고 불완전한 인용 데이터베이스들은 충돌적인 인용분석결과를 초래하기 쉬울 수 있다. 이러한 문제들을 해결하려면 포괄적인 인용데이터를 다 방면과 다 방식으로 분석하는 새로운 인용분석연구가 필요하다. 본 논문은 Web of Science, Scopus와 Google Scholar를 비교 분석한 연구의 결과를 논의하며 기존의 인용분석 방법의 약점을 극복하기 위해 설계한 CiteSearch라는 프로토타입 시스템을 간략하게 설명한다.

• 기술혁신학회지
• /
• 제21권3호
• /
• pp.1127-1154
• /
• 2018

본 연구는 특허의 질적 특성을 관측 가능한 특허의 인용지표로 설명함으로써 특허가치 추정모형에 기여하는 것을 목표로 한다. 본 연구는 기업, 대학, 연구소가 한국특허청에 출원한 특허를 대상으로 전후방 인용자료를 구축하였다. 특허의 원천측면을 반영하는 후방인용 지표들이 후속특허에 의한 활용측면을 반영하는 전방인용 특성들을 잘 설명하는 것으로 나타났다. 전방인방 지표와 후방인용 지표 간에 존재하는 함수관계는 특허가치에 대한 추정, 예측모형을 더 정교화하는데 기여할 것이다. 후방인용 지표들은 특허 자체가 갖는 기술범위를 잘 설명하는 것으로 나타났다. 기술협력의 일방에게 기술협력의 상대방이 누구인지도 중요하였다.

• 기술혁신학회지
• /
• 제19권4호
• /
• pp.768-798
• /
• 2016

본 연구는 과학기술계 정부출연 연구기관 평가에서 논문의 질적 평가를 위해 새로 도입된 피인용도 지표가 성과지표의 구성요건 중 적시성을 충족할 수 있는가라는 문제의식에서 출발하였다. 이에 피인용 반감기와 즉시성 지수 등 논문의 주기적 특성을 분석 활용하여 실질적인 질적 성과체계로 전환하기 위한 기관평가의 개선방향을 제시하고자 한다. 연구 결과는 기술의 발달과 의존성이 높아짐에 따라 학문의 변화속도 또한 빠르게 변화하고 있으나, 공공기술은 타 분야에 비해 인용속도가 느리고, 산업과 연관된 분야는 지식이전 속도가 빠른 것으로 분석되고 있다. 또한, 학문분야 특성에 따른 피인용 주기는 차이가 없었으며, 각 분야의 질적으로 우수한 논문의 평가 시 피인용 지수의 타당성을 확보하기 위해서는 6년 정도의 기간이 누적된 데이터가 필요한 것으로 분석되었다. 분야별 질적 성과평가를 위해 필요한 피인용의 시간적 특성을 기술통계적으로 도출한 결과를 반영하여 임무중심형 연구기관 평가의 문제점을 도출하였다. 이를 개선하기 위한 객관적이고 타당한 질적 평가를 위한 정책적 개선방향을 제시하였다.

• 정보관리학회지
• /
• 제23권1호
• /
• pp.221-241
• /
• 2006

본 연구에서는 인용 정보를 활용하여, 특허 인용색인의 기법을 분석하고, 이를 바탕으로 새로운 특허지수를 제시하였다. 이를 위해 문헌정보 및 특허정보 관련 인용색인데이터베이스에서 제공하는 인용색인지수를 비교 분석하였다. 특히 JCR의 영향력 지수와 CHI의 기술영향력 지수가 갖고 있는 정보적 가치와 의미를 재해석하였다. 전자는 상대적 인용빈도를 사용하여, 연속간행물과 같은 매체의 가치를 중시하고 있다. 후자의 경우는 특허고유의 가치를 평가하기 때문에, 자체정보만을 중시하고 있다. 이러한 차이점을 극복하기 위해 후자의 경우 해당 특허를 보유하고 있는 기관의 기술영향력 지수를 이용하여 상대적 가치를 재부여하였다. 이를 보완하기 위해 인용정보에 기반하여 다음 특정 특허의 피인용지수를 비롯하여 상대적 반감기 평가지수, 특허기술활용 통합지수 등 세가지의 새로운 지수를 제안하였다. 단 비교분석대상은 출원특허사항에 인용정보를 제시하고 있는 미국 특허정보로 제한하여 국내 특허정보에 대한 비교 분석은 수행하지 못하였다.

• 한국도서관정보학회지
• /
• 제47권2호
• /
• pp.287-304
• /
• 2016

본 연구는 교수의 연구업적을 보다 다면적으로 측정하기 위한 합리적 방법을 고안하기 위하여 새로운 논문계량지표인 Quality Factor를 개발하였다. Quality Factor는 총 논문수, 피인용수, h-index, Impact Factor를 이용하여 수치를 도출한다. 새로 개발한 지표인 Quality Factor와 다양한 지표(논문 수, Impact Factor, 피인용수, h-index, g-index)간의 관계를 분석하기 위하여, 본 연구는 국내 문헌정보학과 교수 189명의 14년간(2001-2014)의 학술논문데이터를 바탕으로 그들의 지표별(논문 수, Impact Factor, 피인용수) 순위를 산출하고 지표들 간에 스피어만 순위상관관계를 도출하였다. 그 결과, Quality Factor는 전체적으로 피인용 수의 영향을 주로 받는 지표(피인용수, h-index, g-index)와 유사한 상관관계를 보였으나, 산점도에서 Quality Factor가 타 지표에 비하여 분산된 분포를 나타내면서 개별식별성이 높은 것으로 드러났으며 군집 분할 분석에서도 타 지표들과 상이한 상관관계를 보여주었다.

• 한국기술혁신학회:학술대회논문집
• /
• 한국기술혁신학회 2016년도 춘계학술대회 논문집
• /
• pp.404-430
• /
• 2016

본 연구는 과학기술계 정부출연 연구기관 평가에서 논문의 질적 평가를 위해 새로 도입된 피인용도 지표가 성과지표의 구성요건 중 적시성을 충족할 수 있는가라는 문제의식에서 출발하였다. 이에 피인용 반감기와 즉시성 지수 등 논문의 주기적 특성을 분석 활용하여 실질적인 질적 성과체계로 전환하기 위한 기관평가의 개선방향을 제시하고자 한다. 연구 결과로 기술의 발달과 의존성이 높아짐에 따라 학문의 변화속도 또한 빠르게 변화하고 있으나, 공공기술은 타 분야에 비해 인용속도가 느리고, 산업과 연관된 분야는 지식이전 속도가 빠른 것으로 분석되었다. 또한, 학문분야 특성에 따른 피인용 주기는 차이가 없었으며, 각 분야의 질적으로 우수한 논문의 평가 시 피인용 지수의 타당성을 확보하기 위해서는 6년정도의 기간이 누적된 데이터가 필요한 것으로 분석되었다. 분야별 질적 성과평가를 위해 필요한 피인용의 시간적 특성을 기술통계적으로 도출한 결과를 반영하여 임무중심형 연구기관 평가의 문제점을 도출하였다. 이를 개선하기 위한 객관적이고 타당한 질적 평가를 위한 정책적 대안을 평가주기적, 평가기준적, 평가관리적 관점으로 제시하였다.

• 기술혁신연구
• /
• 제27권4호
• /
• pp.1-19
• /
• 2019

본 연구는 특허 인용 정보를 활용하여 국가연구개발사업의 특허를 평가할 수 있는 새로운 방법을 제시하였다. 이를 위해 가장 대표적으로 특허의 가치나 질을 나타내는 특허의 전방인용 수(피인용 수)를 활용하고, 특허 인용 네트워크에서 개별 특허가 얼마나 중요한 역할을 하고 있는지를 나타내는 네트워크의 중심성 지수를 활용하여 국가연구개발사업의 특허와 민간부문의 특허를 비교하였다. 분석 결과 국가연구개발사업의 특허는 특허의 특성과 출원인의 특성, 기술분야의 특성, 연도 효과를 통제하고도 전방인용 수, 연결중심성, 매개중심성, 페이지 랭크 모두 높은 것으로 나타났다. 즉, 국가연구개발사업의 특허는 민간부문의 특허에 비해 후행기술에 직접 더 많은 영향을 주며, 선행기술과 후행기술을 직접 연결한다. 또한 국가연구개발사업의 특허는 민간부문의 특허에 비해 기술의 효율적인 발전에 기여하며, 중요한 기술들을 연결하는 것으로 나타났다.

• 한국임상약학회지
• /
• 제22권2호
• /
• pp.131-136
• /
• 2012

Objective: This study evaluated and compared the adherence to the CONSORT for quality of reports on the randomized controlled trials (RCT) abstracts by four major Korean Science Citation Index (SCI) journals and The New England Journal of Medicine (NEJM). Methods: A descriptive analysis of published RCT abstracts in Korean SCI journals and NEJM from 2007/01 to 2011/06 was conducted by two reviewers, independently extracting data from a PubMed search. A modification of CONSORT for abstract was used including 16 checklist items. Reporting of checklist items for individual group was conducted to compare adherence patterns between two groups. Results: We identified the potential 57 RCT abstracts from Korean SCI and 50 from NEJM meeting our inclusion criteria; among them, three abstracts from Korean SCI and one from NEJM were excluded. Among total 16 checklist items based on CONSORT statement, Korean SCI journals and NEJM were statistically equivalent in 4 items; Korean journals were better in three items and NEJM were in nine. The methodological quality domains were inadequately reported in both journals: allocation concealment about 1.9% and 4.0%, and blinding 44.4% and 40.8%. In general, The CONSORT adherence of NEJM was better than that of Korean SCI in the method and result domain (p < 0.0001). Conclusions: The quality of NEJM reporting of RCT abstracts was better than that of Korean SCI, in general. This study on adherence of RCT reports from Korean SCI journals and NEJM abstracts to the CONSORT statement reveals that there is a need for improvement, especially Korean SCI. Further investigation on the quality of RCT reports and ways to improve reporting quality is required.

• 품질경영학회지
• /
• 제44권1호
• /
• pp.109-120
• /
• 2016

Purpose: This study developed a method of determining priorities for evaluating and revising defense standards. Methods: The proposed data integration and refinement methods are used to obtain component reliability information and to determine the frequency of component citation based on Pareto analysis. Based on the reliability information and the frequency of cited components, the target components for quality improvement can be determined and improved using various methods, such as engineering changes, special meetings, additional training, and revising the maintenance manual. Results: Based on the proposed process, we identified components that need to be improved in order to enhance the quality and reliability. Conclusion: Our process will improve the quality and reliability of weapon systems. The proposed process can be adopted for various weapon systems to enhance their quality and reliability, and to reduce military spending.