DOI QR코드

DOI QR Code

출판년도의 즉시 인용빈도를 포함하는 학술지 인용지수 개발

Developing New Journal Citation Indicators including Immediate Citation Frequencies in the Published Year

  • 이재윤 (명지대학교 문헌정보학과)
  • 투고 : 2018.10.16
  • 심사 : 2018.11.14
  • 발행 : 2018.11.30

초록

국내 학술지 평가에서도 인용지수의 중요성이 점차 증대되고 있다. 학술지 평가에 널리 활용되고 있는 학술지 인용 영향력 지수 JIF에서는 학술논문이 발행된 당해 연도에 즉시 인용된 횟수가 포함되지 않는다는 한계가 있다. 이와 달리 통시적 영향력 지수 IMP는 논문이 발행된 당해년도의 인용 횟수를 포함하지만, 평가시기 직전년도의 논문을 평가하지 못하고 몇 해 전에 출간된 논문에 대한 평가만 가능하다는 단점이 있다. 이를 극복하기 위한 새로운 지수로 총 영향력 지수 TIF와 평균 영향력 지수 MIF를 제안하였다. 제안한 지수를 KCI 데이터에 실험적으로 적용해본 결과, TIF가 당해년도의 인용을 포함하면서 연차별 안정성이 높아서 특히 국내 인문사회분야 학술지의 다면적 평가에 유용할 것으로 기대된다.

The importance of citation measures has been increasing in the evaluation of scholarly journals and it becomes a major issue for Korean Citation Index (KCI) journals. The Journal Impact Factor (JIF), a widely used measure for academic journals, has a problematic issue that it does not include the number of citations for a paper immediately made in the year in which the cited paper was published. On the contrary, the Diachronous Impact Factor (IMP) includes the number of citations made in the published year, but IMP is a measure for papers published a few years ago, not in the last year. It does not represent the recent value of journals effectively. To overcome these problems, Total Impact Factor (TIF) and Mean Impact Factor (MIF) are proposed as new journal citation indicators. This study calculated the performance of proposed indicators experimentally on KCI data. The result shows that TIF is a promising measure for the multidimensional evaluation of humanities and social sciences journals in Korea because it has high stability by year and includes the immediate citations of the published year.

키워드

MHJBB6_2018_v52n4_71_f0001.png 이미지

<그림 1> 즉시성 지수가 영향력 지수의 50% 이상인 학술지의 분야별 비중 (1,976종 중에서 IF가 0인 10종은 비율 산출이 불가능하므로 제외함)

MHJBB6_2018_v52n4_71_f0002.png 이미지

<그림 2> KCI에서 공개하고 있는 통시적 저널 영향력 지수 IMP(문헌정보학 분야)

MHJBB6_2018_v52n4_71_f0003.png 이미지

<그림 3> 2년 단위 총 인용 영향력 지수 TIF 산출 과정 (인용 횟수는 KCI에서 파악된 <정보관리학회지>의 연도별 발행 논문의 인용 데이터)

MHJBB6_2018_v52n4_71_f0004.png 이미지

<그림 4> 2년 단위 평균 인용 영향력 지수 MIF 산출 사례

MHJBB6_2018_v52n4_71_f0005.png 이미지

<그림 5> 총 인용빈도는 동일하지만 발행년도별 인용빈도 배분이 달라지는 가상 사례에서 총 영향력 지수 TIF 산출

MHJBB6_2018_v52n4_71_f0006.png 이미지

<그림 6> 총 인용빈도는 동일하지만 발행년도별 인용빈도 배분이 달라지는 가상 사례에서 평균 영향력 지수 MIF 산출

MHJBB6_2018_v52n4_71_f0007.png 이미지

<그림 7> KCI 학술지의 영향력 지수 IF 2016 순위와 총 영향력 지수 TIF 2016 순위의 비교

MHJBB6_2018_v52n4_71_f0008.png 이미지

<그림 8> 대분류별 IF2016 순위 백분율에서 TIF2016 순위 백분율을 뺀 값의 분포

MHJBB6_2018_v52n4_71_f0009.png 이미지

<그림 9> KCI 문헌정보학 분야 8종 학술지의 2년 단위 영향력 지수 변화 추세

<표 1> KCI 학술지의 인용지수 평균과 중앙값

MHJBB6_2018_v52n4_71_t0001.png 이미지

<표 2> KCI 학술지의 2016년 영향력 지수 IF 대비 즉시성 지수 II 비율의 분야별 분포를 나타내는 관측값

MHJBB6_2018_v52n4_71_t0002.png 이미지

<표 3> 2016년 즉시성 지수 II가 2016년 영향력 지수 IF의 2배 이상인 학술지

MHJBB6_2018_v52n4_71_t0003.png 이미지

<표 4> 인용지수별 10위 이내 학술지

MHJBB6_2018_v52n4_71_t0004.png 이미지

<표 5> KCI 학술지 1,976종을 대상으로 산출한 인용지수 사이의 상관도(Spearman’s rho)

MHJBB6_2018_v52n4_71_t0005.png 이미지

<표 6> 분야별 KCI 학술지의 2016년 영향력 지수와 2016년 총 영향력 지수의 상관도

MHJBB6_2018_v52n4_71_t0006.png 이미지

<표 7> KCI 2016년 기준 최신 지수와 직전 연도 지수 사이의 상관도 분석(Spearman’s rho)

MHJBB6_2018_v52n4_71_t0007.png 이미지

참고문헌

  1. Ko, Young Man and Park, Ji Young. 2012. "A Study on the Correlation between the Index Values and Qualitative.Quantitative Evaluation Elements and the Distinction Ability of the Journals' Registration Condition of the KCI-based Composite Index in Evaluating Korean Journals." Journal of the Korean Society for Library and Information Science, 46(2): 245-260. https://doi.org/10.4275/KSLIS.2012.46.2.245
  2. Ko, Young Man, Cho, Soo-Ryun and Park, Ji Young. 2013. "A Study on the "Kor-hT", a Modified Tapered h-index, by Applying the Ranking According to the Number of Citations of Journals in Evaluating Korean Journals." Journal of the Korean Society for Information Management, 30(4): 111-131. https://doi.org/10.3743/KOSIM.2013.30.4.111
  3. Kim, Pan-Jun and Lee, Jae Yun. 2010. "A Study on Journal Impact Measurement with Hirsch-type Indices." Journal of the Korean Society for Information Management, 27(1): 269-287. https://doi.org/10.3743/KOSIM.2010.27.1.269
  4. Song, Jae Do and Cho, Eun Seong. 2011. "The Influence of Korean and International Marketing Journals: Focused on the Problems of Kor-Factor and Impact Factor." Journal of Marketing Management Research, 16(2): 53-82.
  5. Oh, Sehee. 2012. "Suggestions of Improvements on the Current Academic Journal Evaluation System." Journal of the Korea Contents Association, 12(4): 495-509. https://doi.org/10.5392/JKCA.2012.12.04.495
  6. Lee, Jae Yun. 2014. "A Study on Diachronous Journal Impact Factor." In Proceedings of the 21st Annual Conference of the Korean Society for Information Management, August 21, 2014, Seoul: Chung-Ang University: 3-6.
  7. Lee, Jae Yun. 2016. "Calculating the h-index and Its Variants Considering the Number of Authors in a Paper." Journal of the Korean Society for Information Management, 33(3): 7-29. https://doi.org/10.3743/KOSIM.2016.33.3.007
  8. Lee, Jae Yun. 2017. "A Proposal on Modified g-index for Evaluating Research Performance." Journal of the Korean Society for Information Management, 34(3): 209-228. https://doi.org/10.3743/KOSIM.2017.34.3.209
  9. Lee, Choon-Shil. 2002. "The Development of Citation Indicators of Korean Medical Journals." Journal of the Korean Biblia Society for Library and Information Science, 13(1): 27-41.
  10. Choi, Eun-Ju, Yang, Kiduk and Lee, Hye-Kyung. 2016. "Quality Factor: A new Bibliometric Measure for Assessing the Quality of Faculty Research Performance." Journal of Korean Library and Information Science Society, 47(2): 287-304. https://doi.org/10.16981/kliss.47.201606.287
  11. Korea Research Foundation. 2018. 2018 Application Guidelines for Continuous Evaluation of Academic Journals. Daejeon: Korea Research Foundation.
  12. Korea Citation Index. [online] [cited 2018. 8. 10.]
  13. Han, Sang Wan and Park, Hong Seik. 1999. "A Study of Korean Academic Journal Evaluation Model." Journal of the Korean Society for Library and Information Science, 33(2): 89-118.
  14. Donner, P. 2018. "Effect of Publication Month on Citation Impact." Journal of Informetrics, 12(1): 330-343. https://doi.org/10.1016/j.joi.2018.01.012
  15. Garfield, E. 1972. "Citation Analysis as a Tool in Journal Evaluation." Science, 178: 471-479. https://doi.org/10.1126/science.178.4060.471
  16. Google. 2018. "Google Scholar Top Publications in Korean." [online] [cited 2018. 11. 1.]
  17. Haustein, S. 2012. Multidimensional Journal Evaluation: Analyzing Scientific Periodicals beyond the Impact Factor. Berlin: De Gruyter/Saur.
  18. Ingwersen, P. et al. 2001. "The Publication-Citation Matrix and Its Derived Quantities." Chinese Science Bulletin, 46(6): 524-528. https://doi.org/10.1007/BF03187274
  19. Leydesdorff, L. 2012. "Alternatives to the Journal Impact Factor: I3 and the Top-10% (or Top-25%) of the Most-Highly Cited Papers." Scientometrics, 92(2): 355-365. https://doi.org/10.1007/s11192-012-0660-6
  20. Plume, A., and Colledge, L. 2016. "New Metrics Will Make Journal Assessment More Complete and Transparent." Elsevier Connect, (December 8, 2016). [online] [cited 2018. 8. 10.]
  21. Rousseau, R. and Leydesdorff, L. 2011. "Simple Arithmetic versus Intuitive Understanding: The Case of the Impact Factor." ISSI Newsletter, 7(1): 10-14.