• 제목/요약/키워드: relevance consistency

검색결과 33건 처리시간 0.024초

주제전문지식이 적합성판정의 일관성에 미치는 영향에 관한 실험적 연구 (An Experimental Study on the Effect of Domain Expertise on the Consistency of Relevance Judgements)

  • ;문성빈
    • 정보관리학회지
    • /
    • 제38권3호
    • /
    • pp.1-22
    • /
    • 2021
  • 본 논문은 주제분야 전문지식이 적합성 판단에 미치는 영향을 온라인 실험을 통해 살펴보고 주제분야 전문지식이 적합성개념의 기반이 될 수 있는 지를 검증해 보려고 하였다. 문헌정보학 전문가 6명, 문헌정보학 석사과정 학생 9명, 비전문가 12명이 실험에 참여해 문헌정보학 분야에 대한 14개 논문초록과 문헌정보학 영역 이외 14개 논문초록의 적합성을 판정을 실시하였다. 적합성 판단의 일관성은 공동 확률 일치성(Joint-Probability Agreement, PA)과 IBM SPSS의 클래스간 상관관계 계수(Interclass Correlation Coefficient, ICC)를 통해 산출되었다. PA를 사용한 경우, 비전문가는 과제나 그룹 구분에 상관없이 높은 일관성이 보였다. ICC 계산에 따르면, 문헌정보학 전문가들과 비교하였을 때, 문헌정보학 석사과정학생들은 비전문가들보다 높은 수준의 일관성을 가지고 있다는 것으로 나타났다. 2개 그룹(석사 및 박사를 통합으로 하는 전문가그룹과 비전문가)으로 구분하였을 때는 문헌정보학분야 과제에서 예상대로 전문가들이 더 높은 수준의 일관성을 보이는 경향을 볼 수 있었다.

검색의 일관성원리와 피드백을 이용한 감성기반 음악 검색 시스템 (Emotion-Based Music Retrieval Using Consistency Principle and Multi-Query Feedback)

  • 신송이;박은종;엄경배;이준
    • 정보처리학회논문지B
    • /
    • 제17B권2호
    • /
    • pp.99-106
    • /
    • 2010
  • 본 논문에서는 검색의 일관성원리와 다중질의 방법을 이용하여 감성을 기반으로 음악을 검색하는 알고리즘을 제안한다. 사용되어지는 특징들은 MPEG-7에서 제공하는 오디오 서술자들이며 이 정보들을 사용하는 것은 국제표준화가 용이 하다는 장점을 가지고 있기 때문이다. 또한 감성에 따라 MPEG-7 오디오 서술자들의 가중치를 부여하는 방법을 제안하여 계산량을 줄이는 방법을 고안하였으며 일관성원리와 다중질의 방법을 사용하는 적합성 피드백을 사용하여 검색의 적합률을 향상시켰다.

연관도를 계산하는 자동화된 주제 기반 웹 수집기 (An Automated Topic Specific Web Crawler Calculating Degree of Relevance)

  • 서혜성;최영수;최경희;정기현;노상욱
    • 인터넷정보학회논문지
    • /
    • 제7권3호
    • /
    • pp.155-167
    • /
    • 2006
  • 인터넷을 사용하는 사람들에게 그들의 관심사와 부합하는 웹 페이지를 제공하는 것은 매우 중요하다. 이러한 관점에서 본 논문은 각 웹 페이지의 주제와 연관된 정도를 계산하여 웹 페이지 군(cluster)을 형성하며, 단어빈도/문서빈도 엔트로피(entropy) 및 컴파일된 규칙을 이용하여 수집된 웹 페이지를 정제하는 주제 기반 웹 수집기를 제안한다. 실험을 통하여 주제 기반 웹 수집기에 대한 분류의 정확성, 수집의 효율성 및 수집의 일관성을 평가하였다. 첫째, C4.5, 역전패(back propagation) 및 CN2 기계학습 알고리즘으로 컴파일한 규칙을 이용하여 실험한 웹 수집기의 분류 성능은 CN2를 사용한 분류 성능이 가장 우수 하였으며, 둘째, 수집의 효율성을 측정하여 각 범주별로 최적의 주제 연관 정도에 대한 임계값을 도출할 수 있었다. 마지막으로, 제안한 수집기의 수집정도에 대한 일관성을 평가하기 위하여 서로 다른 시작 URL을 사용하여 수집된 웹 페이지들의 중첩정도를 측정하였다. 실험 결과에서 제안한 주제 기반 웹 수집기가 시작 URL에 큰 영향을 받지 않고 상당히 일관적인 수집을 수행함을 알 수 있었다.

  • PDF

정보검색 연구의 방법론에 관한 고찰 (Methodological Problems in Information Retrieval Research)

  • 이명희
    • 한국비블리아학회지
    • /
    • 제7권1호
    • /
    • pp.231-246
    • /
    • 1994
  • A major problem for information retrieval research in the past three decades has been methodology, even though some progress has been made in obtaining useful results from methodologically sound experiments. Within a methodology, potential problems include artificial data generated by the researcher, small sample size interpretation of findings. Critics have pointed out that some room exists for improving methodology of information retrieval research; using existing data, having big enough sample size, including large numbers of search queries, introducing more control in relation to variables, utilizing more appropriate performance measures, conducting rests carefully and evaluating findings properly. Relevance judgments depend entirely on the perception of the user and on the situation of the moment. In an experiment, the best judge of relevance is a user with a well defined information need. Normally more than two categories for relevance judgments are desirable becase there are degrees of relevance. In experimental design, careful control of variables is meeded for internal validity. When no single database exists for comparison, existing operational databases should be used cautiously, Careful control for the variations of search queries, inter-searcher sonsistency, intra-searcher consistency and search strategies is necessary. Parametric statistics requiring rigid assumptions are not appropriate in information retrieval research and non-parametric statistics requiring few assumptions are necessary. Particularly, the sign test and the Wilcoxon test are good alternatives.

  • PDF

ASKERIC 데이터베이스의 품질에 관한 연구 (An Evaluative study on information quality of ASKERIC databases)

  • 이명희
    • 한국비블리아학회지
    • /
    • 제9권1호
    • /
    • pp.221-240
    • /
    • 1998
  • 국내에서 제작되는 데이터베이스의 품질 개선에 도움을 주고자 교육학 분야에서 널리 알려진 ERIC 데이터베이스에 대한 품질의 평가작업을 수행하였다. 선정된 데이터베이스는 웹상에서 검색이 가능한 ASKERIC 이었으며, 데이터의 정확성, 일관성, 완전성, 현행성의 4가지 평가기준을 가지고 평가가 진행되었다. 정확성의 측정은 미국과 영국식 단어의 차이를 가진 글자를 가지고 수행되었는데 미국식 영어로 색인된 문헌의 검색결과가 영국식 영어로 된 문헌의 검색결과보다 훨씬 많은 것을 발견하였다. 틀리기 쉬운 10개의 단어를 가지고 철자에러를 체크해 보았을 때 상당한 양의 철자에러가 발견되었다. 일관성의 측정을 위해 색인어의 일관성을 조사하였는데 시소러스가 동의어 통제를 완전히 감당하지 못하는 것으로 드러났고 대소문자의 구별은 이루어지지 않는 것으로 나타났다. 완전성을 검증하기 위해 접근필드를 조사하였는데 ASKERIC은 상당히 다양한 접근 필드를 가지고 있었으나 매뉴얼에 나타난 접근필드와 검색창에 나타난 접근필드는 달랐으며. 검색창에 나타난 추가적인 필드를 가지고 검색하였을 때는 에러가 나타났다. 매뉴얼에서는 데이터의 갱신작업이 매월 이루어진다고 명시하였지만 현행성을 위해 실제로 검색해 보았을 때 데이터의 갱신주기는 매우 느린 것으로 나타났다. 그럼에도 불구하고 일반적으로 ERIC 데이터베이스의 품질은 대체로 양호한 것으로 나타났는데 이는 시스템의 자동 에러수정을 위한 부단한 노력과 이용자 피드백을 시스템의 품질 향상에 적극 반영하는 정책덕분인 것으로 보인다.

  • PDF

멀티 디바이스 환경에서 사용자 경험의 연속성에 관한 고찰 (A Study on Continuity of User Experience in Multi-device Environment)

  • 이영주
    • 디지털융복합연구
    • /
    • 제16권11호
    • /
    • pp.495-500
    • /
    • 2018
  • 본 연구는 멀티 디바이스 환경에서 사용자 경험의 연속성을 높일 수 있는 요인들에 대해 알아보았다. 우선 구조적 차이와 태스크의 연속성에 관해서는 크로스 미디어의 특성에 따른 OS의 차이와 마우스의 사용과 터치 제스처라는 기능적인 차이가 연속성을 방해하는 요소로 나타났으며 연속성을 높이기 위해서는 메타포와 어포던스로 시각 단서를 제공해 상관성과 가시성을 높여주어야 한다. 시각 기억과 인지의 연속성 부분에서는 시지각적 요소의 동일성과 유사성으로 익숙함을 부여하여 친숙성의 요인이 연속성과 밀접한 관련이 있음을 알 수 있었다. 마지막으로 사용자 경험의 연속성을 위해서는 시지각적 요소는 물론 정보의 의미와 배치의 일관성이 사용자 경험의 연속성을 위한 요인이 되는 것을 알 수 있었다. 이를 바탕으로 사용자 경험의 연속성 차원의 친숙성, 일관성, 상관성, 가시성의 요인으로 회귀 분석을 실시한 결과 친숙성, 일관성, 상관성은 유의미한 영향 요인인 반면 가시성은 연속성에 큰 영향을 미치지 않음을 알 수 있었다.

중소기업실태조사의 품질진단과 개선에 관한 연구 (Statistics Quality Assessment and Improvement of Small & Medium Enterprises Survey)

  • 김문선;천새롬;남경현
    • 품질경영학회지
    • /
    • 제40권4호
    • /
    • pp.577-588
    • /
    • 2012
  • Purpose: This paper aims to evaluate the quality of Small & Medium Enterprises(SMEs) Survey and to provide some desirable directions and improvements for the future SMEs Survey, conducted by the Government. Methods: The diagnosis were performed by employing the quantitative and qualitative approaches with the official guideline provided by the Ministry of Statistics. Results: Results show that follow-up management are evaluated relatively low in specific processes, and timeliness are evaluated relatively lower than accuracy, accessibility, relevance, comparability and consistency in statistical qualities. Conclusion: we propose the alternatives which enhance the quality level of SMEs by using the 6 tools of Quality Management for Statistics.

가치창조를 위한 지방정부회계제도의 개혁 (A Study of the Innovation of Local Government Accounting System for Value Creation)

  • 박이봉
    • 경영과정보연구
    • /
    • 제13권
    • /
    • pp.99-125
    • /
    • 2003
  • The purpose of this study is to improve local government accounting system for value creation. In order to achieve this object: First, improvement of public finance policy can be obtained through connection of policy and estimate, and evaluation of soundness and rationality of tax system. Second, innovation of appropriation is achieved through effective division of cost, efficient division of budgetary resources and perfect accrual accounting. Third, a performance report must include accurate performance measures and performance indicators, for its effect is linked to public finance policy. Fourth, general principles of local government accounting must include significance, reliability, consistency with user concepts, relevance, understandability and comparability for financial reports.

  • PDF

초등학교 교사들의 수업 관행과 학생들의 학습 환경 인식과의 관계 (Consistency Between Elementary Teachers' Teaching Practice in Mathematics and Classroom Learning Environment)

  • 오영열
    • 대한수학교육학회지:학교수학
    • /
    • 제4권2호
    • /
    • pp.237-246
    • /
    • 2002
  • The purpose of this paper is to investigatethe relationship between Korean elementary teachers' teaching practice and students' perceptions of classroom learning environment. It is important to examine whether teachers conceive of mathematics and their teaching practice are consistent with their actual teaching mathematics in classroom. To do so, two reform-oriented and two traditionally-oriented elementary teachers in Seoul and a total of 130 students from these four selected teachers' classes participated in the present study Using classroom environment survey scale [CES] the differences in students' perceptions on classroom learning environment were examined. The results show that students taught by reform-oriented teachers have significantly higher score in the area of participation, relevance, and commitment to learning than traditionally-oriented group of students. Thus, we may conclude that the reform-oriented group of students have more benefits in learning mathematics than do the traditionally-oriented group of students.

  • PDF

어업조사통계의 품질진단과 개선에 관한 연구 (Quality Diagnosis and Improvement of Fisheries Census Statistic)

  • 표희동;김종천
    • 수산해양교육연구
    • /
    • 제22권4호
    • /
    • pp.553-565
    • /
    • 2010
  • The paper aims to evaluate the quality of fisheries census statistic and to provide some desirable directions and improvements for the future fisheries census, conducted by the Government. For the quality diagnosis of fisheries census statistic, specific processes of fisheries census and statistical qualities of each dimension are surveyed and evaluated by a Government's practician, two external examiners and a research group. Results show that census design, data analysis and quality control are evaluated relatively low in specific processes, and accessibility and comparability are evaluated relatively lower than relevance, accuracy, timeliness and consistency in statistical qualities. For minimizing the sampling errors, the probability proportion method should be employed in sampling methods from currently simple sampling method. In addition, fisheries census statistic is desirable to include and compare with those of different countries for consumer oriented data system.