• 제목/요약/키워드: Benchmark Test Collection

검색결과 3건 처리시간 0.028초

HKIB-20000 & HKIB-40075: Hangul Benchmark Collections for Text Categorization Research

  • Kim, Jin-Suk;Choe, Ho-Seop;You, Beom-Jong;Seo, Jeong-Hyun;Lee, Suk-Hoon;Ra, Dong-Yul
    • Journal of Computing Science and Engineering
    • /
    • 제3권3호
    • /
    • pp.165-180
    • /
    • 2009
  • The HKIB, or Hankookilbo, test collections are two archives of Korean newswire stories manually categorized with semi-hierarchical or hierarchical category taxonomies. The base newswire stories were made available by the Hankook Ilbo (The Korea Daily) for research purposes. At first, Chungnam National University and KISTI collaborated to manually tag 40,075 news stories with categories by semi-hierarchical and balanced three-level classification scheme, where each news story has only one level-3 category (single-labeling). We refer to this original data set as HKIB-40075 test collection. And then Yonsei University and KISTI collaborated to select 20,000 newswire stories from the HKIB-40075 test collection, to rearrange the classification scheme to be fully hierarchical but unbalanced, and to assign one or more categories to each news story (multi-labeling). We refer to this modified data set as HKIB-20000 test collection. We benchmark a k-NN categorization algorithm both on HKIB-20000 and on HKIB-40075, illustrating properties of the collections, providing baseline results for future studies, and suggesting new directions for further research on Korean text categorization problem.

WebSHArk 1.0: A Benchmark Collection for Malicious Web Shell Detection

  • Kim, Jinsuk;Yoo, Dong-Hoon;Jang, Heejin;Jeong, Kimoon
    • Journal of Information Processing Systems
    • /
    • 제11권2호
    • /
    • pp.229-238
    • /
    • 2015
  • Web shells are programs that are written for a specific purpose in Web scripting languages, such as PHP, ASP, ASP.NET, JSP, PERL-CGI, etc. Web shells provide a means to communicate with the server's operating system via the interpreter of the web scripting languages. Hence, web shells can execute OS specific commands over HTTP. Usually, web attacks by malicious users are made by uploading one of these web shells to compromise the target web servers. Though there have been several approaches to detect such malicious web shells, no standard dataset has been built to compare various web shell detection techniques. In this paper, we present a collection of web shell files, WebSHArk 1.0, as a standard dataset for current and future studies in malicious web shell detection. To provide baseline results for future studies and for the improvement of current tools, we also present some benchmark results by scanning the WebSHArk dataset directory with three web shell scanning tools that are publicly available on the Internet. The WebSHArk 1.0 dataset is only available upon request via email to one of the authors, due to security and legal issues.

Mobile Computing의 GUI 개발에 있어 사용성 평가 연구 - WIPI 인터페이스 디자인을 위한 Benchmark Testing을 중심으로 - (The Study of Usability Evaluation in the GUI of Mobile Computing - Based on Benchmark Testing in the interface design of WIPI)

  • 정봉금;송연승
    • 디자인학연구
    • /
    • 제17권1호
    • /
    • pp.49-62
    • /
    • 2004
  • 무선인터넷으로 상호작용 하는 정보를 다양한 그래픽으로 가시화하면서 인터페이스를 통일화한 무선인터넷 단말기용 GUI (Graphic User Interface)가 사용자의 선택의 폭을 확장하고 감성만족도 향상에 크게 기여한다는 점에서 매우 고무적인 기술적 진전으로 받아들여지고 있다. 특히 최근 무선인터넷 단말기의 해상도와 색상이 높아지면서 사용상의 편의성과 시각효과를 강조한 GUI를 요구하고 있어 향후 이 분야의 연구가 크게 증가할 것으로 전망된다. 모바일 컴퓨팅의 인터페이스는 사용자들의 미감과 정보효율성에 중요한 영향을 미칠 것이다. 현재 국내 상황은 무선인터넷업체와 GUI 디자인업체가 핸드폰 PDA 스마트폰 등 무선인터넷 단말기를 통일된 사용방법으로 작동하면서 다양한 그래픽 화면을 처리할 수 있게 해주는 GUI개발에 전력하고 있다. 사례연구에서는 Nokia 3650 모델과 MS의 Orange SPV 모델이 제공된다. 이 두 모델의 사용성 비교평가를 통해 PDA와 Phone이 결합된 형식의 차세대 스마트폰 UI 개발에 벤치마킹하고자 한다. 2535세대의 취향에 맞는 유저빌리티 개발을 중심으로 WIPI WAP 메뉴를 구성 하고, WAP서비스 및 VM Browser, PDA Browser개발을 위한 연구 자료로 활용할 수 있으며 사용자의 디자인 선호도 분석을 통해 WAP 메뉴로의 접근성을 감성적으로 강화시키고자 함이 본 연구의 목적이다. 본 연구에서 제시하는 평가모형은 무선인터넷단말기를 개발하는 개발자, 디자이너, 기획자들에게 보다 효과적인 인터페이스 분석 자료를 제공하며, 스마트 폰 개발 시 고려해야 할 Check point 제시를 통해 WIPI 폰의 GUI Guideline으로의 활용을 기대한다.

  • PDF