• 제목/요약/키워드: 검색 평가

검색결과 2,046건 처리시간 0.028초

Development of the Data Collection (KTSET) for Korean Information Retrieval Studies (한국어 정보검색연구를 위한 시험용 데이터 모음 (KTSET) 개발)

  • Kim, Jai-Gun;Kim, Young-Whan;Kim, Sung-Hyuk
    • Annual Conference on Human and Language Technology
    • /
    • 한국정보과학회언어공학연구회 1994년도 제6회 한글 및 한국어정보처리 학술대회
    • /
    • pp.378-385
    • /
    • 1994
  • 정보검색분야의 여러 기술들을 연구하고 이 결과들을 실험 평가하기 위해서는 모든 연구자들이 공동으로 사용할 수 있는 시험용 데이터 모음(Test Data Collection)이 필요하다. 외국에서는 이미 오래전부터 각 분야별 시험용 데이터 모음들을 준비하여 검색시스팀의 개발 및 객관적인 성능평가에 이용하여 왔는데 국내에서는 아직까지 이러한 시험용 데이터 모음이 개발되지 못한 실정이다. 본 연구는 한국어 정보검색 기술연구 활성화에 기여하기 위하여 한국어정보검색 기술 연구결과의 성능평가에 공동으로 활용할 수 있는 국내 최초의 시험용 데이터 모음인 KTSET을 개발하였다. KTSET은 정보과학회와 정보관리학회지의 논문지 및 학술대회 논문집으로부터 추출된 1,053개의 논문과 이를 검색대상으로 한 50개의 자연어질의어로 구성되었으며 대상문서들과 질의어 각각에 대한 색인결과와 질의어와 대상문서들간의 적합도 정보를 제공한다.

  • PDF

A Study on Improvement Plans for National Archives of Korea Website's Search Service through Its Usability Evaluation (국가기록원 웹사이트 검색서비스의 사용성 평가를 통한 개선방안 연구)

  • Lee, Hyojin;Kim, Jihyun
    • Journal of Korean Society of Archives and Records Management
    • /
    • 제21권3호
    • /
    • pp.187-215
    • /
    • 2021
  • Archives should provide a web-based archival information service with good usability based on the understanding of users' needs. Thus, this study analyzed the usability of the National Archives of Korea (NAK) website's search service through expert and usability evaluations for various users and suggested improvement plans. A literature review, heuristic evaluation, one of the usability expert evaluation methods, and usability evaluation for users were performed. As a result of expert evaluation, the severity rating for the usability problem was highest regarding a match between the system and real world and the lowest in error prevention. In the usability evaluation, it was assumed that the user's background and whether the website's help was provided is associated with usability. Usability evaluation was conducted for 22 participants, including those majoring in records management, web/application developers, and people without such backgrounds. Furthermore, a presurvey, a five-second test, and search tasks were conducted in a row. The analysis based on usability components in ISO 9241-11: 2018, i.e., effectiveness, efficiency, and satisfaction, showed that web/application developers had the highest search effectiveness, and those majoring in records management showed high effectiveness only in the search for archival content services. Background factors did not affect efficiency, and the more familiar with the finding aids, the better the efficiency. Moreover, providing the website's help was found to be positively associated with effectiveness and satisfaction. This study suggests that the NAK website will offer a user-friendly interface and search function, expand help support, and display a consistent web interface.

청소년 대상 과학정보시스템의 구축 및 사용성 평가 연구

  • 곽승진
    • 한국문헌정보학회 학술발표논집
    • /
    • 한국문헌정보학회 2004년도 학술발표논집 제17집
    • /
    • pp.61-89
    • /
    • 2004
  • 지식정보자원의 급속한 증가에 따른 정보문제를 보다 효율적으로 해결하기 위해 다양한 기능을 갖춘 검색엔진들이 개발되고 있다. 메타검색은 다른 웹 검색서비스보다 더 포괄적인 검색을 수행할 뿐만 아니라 더욱 안정된 검색 기술로써, 다양한 검색 정보원들에 대한 검색결과를 시스템이 통합하여 제공하기 때문에 검색에 소요되는 시간과 노력이 덜 든다는 점에서 효율적이고 사용하기 용이한 장점이 있다(Selberg 1999). 그러나 이러한 메타검색의 장점에도 불구하고 기존의 연구에서는 많은 이용자들이 각 데이터베이스를 통합하여 검색하는 것보다 개별적으로 검색하고 그 결과를 스스로 통합하는 분리 인터페이스를 더 선호하고 검색결과에 더 만족하였으며, 검색 효율성도 더 높은 것으로 나타나고 있다.(박소연 1999). (중략)

  • PDF

Performance Evaluation on Structure-based Retrievals of XML Documents (XML 문서의 구조기반 검색성능 평가)

  • Kim, Su-Hee
    • Journal of the Korea Academia-Industrial cooperation Society
    • /
    • 제10권2호
    • /
    • pp.396-406
    • /
    • 2009
  • In extension to our previous study, we develop metadata that specify elements' structural orders, to increase the efficiency level of XML document's retrieval process. Then, we proposed a structure-based indexing model. We expect the model to generate a more efficient retrieval process of horizontally and vertically related elements. To evaluate the model's performance level, we developed an experimental prototype and conducted an experiment on an XML corpus. On average, descendant, ancestor and sibling retrievals were approximately twelve percent faster than the ETID model. And retrievals specifying structural orders of particular element types were approximately twenty-five percent faster than the ETID model. In conclusion, metadata, such as Etype, Asso and Lsso, may make a meaningful contribution to retrieval processes that specify elements' order.

Comparative Evaluation of the Unified Search Services Provided by Major Korean Search Portals (주요 검색 포탈들의 통합 검색 서비스 비교 평가)

  • Park, So-Yeon;Lee, Joon-Ho
    • Journal of Korean Library and Information Science Society
    • /
    • 제39권1호
    • /
    • pp.265-278
    • /
    • 2008
  • This study aims to perform an evaluation of unified search services provided by major Korean search portals, Naver, Daum, Yahoo-Korea, and Empas. These unified search services are evaluated in terms of the relevance of search results. In conducting this study, real queries that real users submitted were used. This study also utilized click logs that consist of documents users clicked and viewed. The results of this study can be implemented to the development and improvement of portal's unified search services. Users can refer to the results of this study in choosing unified search services from search portals.

  • PDF

Usability evaluation of navigation aid for searching menu items on mobile phone (휴대전화를 위한 메뉴검색 지원도구의 사용성 평가)

  • Park, Won-Kyu;Han, Sung-H.;Chae, Byung-Kee;Cha, Joo-Hyoung;Kim, Se-Na
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2006년도 학술대회 2부
    • /
    • pp.169-174
    • /
    • 2006
  • 최근의 휴대전화는 음성 통화뿐만 아니라 메시지 및 이메일 송/수신, 사진/동영상 촬영 등 다양한 종류의 작업을 수행할 수 있으며, 그 기능이 점차 확장되고 있는 추세이다. 그러나 화면 공간의 제약으로 인한 메뉴 항목명의 축약, 메뉴 항목수의 증가, 메뉴 구조의 복잡화 등의 원인 때문에 많은 사용자들이 메뉴검색에 불편함을 겪고 있다. 이러한 문제점을 해결하기 위해, 본 연구에서는 기존의 메뉴 네비게이션을 통한 검색 방식, 하위 메뉴항목 제시 방식 이외에, 키워드 검색방식 및 유사 키워드 검색 방식을 개발하고 4가지 메뉴 검색방식의 사용성 평가실험을 수행하였다. 사용성 평가 실험 결과, 수행도 측면에서는 메뉴 검색 방식간의 차이가 유의하지 않았지만, 사용자 만족도 측면에서는 통계적으로 유의한 차이가 존재하였다. 4가지 메뉴 검색 방식 중 유사 키워드 방식은 사용자 만족도 측면에서 가장 선호되는 방식으로써, 추후 실제 휴대전화에 적용될 경우 사용자 만족도를 제고할 수 있을 것으로 기대된다.

  • PDF

An Evaluation of Twitter Ranking Using the Retweet Information (재전송 정보를 활용한 트위터 랭킹의 정확도 평가)

  • Chang, Jae-Young
    • The Journal of Society for e-Business Studies
    • /
    • 제17권2호
    • /
    • pp.73-85
    • /
    • 2012
  • Recently, as Social Network Services(SNS), such as Twitter, Facebook, are becoming more popular, much research has been doing actively. However, since SNS has been launched recently, related researches are also infant level. Especially, search engines serviced in web potals simply show the postings in order of upload time. Searching the postings in Twitter should be different from web search, which is based on traditional TF-IDF. In this paper, we present the new method of searching and ranking the interesting postings in Twitter. In proposed method, we utilize the frequency of retweets as a major factor for estimating the quality of postings. It can be an important criteria since users tend to retweet the valuable postings. Experimental results show that proposed method can be applied successfully in Twitter search system.

A Popularity-driven Cache Management and its Performance Evaluation in Meta-search Engines (메타 검색 엔진을 위한 인기도 기반 캐쉬 관리 및 성능 평가)

  • Hong, Jin-Seon;Lee, Sang-Ho
    • Journal of KIISE:Databases
    • /
    • 제29권2호
    • /
    • pp.148-157
    • /
    • 2002
  • Caching in meta-search engines can improve the response time of users' request. We describe the cache scheme in our meta-search engine in terms of its architecture and operational flow. In particular, we propose a popularity-driven cache algorithm that utilizes popularities of queries to determine cached data to be purged. The popularity is a value that represents the normalized occurrence frequency of user queries. This paper presents how to collect popular queries and how to calculate query popularities. An empirical performance evaluation of the popularity-driven caching with the traditional schemes (i.e., least recently used (LRU) and least frequently used (LFU)) has been carried out on a collection of real data. In almost all cases, the proposed replacement policy outperforms LRU and LFU.

A Usability Evaluation on the Visualization Techniques of Web Retrieval Results (웹 검색 결과 시각화 기법의 사용성 평가에 관한 연구)

  • Kim, Seong-Hee;Kim, Moon-Jeong
    • Journal of the Korean Society for Library and Information Science
    • /
    • 제41권3호
    • /
    • pp.181-199
    • /
    • 2007
  • This study is to suggest the usefulness of visualization techniques to display web retrieval results. We described the concept of visualization techniques and evaluated the usability for the SearchCrystal and KartOO search engines which provide visualization techniques for displaying the retrieval results. As a result, Searchcrystal search engine had higher score than KartOO system in terms of usability check lists.

Usability Evaluation of Text-based Search and Visual Search of a Multidisciplinary Library Database (상용 학술데이터베이스의 텍스트 기반 검색과 비주얼검색의 사용성에 관한 연구)

  • Kim, Jong-Ae
    • Journal of the Korean Society for information Management
    • /
    • 제26권3호
    • /
    • pp.111-129
    • /
    • 2009
  • This study examined the usability of text-based search and visual search of a large multidisciplinary library database to provide an empirical analysis of the acceptability of visual systems in the information retrieval environment. It also examined if there are differences in the usability assessment based on experimental order. The results indicated that the text-based search supported users' search behaviors more efficiently than the visual search. Also the text-based search was rated higher than the visual search in terms of user perceptions of four usability factors.