Earticle

현재 위치 Home

국가기록포털 검색서비스 품질 점검을 위한 평가셋 구축 및 현황 분석
Test Set Construction for Quality Evaluation of NAK Portal’s Search Service and the Status Analysis

첫 페이지 보기
  • 발행기관
    한국기록관리학회 바로가기
  • 간행물
    한국기록관리학회지 KCI 등재 바로가기
  • 통권
    제22권 제4호 (2022.11)바로가기
  • 페이지
    pp.25-43
  • 저자
    나정호, 소현기, 염경록, 이정옥, 오효정
  • 언어
    한국어(KOR)
  • URL
    https://www.earticle.net/Article/A420444

※ 원문제공기관과의 협약기간이 종료되어 열람이 제한될 수 있습니다.

원문정보

초록

영어
The ultimate record management’s purpose is preservation and utilization. However, the National Archives of Korea (NAK)s Portal has problems such as search system aging and search tools dualization. As a result, the users’ search satisfaction is not satisfied, and the improvement demand increases. This study aimed to evaluate the NAK’s search quality as a preliminary study for NAK search system advancement. To this end, we analyzed the current status of CAMS and NAK’s Portal. Then, we established the test sets and evaluated the NAK’s Portal quality from the user’s point of view. Evaluation results were analyzed using Precision, Recall, F-score, and MRR. The analysis results showed that the overall search performance was low, particularly in the “advanced subject search,” which showed low performance in Precision, Recall, and MRR. Thus, improvement is urgently needed. The test sets established for this study are expected to be used as a basis for objectively measuring the improvement of the search performance after the NAK search system advancement.
한국어
기록을 관리하는 궁극적인 목적은 안전한 보존과 효율적 활용이다. 그러나 공공기록물 관리의 수장인 국가기록원의 검색서비스인 국가기록포털은 검색 시스템이 도입된 지 10년이 넘어 노후화되었고, 검색도구도 이원화되어 있다. 또한, 국가기록물을 열람하고자 하는 이용자의 검색 만족도를 충족시키지 못해 개선이 필요하다. 본 연구는 국가기록물 검색 고도화를 위한 사전 연구로, 현재의 국가기록원 검색시스템의 검색 품질 현황을 파악하는 것을 목적으로 한다. 이를 위해 국가기록원에서 사용 중인 검색도구인 CAMS와 국가기록포 털의 현황을 분석하고 검색서비스 품질을 점검하기 위한 평가셋을 구축, 이용자 관점에서 국가기록포털의 검색 품질 평가를 실시하였다. 국가기록포털의 성능평가를 위한 척도로는 정확률과 재현율, F-score, MRR 등을 활용, 다양한 각도에서 분석하였다. 검색 품질 평가결과 전반적으로 검색 성능이 낮은 것으로 나타났으며, 특히 ‘주제별상세검색’의 경우 정확률, 재현율, MRR이 모두 낮게 나와 개선이 시급할 것으로 보인다. 본 연구를 통해 구축된 평가셋이 향후 국가기록원 검색시스템의 고도화 이후 시스템의 성능이 얼마나 개선되 었는지를 객관적으로 측정할 수 있는 기틀로 활용되기를 기대한다.

목차

초록
ABSTRACT
1. 서론
1.1 연구목적
1.2 선행 연구
2. 국가기록물 검색도구 현황
2.1 국가기록물 유형
2.2 국가기록물 내부 검색도구: CAMS
2.3 국가기록물 외부 검색도구: 국가기록포털
2.4 문제점
3. 국가기록포털 품질 점검을 위한 평가셋 구축
3.1 평가셋 구축 설계
3.2 질의어 선정 결과
3.3 정답셋 구축
4. 평가셋 기반 국가기록포털 품질 평가
4.1 평가방법 및 평가지표
4.2 성능평가 결과
4.3 국가기록포털 검색 품질 평가 한계점
5. 결론
참고문헌

키워드

국가기록포털 정보검색 검색도구 검색평가 평가셋 National Archives of Korea (NAK) Portal Information Retrieval Finding Aids Retrieval Evaluation Test Set

저자

  • 나정호 [ Jeong Ho Na | 전북대학교 일반대학원 기록관리학과 석사과정 ] 제1저자
  • 소현기 [ Hyeon-Gi So | 전북대학교 일반대학원 기록관리학과 석사과정 ]
  • 염경록 [ Gyung Rok Yeom | ㈜ 아이와즈, 솔루션개발팀장 ]
  • 이정옥 [ Jung-Ok Lee | 국가기록원 서비스정책과 ]
  • 오효정 [ Hyo-Jung Oh | 전북대학교 문헌정보학과 교수, 문화융복합아카이빙연구소 공동연구원 ] 교신저자

참고문헌

자료제공 : 네이버학술정보

간행물 정보

발행기관

  • 발행기관명
    한국기록관리학회 [Korean Society of Archives and Records Management]
  • 설립연도
    2000
  • 분야
    복합학>문헌정보학
  • 소개
    한국기록관리학회(Korean Society of Archives & Records Management)는 기록학 영역의 학술 연구를 촉진하고, 기록인 공동체 구성원 및 관련 기관 간의 상호협력 증진을 목적으로 2000년 7월 설립된 전문학술단체입니다. 한국기록관리학회는 한국연구재단 등재지인 <한국기록관리학회지>를 연 4회 발간하고 있으며, 2010년 <기록관리론: 증거와 기억의 과학>, 2018년 <기록관리의 이론과 실제>을 펴내는 등 교육출판에 힘쓰고 있습니다. 또한, 2009년 한국기록학회와 공동으로 제1회 전국기록인대회를 개최한 이래, 2018년 제10회 전국기록인대회를 공동 개최하기에 이르기까지, 기록학의 현장성과 복합성 그리고 실천을 담보한 학술 연구를 증진하고, 기록인 공동체의 소통을 위해 노력하고 있습니다. 한국기록관리학회는 창립 이래, 기록학의 사회적, 역사적 중요성을 잊지 않으며, 기록관리 현장의 문제를 비판하며, 원칙을 바로잡는 일에 물러서지 않았습니다. 불편부당한 기록관리의 원칙을 세우며, 기록인 공동체의 학술적, 실천적 소통의 장이 되고자 하는 한국기록관리학회에 기록인 모두의 성원을 부탁드립니다.

간행물

  • 간행물명
    한국기록관리학회지 [Journal of Korean Society of Archives and Records Management]
  • 간기
    계간
  • pISSN
    1598-1487
  • 수록기간
    2001~2026
  • 십진분류
    KDC 024 DDC 020

이 권호 내 다른 논문 / 한국기록관리학회지 제22권 제4호

    피인용수 : 0(자료제공 : 네이버학술정보)

    함께 이용한 논문 이 논문을 다운로드한 분들이 이용한 다른 논문입니다.

      페이지 저장