- 권한신청
- P-ISSN1598-1487
- E-ISSN2671-7247
초록
기록을 관리하는 궁극적인 목적은 안전한 보존과 효율적 활용이다. 그러나 공공기록물 관리의 수장인 국가기록원의 검색서비스인 국가기록포털은 검색 시스템이 도입된 지 10년이 넘어 노후화되었고, 검색도구도 이원화되어 있다. 또한, 국가기록물을 열람하고자 하는 이용자의 검색 만족도를 충족시키지 못해 개선이 필요하다. 본 연구는 국가기록물 검색 고도화를 위한 사전 연구로, 현재의 국가기록원 검색시스템의 검색 품질 현황을 파악하는 것을 목적으로 한다. 이를 위해 국가기록원에서 사용 중인 검색도구인 CAMS와 국가기록포털의 현황을 분석하고 검색서비스 품질을 점검하기 위한 평가셋을 구축, 이용자 관점에서 국가기록포털의 검색 품질 평가를 실시하였다. 국가기록포털의 성능평가를 위한 척도로는 정확률과 재현율, F-score, MRR 등을 활용, 다양한 각도에서 분석하였다. 검색 품질 평가결과 전반적으로 검색 성능이 낮은 것으로 나타났으며, 특히 ‘주제별상세검색’의 경우 정확률, 재현율, MRR이 모두 낮게 나와 개선이 시급할 것으로 보인다. 본 연구를 통해 구축된 평가셋이 향후 국가기록원 검색시스템의 고도화 이후 시스템의 성능이 얼마나 개선되었는지를 객관적으로 측정할 수 있는 기틀로 활용되기를 기대한다.
Abstract
The ultimate record management’s purpose is preservation and utilization. However, the National Archives of Korea (NAK)s Portal has problems such as search system aging and search tools dualization. As a result, the users’ search satisfaction is not satisfied, and the improvement demand increases. This study aimed to evaluate the NAK’s search quality as a preliminary study for NAK search system advancement. To this end, we analyzed the current status of CAMS and NAK’s Portal. Then, we established the test sets and evaluated the NAK’s Portal quality from the user’s point of view. Evaluation results were analyzed using Precision, Recall, F-score, and MRR. The analysis results showed that the overall search performance was low, particularly in the “advanced subject search,” which showed low performance in Precision, Recall, and MRR. Thus, improvement is urgently needed. The test sets established for this study are expected to be used as a basis for objectively measuring the improvement of the search performance after the NAK search system advancement.
초록
공공기관의 유튜브 동영상은 디지털 공공기록물로서 관리 및 보존이 필요하다. 이때 동영상 자체와 동영상을 설명하는 메타데이터도 함께 보존해야한다. 본 연구의 목적은 공공기관이 유튜브에 발행한 동영상을 아카이빙할 때 필요한 핵심 메타데이터 요소를 선정하는 것이다. 이를 위해 NAK 8, PREMIS, ISAD(G), 유튜브 메타데이터를 참조하여 설명, 구조, 관리, 보존, 이용자 참여의 5개 상위 영역, 10개 하위 영역의 메타데이터 요소를 설계하였다. 이후 14명의 전문가를 대상으로 설계한 메타데이터 요소를 검증하였다. 마지막으로 평가 결과에 대한 타당도 검증과 신뢰도 검증을 진행하였다. 타당도와 신뢰도 검증의 기준값을 모두 만족하는 요소는 63개 측정 요소 중 33개 요소로 확인되었다. 해당 요소들을 공공기관 유튜브 동영상 아카이빙을 위한 메타데이터 핵심 요소로 선정하였다.
Abstract
YouTube videos of public institutions are digital public records that need to be managed and preserved. As such, the video and the metadata describing the video should also be preserved. This study aims to select the key metadata elements necessary for archiving videos published on YouTube by public institutions. To this end, five high-level areas, namely the description, structure, management, preservation, and user participation, and the metadata elements of 10 subareas, were designed by referring to NAK 8, PREMIS, ISAD(G), and YouTube metadata. Afterward, the metadata elements designed by 14 experts were verified. Lastly, the validity and reliability of the evaluation results were verified. Of the 63 elements, 33 satisfied the validity and reliability criteria. Thus, these elements were selected as the core metadata for archiving YouTube videos in public institutions.