바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

검색어: 사용성 평가, 검색결과: 16
초록보기
초록

본 연구는 국가기록원에서 제공하는 기록정보콘텐츠 중 컬렉션 유형의 특성을 반영한 사용성 평가영역과 항목을 도출하고, 역사 전공자를 대상으로 ‘독립운동관련 판결문’ 컬렉션의 사용성 평가를 진행하였다. 이를 통해 사용성 평가영역 및 항목이 전체 만족도에 미치는 영향 관계와 중요도를 파악하였다. 연구 결과 ‘인터페이스, 콘텐츠, 검색’ 영역 순으로 전체 만족도에 긍정적인 영향을 미쳤으며 각 영역 별로 2개 평가항목이 유의미한 영향을 미치는 것으로 나타났다. 중요도는 ‘검색, 콘텐츠, 인터페이스’ 순으로 나타났으며, 인터페이스 영역의 중요도가 비교적 더 낮게 나타났다. 이를 토대로 국가기록원 기록정보콘텐츠 컬렉션 유형의 사용성 개선 방향을 제시하였다.

Abstract

The study aims to determine the areas and elements of usability evaluation that reflect the characteristics of the archival contents collections in the National Archives of Korea, and to evaluate the usability of the “Decisions Relating to the Independence Movement” collection for history majors. Through the findings, the relation and importance level that usability evaluation areas and elements have on overall satisfaction can be identified. As a result of this study, the areas of content, search, and interface all had positive effects on overall satisfaction. The interface area holds the greatest influence, and the two elements on each area were found to have a positive effect. On the other hand, users selected the order of importance as “search” first, “contents” second, and “interface” third, showing that interface was considered relatively less important. Based on this, we propose improving the usability direction of the archival contents collection of the National Archives of Korea.

2
박민수(한성대학교) ; 서은경(한성대학교) 2012, Vol.12, No.1, pp.189-207 https://doi.org/10.14404/JKSARM.2012.12.1.189
초록보기
초록

본 연구는 표준 기록관리시스템이 공공기관에서 운영되는 것이 일반화되기 시작한 시점에서 시스템에 대한 전반적인 진단이 필요하다고 보고 기록관리시스템의 기능성과 인터페이스에 대한 만족도를 평가하였다. 이러한 평가를 통하여 표준 기록관리시스템의 문제점을 파악하고 더 나아가서 기능성을 향상시킬 수 있는 개선점을 밝히는 것이 본 연구의 목적이다. 이를 위하여 현재 표준 기록관리시스템을 사용하는 기록관리 전문요원은 시스템 기능성을 신뢰성, 효율성, 사용성면에서 평가하였고 인터페이스에 대해서는 사용성면에서 평가하였다. 그 결과, 기능 품질에 대해서는 보통정도의 만족도를 보였지만, 시스템 인터페이스에 대해서는 불만족한 것으로 나타났다. 또한 기록관리 전문요원은 시스템 신뢰성을 더 만족하였지만 효율성과 사용성과의 통계적인 차이는 없는 것으로 나타났다. 따라서 앞으로 표준 기록관리시스템 사용 용이성을 높여야 하고 대량 일괄작업과 기능의 모듈화를 통하여 시스템의 효율성을 높여야 할 것이다. 기록관리시스템이 계속적으로 발전하기 위해서는 중장기적인 계획 아래 표준을 먼저 재정비하고 이에 따라 시스템 수정 보완을 지속적으로 수행해야 할 것이다.

Abstract

It is necessary to diagnose the standard record management system when the system is being spread out to entire public organization and institutions. This study aims to analyze the standard record management system for improving system and revising the related standards in the future. This study evaluates the satisfaction on the interface and functional quality of the system through questionnaire survey on records managers. It is found that the satisfaction of functional quality is just above the line, but the interface fails to satisfy records managers. Also the reliability of the system appears to be higher satisfaction than efficiency and usability. Therefore, the study suggests that the standard records management systems should try to improve ‘easy of use’ and effectiveness and efficiency by implementing heavy batch job and promoting modulation of key function. And the study emphasizes that the standards will be revised with the long-term plan in order to develop standard records management system systematically and continuously.

3
이효진(이화여자대학교 정책과학대학원 기록관리학전공) ; 김지현(이화여자대학교) 2021, Vol.21, No.3, pp.187-215 https://doi.org/10.14404/JKSARM.2021.21.3.187
초록보기
초록

기록관에서는 이용자의 요구사항에 대한 이해를 바탕으로 설계된 사용성이 높은 웹 기반 기록정보서비스를 제공할 필요가 있다. 이에 본 연구는 국가기록원 웹사이트 검색서비스의 사용성을 전문가 평가와 다양한 그룹의 이용자 대상 사용성 평가를 통해 분석하였고 이를 기반으로 개선방안을 제시하였다. 연구방법으로 문헌연구, 인터페이스 사용성 전문가 평가 중 하나인 휴리스틱 평가 및 이용자 대상 사용성 평가를 수행하였다. 전문가 평가 결과 정확성 영역에서 심각도가 가장 높았으며 에러대처 영역의 심각도가 가장 낮았다. 이용자 대상 사용성 평가에서는 이용자의 배경요인과 도움말 제공 여부가 사용성에 영향을 준다고 가정하였다. 따라서 기록관리학 전공자, 웹/앱 개발자 및 그러한 배경요인이 없는 일반인 등 총 22명을 대상으로 사용성 평가를 실시하였다. 사용성 평가는 사전 설문조사, 5초테스트, 검색과업 수행 순으로 진행하였다. ISO 9241-11:2018의 사용성 구성요소인 효과성, 효율성, 만족도를 기준으로 분석을 진행한 결과 웹/앱 개발자의 검색 효과성이 가장 높았고 기록관리학 전공자의 경우 기록정보콘텐츠 검색에서만 효과성이 높은 것으로 나타났다. 효율성에 있어 배경요인은 영향을 주지 않는 것으로 나타났으며 검색도구에 익숙해질수록 효율성이 향상되었다. 도움말 제공은 효과성과 만족도에 긍정적인 영향을 주는 것으로 나타났다. 개선방안으로 이용자에게 익숙한 인터페이스와 검색기능의 제공, 도움말 지원의 확대, 일관성 있는 웹 인터페이스 제공을 제안하였다.

Abstract

Archives should provide a web-based archival information service with good usability based on the understanding of users’ needs. Thus, this study analyzed the usability of the National Archives of Korea (NAK) website’s search service through expert and usability evaluations for various users and suggested improvement plans. A literature review, heuristic evaluation, one of the usability expert evaluation methods, and usability evaluation for users were performed. As a result of expert evaluation, the severity rating for the usability problem was highest regarding a match between the system and real world and the lowest in error prevention. In the usability evaluation, it was assumed that the user’s background and whether the website’s help was provided is associated with usability. Usability evaluation was conducted for 22 participants, including those majoring in records management, web/application developers, and people without such backgrounds. Furthermore, a presurvey, a five-second test, and search tasks were conducted in a row. The analysis based on usability components in ISO 9241-11: 2018, i.e., effectiveness, efficiency, and satisfaction, showed that web/application developers had the highest search effectiveness, and those majoring in records management showed high effectiveness only in the search for archival content services. Background factors did not affect efficiency, and the more familiar with the finding aids, the better the efficiency. Moreover, providing the website’s help was found to be positively associated with effectiveness and satisfaction. This study suggests that the NAK website will offer a user-friendly interface and search function, expand help support, and display a consistent web interface.

4
배은경(명지대학교 기록정보과학전문대학원) ; 박주석(명지대학교) 2009, Vol.9, No.2, pp.79-102 https://doi.org/10.14404/JKSARM.2009.9.2.079
초록보기
초록

19세기에 발명된 이래 대표적인 이미지 기록 수단으로 사용되어온 사진은 사회의 전 분야에 대한 시각적인 정보를 제공한다. 이러한 시각적 자원을 이용하기 위해서는 사진매체의 특성을 반영한 체계적인 관리가 선행되어야 한다. 국내에 생산 및 축적되어 있는 방대한 양의 사진을 수집하고 관리하기 위해서는 평가업무가 우선적으로 수행될 필요성이 있다. 평가는 기록이 지닌 의미와 가치를 판단하는 작업으로, 지속적 가치를 가지는 대상을 선별하기 위해서는 합리적인 평가기준이 필요하다. 이에 본 논문에서는 기록학의 평가선별론의 이론적 구조와 사진의 특성을 기반으로 한 사진기록의 평가기준을 제안하고자 했다. 이를 위해 문헌연구를 중심으로 먼저 사진기록의 개념, 가치 및 평가에 있어서의 특수성에 관한 논의를 정리했다. 다음으로 개별적인 기록의 평가에 이용되는 기존의 평가기준과 사진기록의 평가에 관한 논의에서 제기된 평가기준을 분석했다. 마지막으로 이러한 분석을 바탕으로 사진기록의 평가영역을 범주화하여 설계하고 각 영역별로 평가요소를 제시했다.

Abstract

Photography has been used as a typical tool of recording image since its invention in the nineteenth century. Photographs provide valuable visual information about all parts of society, and a systematic management must be preceded to use these information. The management and preservation system of photographs should reflect the characteristics of photographic medium. It is necessary for many archives to perform appraisal first to collect and manage enormous photographs. Appraisal is the process of determining meaning and value of records, and the reasonable criteria should be needed to carry it out. The purpose of this study is to suggest appraisal criteria for photographic records based on the archival appraisal theories and the characteristics of photography. This study draws on traditional appraisal theories and some literatures for archival management of photographs. This study is organized as follows. The first section examines the concept and values of photographic records and the distinctiveness of appraising photographs. The second section analyzes the existing appraisal criteria for individual records. The third section designs appraisal classes of photographic records and proposes the criteria for each classes.

초록보기
초록

‘평가(appraisal)’는 기록관리의 핵심 영역이다. 이 연구는 기록학 분야의 대표적인 백과사전인 『Encyclopedia of Archival Science』을 중심으로 기록평가의 지식구조를 파악하고, 관련 대역어들의 적절성을 분석하기 위한 것이다. 이를 위하여 먼저 이 사전에 146개 표제어 중 평가 관련 표제어 34개를 추출하고, 내용분석에 기초하여 용어를 범주화하였다. 둘째, 각 범주별 표제어들을 중심으로 주요 개념과 논의의 흐름을 살펴보았다. 셋째. 각 표제어들에 대한 대역어를 제시하였으며 대역어 선정 시 고려할 점을 제안하였다. 특히 ‘기록평가’(records appraisal)와 ‘보존기록평가(archival appraisal)’를 구분하여 사용하고, 등가의 원칙에 따라 대역어를 선정할 것을 제안하였다.

Abstract

Archival appraisal is a key area of archival science. This study aims to identify the knowledge structure of archival appraisal and propose appropriate translation terms. To this end, 34 entry terms related to archival appraisal were first extracted from 146 entries in the Encyclopedia of Archival Science, a leading encyclopedia in the field, and terminologies were categorized based on content analysis. Second, the contents described in the entries were assessed for each category, and the main concepts and flow of discussions were also examined. Third and last, suitable translations for each entry term were presented, and considerations were suggested for the translations, such as the application of appropriate principles of equivalence. Specifically, terms such as “records appraisal” and “archival appraisal” were recommended to be used separately.

초록보기
초록

본 연구는 노근리디지털아카이브 구축을 위한 예비분석으로, 참여형 아카이브 구축을 위한 오픈소스 소프트웨어(Open Source Software)를 분석하였다. 노근리사건은 한국전쟁 중의 양민 학살 사건으로 1999년 처음 사건이 알려진 이래로 한미 양국의 서로 다른 정치적 환경에서 벌어진 진상 규명 과정과 연구 활동, 이후 사회문화적인 다양한 치유 과정을 거쳐왔다. 이에 사건의 본질적인 이해를 위해서는 사건의 전후 내용뿐만 아니라 양국의 사회적 이해와 사회 구성원의 기억이 중요한 의미를 가진다. 따라서 노근리디지털아카이브는 사회적 기억의 수집을 위하여 참여형이라는 방식을 도입해 디지털아카이브를 구축하고자 한다. 이를 위해 본 연구는 현 시점에서 디지털아카이브 구축의 도구로 활용 가능한 대표적인 OSS들을 선별하여 평가․분석하였다. 평가를 위해 기존 OSS 평가 연구들을 통하여 평가 기준들을 종합하고, 또 사회적 기억을 저장하기 위한 핵심 기능과 조건들을 고려하여 참여형디지털아카이브를 위한 평가 기준을 마련하였다. 이를 바탕으로 기존 디지털 프로젝트에 널리 사용 중인 OSS 중 6개 시스템을 선정하여 분석하였다. 각 OSS의 특성과 장단점을 통해, 사회적 기억이라는 콘텐츠를 담는 디지털아카이브에 적합한 OSS에 대해 논의하고자 하였다.

Abstract

This paper reports the evaluation of six open-source software systems for participatory digital archives. This is an effort to create a digital platform for the social memory of No Gun Ri, which was first recognized in 1999 as a civilian massacre. The process of how it was reported and investigated is critical to understanding this brutal incident. In addition, the course of its cultural recovery has witnessed the reconstruction of the No Gun Ri memory. Thus, it is important to embrace the social memory around the massacre in these archives. In consideration of a virtual space for memory, this study takes the form of participatory archives to provide a mechanism in which anyone can share their memories. As a way to find a digital archives system for No Gun Ri, this study analyzed open-source software based on identified functions and requirements for participatory digital archives. Knowing the details of digital systems, this study discussed how contents for social memory can be stored and used in a digital system.

7
나정호(전북대학교) ; 소현기(전북대학교) ; 염경록(㈜ 아이와즈, 솔루션개발팀장) ; 이정옥(국가기록원) ; 오효정(전북대학교) 2022, Vol.22, No.4, pp.25-43 https://doi.org/10.14404/JKSARM.2022.22.4.025
초록보기
초록

기록을 관리하는 궁극적인 목적은 안전한 보존과 효율적 활용이다. 그러나 공공기록물 관리의 수장인 국가기록원의 검색서비스인 국가기록포털은 검색 시스템이 도입된 지 10년이 넘어 노후화되었고, 검색도구도 이원화되어 있다. 또한, 국가기록물을 열람하고자 하는 이용자의 검색 만족도를 충족시키지 못해 개선이 필요하다. 본 연구는 국가기록물 검색 고도화를 위한 사전 연구로, 현재의 국가기록원 검색시스템의 검색 품질 현황을 파악하는 것을 목적으로 한다. 이를 위해 국가기록원에서 사용 중인 검색도구인 CAMS와 국가기록포털의 현황을 분석하고 검색서비스 품질을 점검하기 위한 평가셋을 구축, 이용자 관점에서 국가기록포털의 검색 품질 평가를 실시하였다. 국가기록포털의 성능평가를 위한 척도로는 정확률과 재현율, F-score, MRR 등을 활용, 다양한 각도에서 분석하였다. 검색 품질 평가결과 전반적으로 검색 성능이 낮은 것으로 나타났으며, 특히 ‘주제별상세검색’의 경우 정확률, 재현율, MRR이 모두 낮게 나와 개선이 시급할 것으로 보인다. 본 연구를 통해 구축된 평가셋이 향후 국가기록원 검색시스템의 고도화 이후 시스템의 성능이 얼마나 개선되었는지를 객관적으로 측정할 수 있는 기틀로 활용되기를 기대한다.

Abstract

The ultimate record management’s purpose is preservation and utilization. However, the National Archives of Korea (NAK)s Portal has problems such as search system aging and search tools dualization. As a result, the users’ search satisfaction is not satisfied, and the improvement demand increases. This study aimed to evaluate the NAK’s search quality as a preliminary study for NAK search system advancement. To this end, we analyzed the current status of CAMS and NAK’s Portal. Then, we established the test sets and evaluated the NAK’s Portal quality from the user’s point of view. Evaluation results were analyzed using Precision, Recall, F-score, and MRR. The analysis results showed that the overall search performance was low, particularly in the “advanced subject search,” which showed low performance in Precision, Recall, and MRR. Thus, improvement is urgently needed. The test sets established for this study are expected to be used as a basis for objectively measuring the improvement of the search performance after the NAK search system advancement.

초록보기
초록

본 연구는 표준 RMS를 대상으로 보존 기능 구현 여부와 그 방식을 확인해보고 이후 보존 기능 개선을 위한 고려해야 할 시사점을 도출하였다. 법률과 공공표준 분석을 통해 기록관에서 이루어지는 공공 전자기록 보존 활동을 추출하고, 이를 바탕으로 표준 RMS가 구현하였다 밝힌 보존 기능과의 예비 평가를 실시하였다. 그 결과 표준 RMS는 기록관에서 이루어지는 전자기록 보존 기능의 대부분을 포맷변환에 할당하고 있음이 드러나 이 연구에서도 포맷변환 기능으로 한정하여 평가하는 것으로 축소하였다. 조정된 범위에 맞게 평가에 이용할 체크리스트를 작성한 후, 이를 활용하여 표준 RMS의 보존 기능을 사용한 경험이 있는 기관의 기록물관리 전문요원을 대상으로 면담을 진행하였다. 그 결과, 표준 RMS는 기능 구현의 측면에서는 일정 정도 긍정적으로 평가될 수 있으나 기능의 이용편의성 등과 같은 구현 방식은 기록물 전문요원의 업무를 효율적으로 지원하기 힘든 것으로 드러났다. 이에 이후 표준 RMS의 보존 기능 개선상 고려해야 할 사항을 제안하였다.

Abstract

This study evaluated the implementation of preservation functions and the degree of implementation in standard records management systems (SRMS) for public agencies. For evaluation, it identified digital preservation activities by analyzing legislation and standards for public records management, especially functional requirements for records management system. Compared to these, it pre-evaluated the functions that SRMS claims to be implemented. It was found that preservation functions implemented in SRMS mainly focuses on migration to standard format. A checklist was made based on the adjusted scope by reflecting the result of pre-evaluation and was distributed to record managers who work for public agencies. This study found that the preservation functions were relatively compliant with the functional requirement for records management system for public agencies, but the way of implementation hardly support records managers of public agencies. The preservation functions of SRMS must be improved or be reconsidered based on the results and further studies.

초록보기
초록

디지털 아카이브는 디지털 자원을 보존하고 지속적으로 활용하기 위한 전자화된 저장소이다. 디지털 아카이브에 대한 이론적 연구는 활발하게 진행되고 있고, 다양한 도메인의 디지털 자원을 기록하기 위한 아카이브가 구축되어 서비스되고 있다. 그러나 디지털 아카이브의 자원은 디지털화라는 본래의 목적은 만족할 수 있지만, 자원의 검색과 재사용에 있어 여전히 제한이 있는 것이 현실이다. 본 연구는 FAIR 데이터 원칙을 자세히 살펴보고, 디지털 아카이브에 적용하기 위한 성숙도 평가 프레임워크를 제안한다. FAIR 데이터 원칙은 디지털 자원을 기계가 읽고 처리할 수 있게 만드는 일련의 지침으로 웹에 존재하는 모든 자원을 대상으로 적용할 수 있다. FAIR 데이터 원칙의 평가 모델은 계획 수립과 적용 단계를 구분해서 정의하고 있다. 그러나, 개별 원칙의 적용 여부를 평가하기 위한 명확한 기준이 모호하고, 디지털 아카이브 분야를 위한 평가 기준에 대한 논의가 미흡하다. 본 연구는 디지털 아카이브에 FAIR 데이터 원칙을 적용하기 위한 프레임워크를 제안하고, 향후 적용을 위한 이슈를 논의한다.

Abstract

Digital archives are electronic storages used to preserve and utilize digital resources sustainably. Theoretical research on digital archives is being conducted actively, and digital archives for recording various resources in heterogeneous domains are being built and serviced. However, although the original purpose of digitizing the resources of digital archives is achievable, the discovery and reuse are still limited. This study examines the Findable, Accessible, Interoperable, and Reusable (FAIR) data principles in detail and proposes a maturity assessment framework for digital archives. The FAIR Data Principles is a set of guidelines that enable machines to read and understand digital resources that are applied to any online resource. The evaluation model of the FAIR data principle defines the planning and application stages separately. However, criteria for evaluating the application of individual principles are still ambiguous, and discussions on evaluation criteria for the field of digital archives are insufficient. This study proposes a framework for applying the FAIR data principle to digital archives and discusses issues for future application.

10
박상현(경북대학교) ; 김희섭(경북대학교) 2014, Vol.14, No.1, pp.101-124 https://doi.org/10.14404/JKSARM.2014.14.1.101
초록보기
초록

본 연구의 목적은 기존 국내 영구기록물관리기관의 검색시스템을 하나의 통합된 검색과 상호 데이터 교환으로 그 사용성을 높이고자 새로운 통합검색시스템을 설계하고 구현하는 것이다. 이를 위하여 국내 영구기록물관리기관의 검색 시스템 현황을 분석하여 국내 환경에 적합한 EAD의 요소를 선정하였다. 선정된 EAD 요소를 기반으로 새로운 검색시스템(가칭 한국영구기록물 통합검색시스템, KAIRS)을 설계하였고, 기존의 두 영구기록물관리기관의 시스템을 에뮬레이션을 통하여 새로운 검색시스템을 구현하였다. 사용성 평가결과 새롭게 구현된 KAIRS가 기존 시스템보다 높은 만족도를 보였다.

Abstract

This study aims to design and implement an integrated information retrieval system for the archives in Korea. Particularly, this study is focused on the improvement of the usability of the system. To achieve the goal, this study analyzed the current retrieval systems of national archives and presidential archives in Korea. A new integrated retrieval system, called KAIRS, is designed based on the EAD elements, which is implemented through emulation technic between two retrieval systems. KAIRS showed higher of user satisfaction compared to the existing two retrieval systems in their usability test.

한국기록관리학회지