Usability Analysis of the Korea Disaster Management Resource Integrated Management System (KRMS) using User- and Expert-Based Evaluation
사용자 및 전문가 기반 평가를 활용한 재난관리자원 통합관리시스템 (KRMS)의 사용성 분석
This study analyzed the usability of the Korea Disaster Management Resource Integrated Management System (KRMS) using combined user- and expert-based evaluations to explain its low utilization in practice. Expert heuristic evaluation assessed effectiveness, efficiency, satisfaction, interface quality, and related factors, and found that none of the items were rated as “met,” with most judged “partially met” or “not met.” Severity ratings indicated that level 2 (moderate problems) accounted for the largest proportion. User evaluation was conducted with disaster management practitioners from a local public enterprise in Seoul, who completed representative task scenarios and the System Usability Scale (SUS). The average SUS score was 24.6, placing KRMS in the “Not Acceptable” range in international benchmarks. Key difficulties included complex procedures, overly segmented menu structures, and low intuitiveness, suggesting that structural and procedural complexity constrains usability in real work contexts and informing future system improvement and policy considerations.
한국어
본 연구는 재난관리자원 통합관리시스템(KRMS)의 낮은 활용률을 설명하기 위해 사용자 및 전문가 기반 평가를 활용한 사용성 분석을 수행하였다. 전문가 휴리스틱 평가는 시스템의 효과성·효율성·만족 도·인터페이스·기타 요소를 중심으로 검토되었다. 그 결과 전체 평가 항목 중 ‘충족’ 항목은 없었고, ‘부분 충족’과 ‘미충족’이 대부분을 차지하였으며, 심각도 또한, 2점(보통 수준 문제)이 가장 높은 비중을 보였다. 한편 사용자 평가는 서울시 지방공기업 재난관리 담당자를 대상으로 대표 과업 기반의 시나리오 수행 후 SUS 설문을 실시하였다. SUS 점수는 평균 24.6점으로 나타나 국제적 기준에서 ‘Not Acceptable’ 수준에 해당하였으며, 복잡한 절차, 메뉴 구조의 과분절 및 낮은 직관성 등이 주요 어려움으로 확인되었 다. 종합하면 KRMS는 정보 구조와 절차 흐름의 복잡성이 높아 실제 업무 맥락에서 사용성이 제약되는 것으로 분석되었다. 본 연구는 공공 재난관리 시스템의 사용자 경험을 체계적으로 진단한 최초의 실증적 사례로서, 향후 KRMS의 개선 방향과 정책적 시사점을 제시하는 데 기초 자료를 제공한다.
목차
Abstract Ⅰ. 서론 1. 연구의 필요성 및 목적 Ⅱ. 이론적 배경 1. 재난관리 정보시스템과 사용성 문제 2. 사용성 개념과 평가 기법 3. 선행 연구 고찰 Ⅲ. 연구 방법 1. 전문가 휴리스틱 평가 대상 2. 전문가 휴리스틱 평가 방법 3. 사용자 사용성 평가 대상 4. 사용자 사용성 평가 방법 Ⅳ. 연구 결과 1. 전문가 평가 결과 2. 사용자 평가 결과 Ⅴ. 논의 Ⅵ. 결론 및 제언 References 국문초록
위기관리 이론과 실천 [Crisis and Emergency Management: Theory and Praxis]
설립연도
2005
분야
사회과학>행정학
소개
위기관리 이론과 실천(Crisis and Emergency Management: Theory and Praxis; CEM-TP)은 위기관리에 관한 제 학문분야간 협동적 연구 공동체(Research Network)로서 전통적 안보 위기, 재난 위기(자연재난, 인위재난), 국가핵심기반 위기 등에 관한 제학문적 연구를 촉진하고 제 학문분야 연구자간 협력의 토대를 구축하기 위하여 위기관리 이론과 실천 편집위원회 구성이 완료된 2005년 2월 14일에 설립되었다.
현재 위기관리 이론과 실천(CEM-TP)에 참여하고 있는 연구자들의 학문 분야는 행정학, 사회학, 정치외교학, 신문방송학, 사회복지학, 법학, 심리학, 정보학, 지리학, 경찰행정학, 소방행정학, 경호학, 토목공학, 건축학, 의학, 간호학, 보건학, 기상학, 안전공학, 전산학, 지역개발학 등이 있으며, 따라서 한국의 위기관리 연구를 가장 폭 넓게 반영하고 있는 연구 공동체라 할 수 있다.
위기관리 이론과 실천(CEM-TP)의 조직으로는 편집위원회가 있으며, 편집위원회가 본 연구 공동체를 대표하고 있다. 따라서 위기관리 이론과 실천의 각종 연구 및 출판 활동은 편집위원회가 맡고 있으며, 현재 편집위원회는 46명의 위원으로 구성되어 있다. 또한 편집위원회는 위기관리의 제학문적 연구를 촉진하고 연구자간 협력을 위한 학술지로 <한국위기관리논집>을 발행한다.
위기관리 이론과 실천(CEM-TP)의 회원은 개인회원과 기관회원으로 구분된다. 개인회원은 본 회의 설립 목적과 취지에 찬동하는 위기관리 연구자 및 실무자로 구성되고, 기관회원은 위기관리 연구 및 실무에 관련된 정부기관, 연구기관, 대학도서관 등으로 구성된다