The purpose of this study is to develop a computer-based performance assessment system for measuring digital literacy and to verify its usability. The usability of the performance assessment system developed in this study was found to be highly appropriate, with a suitability score of 3.8 and a satisfaction score of 3.93 on a 4-point scale. In particular, the heuristic usability evaluation with experts showed that most items were rated as good. Considerations derived for developing computer-based performance assessment items included: setting the level of abstraction for the performance process, ensuring the authenticity of tools and services, activating buttons and icons, and defining partial scoring schemes. Implementing all processes of the assessment has time and development limits, so it is necessary to focus on important parts according to the assessment purpose, and all logs can be recorded, but the scoring model should be partial based on the development scope. The conclusion provides implications necessary for the development of computer-based performance assessment systems.
한국어
본 연구의 목적은 디지털 리터러시를 측정하는 컴퓨터 기반 수행형 평가 시스템을 개발하고 사용성을 검증하는 것이다. 본 연구에서 개발한 수행형 평가 시스템의 사용성은 4점 척도기준 적합성 3.8과 만족도 3.93으로 매우 적 합한 것으로 나타났다. 특히, 전문가를 대상으로 한 휴리스틱 사용성 검증에서는 대부분 양호한 것으로 나타났다. 컴퓨터 기반 수행형 평가 문항을 개발할 때 고려해야 할 사항으로는 수행과정의 추상 수준 설정, 도구와 서비스의 사실성 설정, 버튼 및 아이콘의 활성화 설정, 부분 점수 설정을 도출하였다. 전체 수행 과정의 구현은 평가 시간이 나 개발의 한계가 있으므로 평가 목적에 따라 중요한 부분을 중심으로 구현하는 것이 필요하다는 점과 평가 과정 의 모든 로그를 기록할 수 있으나 개발 범위에 맞춰 부분 채점 모델로 설정해야 한다는 시사점을 도출하였다. 본 연구의 결론은 컴퓨터 기반 수행형 평가 시스템을 개발할 때 필요한 시사점을 제공한다.
목차
요약 Abstract 1. 서론 2. 관련 연구 2.1. 디지털 리터러시 프레임 워크 2.2. 컴퓨터 기반 수행형 평가도구 2.3. 휴리스틱 사용성 평가 방법 3. 수행형 평가 시스템 설계 및 구현 3.1. 수행형 평가 시스템 설계 3.2. 수행형 평가 시스템 구조 3.3. 수행형 평가 시스템 구현 4. 사용성 테스트 분석 및 논의 4.1. 휴리스틱 사용성 검증 4.2. 수행형 평가 문항 개발에 대한 논의 5. 결론 및 제언 참고문헌
키워드
디지털 리터러시디지털 리터러시 평가수행형 평가 시스템컴퓨터 기반 평가웹 기반 평가Digital literacydigital literacy assessmentperformance-based assessment systemcomputer-based assessmentweb-based assessment
한국정보교육학회 [Korean Association of Information Education]
설립연도
1997
분야
사회과학>교육학
소개
사단법인 한국정보교육학회는 21세기 지식 정보화 사회에서 정보 교육에 관한 학술 및 기술 발전에 기여하기 위하여 정보교육과 관련된 학술대회개최, 학술논문지 발간, 연구지원사업 등을 추진하여 21세기 지식 정보화 시대의 초석을 마련하며 정부에서 추진하고 있는 교육정보화 사업과 연계하는 것을 기본 방향으로 한다.
간행물
간행물명
정보교육학회논문지 [Journal of The Korean Association of Information Education]