Earticle

본 연구는 거동불편 노인을 대상으로 구강건강관리 업무 수행능력에 필요한 치과위생사의 역량을 평가하 기 위해 루브릭을 개발한 연구이다. 노인구강건강관리 업무 역량 평가 루브릭의 개발과정은 문헌조사 및 분석을 통하여 노인구강건강관리 업무 내용에 대하여 필요한 치과위생사의 역량을 ‘지식’, ‘기술’, ‘태도’로 분류하여 세부 역량을 구성하고 이를 바탕으로 노인구강건강관리 업무역량 평가 루브릭을 개발하였다. 개발된 루브릭 문항으로 향후 치과위생사의 노인구강건강관리 역량 향상에 기여하고 역량 평가에 필요한 기초자료를 제공하고자 한다.

This study developed a rubric to evaluate the competencies of dental hygienists required to perform oral health management tasks for the elderly with mobility difficulties. The development process of the rubric for evaluating the competency of oral health management tasks for the elderly was as follows: through a survey and analysis of historical data, the competencies of dental hygienists required for oral health management tasks for the elderly were classified into ‘knowledge’, ‘skills’, and ‘attitudes’ to organize detailed competencies; and a rubric for evaluating the competency of oral health management tasks for the elderly was developed based on these competencies. The developed rubric items are intended to contribute to the improvement of the competency of dental hygienists in oral health management of the elderly in the future and to provide basic data necessary for competency evaluation.

본 연구의 목적은 루브릭 개발을 통해 교과목에 대한 구체적인 학습방향을 제시하고, 체계적인 학습내용 확인하고자 함이다. 치은연상치석제거와 치은연하치석제거 루브릭을 제시하여 치과위생사 업무의 수행준거와 수행 수준을 통해 학습자 스스로 자신의 학습 방향을 설정하고 학습수준을 이해하며 성취수준을 달성하도록 제시하였 다. 임상 실습 평가에 유용한 Zimmaro의 루브릭 개발 절차를 적용하여. 분석적 루브릭으로 3점 척도로 개발되었 다. 효과적인 루브릭 활용을 위해서는 더 많은 연구가 필요하며, 루브릭이 교육적으로 의미가 있는 역할을 할 수 있도록 루브릭에 대한 체계적인 연구가 계속되어야 할 것이다. 본 연구는 치위생임상실습교육 분야에서 평가도구 로 객관적이며 실질적인 자료를 개발하였다는 것에 큰 의의가 있을 것이다.

The purpose of the study is to investigate the validity of the developed Rubric and the systematical learning tool for the dental hygiene students. By presenting the Rubric for removal of the supragingival calculus and removal of subgingival calculus, It was presented so that learners can set the direction in learning by themselves, understand the level in learning and make the achievement level through the performance standards and performance levels of dental hygienists. To apply to the useful Zimmaro(2004)`s Rubric development procedure to the evaluating clinical practice, an analytical Rubric was developed to a 3-point scale. To use the more useful Rubric, it is needed to have the study and there needs the effort to keep going on systematic study for Rubric to play the meaningful educational role. This study is considered to develop the objective and practical data as an evaluation tool in the field of dental hygiene clinical practice education.

이 연구의 목적은 2015 개정 실과교육과정에서 농업생명과학 영역의 평가 루브릭을 개발하는 것이다. 루브릭이란 수행 과정 및 결과를 평가하기 위하여 학생의 수준 및 특징을 수준별로 서술한 평가 척도로서 이 연구에서는 2015 개정 실과교육과정에 근거하여 농업생명과학 영역의 핵심개념인 ‘창조’, ‘지속가능’의 평가 루브릭을 개발하였다. 루브릭의 개발은 준비, 개발, 개선 단계를 통해 이루어졌다. 준비단계에서는 2015 개정 실과교육과정의 성취기준을 분석하여 수행과제 선정 및 평가 방법을 결정하였다. 개발단계에서는 루브릭의 유형을 선정하고 평가영역, 평가준거, 평가척도 개발을 통해 루브릭을 완성하였다. 개선단계에서는 전문가 검토를 통해 개발된 루브릭을 수정 보안하고 최종적으로 루브릭을 완성하였다. 이 연구에서 개발된 초등실과 농업생명과학 영역의 평가 루브릭은 다음과 같이 3가지 측면에서 활용 될 것으로 기대된다. 첫째, 초등실과 농업생명과학 영역에서 교수학습 관련 정보 및 학생 수준을 고려한 수업 설계에 활용될 것이다. 둘째, 단위학교에서 초등실과 농업생명과학 영역과 관련된 평가 문항 제작 및 채점 기준 설정의 근거로 활용될 것이다. 셋째, 초등실과 교육에 있어 농업생명과학 영역에 대한 관심을 환기시키고 관련 수업의 질적 성장에 기여할 수 있을 것이다.

The purpose of this study is to develop an evaluation rubric for the field of agricultural bioscience in the 2015 revised Practical Arts Curriculum. A rubric is a rating scale that describes the level and characteristics of a student in order to assess the process and outcome. In this study, we developed the evaluation rubrics of 'Creation' and 'Sustainability' which are core concepts of the agricultural life science field based on the 2015 Revised Practical Arts Curriculum. Development of rubrics was done through preparation, development and improvement stages. In the preparation stage, we analyzed the achievement standards of the 2015 Revised Practical Arts Curriculum and decided the method of selecting and evaluating the performance tasks. In the development stage, we selected the type of rubric and developed criteria and scales to complete the rubric. In the improvement stage, the rubric was revised and finally the rubric was completed. The rubrics developed in this study are expected to be used in three aspects as follows. First, it will be used to design teaching considering information on teaching and learning and student level in the field of agricultural life science. Second, it will be used as a basis for establishing evaluation items and scoring criteria in the field of agricultural life science. Third, it can contribute to the qualitative growth of the class and attract attention to the field of agricultural life science.

이 연구는 디자인 씽킹 기반의 발명 문제 해결 활동 평가를 위한 루브릭을 개발하기 위하여 수 행되었다. 고인규(2017)가 제안한 루브릭 개발 절차를 참고하여 준비, 개발, 개선의 절차를 수행 하였으며, 평가 영역별 평가 준거 및 평가 척도를 개발하고 전문가 집단 10명을 대상으로 타당도 를 검증하였다. 또한, 4주에 걸쳐 디자인 씽킹 기반의 발명 문제 해결 활동을 수행한 초등 예비교 사 27명을 대상으로 루브릭의 적용 용이성을 조사하였다. 이 연구의 주요 결과는 다음과 같다. 첫째, 디자인 씽킹 기반의 발명 문제 해결 활동 평가를 위하여 루브릭의 유형은 분석적 루브릭, 과제적 루브릭을 선정하였으며, 평가 영역을 문제 이해(공감하기, 문제 정의하기), 아이디어 도출하 기, 모형 만들기, 평가하기로 설정하였으며, 이러한 평가 영역 구분은 타당한 것으로 검증되었다. 둘째, 평가 영역별 평가 준거를 ‘기본’과 ‘심화’ 목표로 구분하여 제시하고, 이를 바탕으로 우수, 보 통, 미흡의 3단계 평가 척도를 개발하였으며, 이러한 평가 준거 설정은 타당한 것으로 검증되었다. 셋째, 평가 영역별 평가 준거에 대한 타당도 검증은 2차에 걸쳐 이루어졌다. 1차 타당도 검증에 서 타당하지 않은 것으로 판정된 평가 준거에 대한 수정, 보완을 거쳤으며, 2차 타당도 검증에서 영역별 평가 준거와 그에 따른 평가 척도는 각각 타당한 것으로 검증되었다. 넷째, ‘초등학교 교실 청소 경험을 다시 디자인하기’라는 디자인 씽킹 기반의 발명 문제 해결 과 제 수행을 마친 예비교사들이 루브릭을 적용하여 자기평가를 실시하도록 한 후 적용 용이성을 조사 한 결과, 평가 영역별 평가 척도는 실제 활용하기에 용이한 수준임을 확인할 수 있었다.

The purpose of this study was to develop performance assessment rubric for invention problem solving based on design thinking. Performance assessment rubric was developed confirming to Go(2017)’s preparation, development and improvement stages. The assessment area, criteria and scales were developed and investigated the validity by 10 experts group. And the evaluability level of rubric was inquired by 27 pre-service primary teachers who performed invention problem solving based on design thinking for 4 weeks. The main results of this study were as follows: First, the type of rubric for invention problem solving based on design thinking was selected analytical rubric and task specific rubric. Assessment domain was composed and verified problem understanding (empathize and define), ideate, prototype, and test. Second, to develop assessment criteria the achievement goal of invention problem solving based on design thinking was divided to basic and advanced goal. Assessment scale was developed and verified 3 levels as excellent, fair, and poor. Third, Assessment criteria and scale were investigated validity according to 2 round content validity ratio. Fourth, the evaluability level of rubric that inquired by pre-service primary teachers was identified convenience-level in the assessment context.

본 연구는 수업 포트폴리오 개발 사례 결과를 토대로 교수자의 수업 개선을 위한 수업 포트폴리오(teaching portfolio)의 개발 모형 및 평가준거(rubric)안을 제시하는 것을 목적으로 한다. 본 연구를 위해 대학 및 중고등학교 교수자 18명을 대상으로 2008학년도 1, 2학기동안 본인 담당 교과목을 중심으로 수업 포트폴리오 개발 일정에 따라 수업 포트폴리오를 개발토록 하였다. 수업 포트폴리오 개발 사례를 분석하기 위하여 질적 연구로 인터뷰와 양적 연구로 사전․사후 설문조사를 실시하였다. 인터뷰는 반구조화된 5가지 질문방식으로 이루어졌으며, 사전․사후설문조사는 총 22개 문항으로 결과 분석은 빈도분석과 대응표본 T검증을 실시하였다.수업 포트폴리오 개발 사례 결과를 토대로 교수자의 수업 개선을 위한 수업 포트폴리오 개발 모형안을 제시하였다. 본 수업 포트폴리오 개발 모형안은 Seldin(2004)이 제안한 수업 포트폴리오 개발 단계를 적용한 교과목(course) 포트폴리오 개발 모형으로, 수업 포트폴리오 구성요소별로 수업 포트폴리오 개발에 활용 가능한 자료들을 각 단계별로 제시하였다. 그리고 수업 포트폴리오 개발 단계에 근거하여 Hart(1994)가 제안한 평가 절차를 적용한 수업 포트폴리오 평가준거안을 마련하였다.본 연구를 통해 제시된 수업 포트폴리오 개발 모형 및 평가준거안은 초중고 및 대학교육 현장에서 교수자의 수업 개선과 평가뿐만 아니라 차후 초중등학교의 교원평가와 관련하여 교수자의 교수력을 향상하고 평가할 수 있는 질적 도구로도 활용 가능할 것으로 본다.

The purpose of this study is to suggest a tentative plan of the teaching portfolio development model and rubric for qualitative improvement of instruction in instructors. For this study, we analyzed the development process of the teaching portfolio to improve instruction in secondary and higher education. In this process, eighteen instructors participated in the development process of the teaching portfolio(a course portfolio) during the first and second term, 2008. During the development period of the teaching portfolio, we carried out qualitative research with an interview and pre/post questionnaire survey and quantitative research with frequency analysis, and T-test. Based on the analysis of the teaching portfolio development cases, we suggested a plan tentative plan of the teaching portfolio development model and rubric for developing and evaluating the teaching portfolio. According to a tentative plan of the teaching portfolio development model and rubric, five stages for teaching portfolio development were applied stages suggested by Seldin(2004), and rubric for the teaching portfolio evaluation was applied the evaluation criterion of Hart(1994). We expect that a tentative plan of these model and rubric for the development and evaluation of the teaching portfolio will be able to utilize the qualitative improvement and evaluation of instruction as well as the teacher evaluation in secondary education.

이 연구는 현대무용 경연에 대한 전문가의 서술형 평가 진술을 분석하여 평가 요소를 도출하고 그 구조적 특성을 탐색하는 데 목적이 있다. 이를 위해 2022년과 2023년 동아무용콩쿠르 현대무용 일반부 본선 진출자 28명의 공연 영상을 대상으로 전문가 4인의 평가 진술에 귀납적 내용분석을 적용하였다. 분석 결과 신체사용, 기술적 수행, 움직임 연결, 공간 활용, 음악성, 에너지 역동성, 표현성, 창의성/안무구성의 요소가 도출되었으며, 이들은 요소는 기술적, 예술적 표현, 안무 구성 영역으로 구분되었다. 에너지 역동성과 창의성/안무구성 요소는 기존 연구에서 다루어지지 않아 중요한 요소로 작용할 가능성을 시사한다. 본 연구는 실제 평가 언어를 기반으로 평가 요소를 도출하였다는 점에서 의의를 가지며, 향후 현대무용 평가 루브릭 개발을 위한 기초자료를 제공한다.

This study aims to derive evaluation elements and explore their structural characteristics by analyzing expert narrative evaluation statements from the general division finals of the Dong-A Dance Competition. Inductive content analysis was applied to evaluation statements from four experts based on performance videos of 28 finalists in contemporary dance (2022–2023), yielding 202 meaning units and eight evaluation elements: body use, technical execution, movement connectivity, spatial utilization, musicality, energy dynamics, expressiveness, and creativity/ choreographic composition. These elements were grouped into three domains—technical, artistic expression, and choreographic composition—and showed interactive and integrative characteristics. Notably, energy dynamics and creativity/choreographic composition emerged as previously underexplored elements, suggesting their significance as evaluative standards. This study provides empirical evidence based on actual evaluative language and offers foundational data for developing contemporary dance evaluation rubrics.

이 연구의 목적은 루브릭을 활용한 관찰평가 도구의 적용 사례 경험을 이해하는 데 있다. 연구대상은 경기도 화성시 A초등학교에서 15명 대상으로 설문지를 통하여 조사한 결과 연구목적에 적합한 교사 8명을 선정하여 면담을 실시하였으며, 이들 중에 연구에 의미가 있는 교사 3명을 최종 선정하였다. 루브릭을 활용한 관찰평가 도구를 구안하고, 이에 대한 타당성 확보와 연구 목적의 적합성을 점검하기 위해서 3차례의 예비연구를 실시하였으며 예비연구를 통해 완성된 루브릭을 활용한 관찰 평가 도구를 6차시 배드민턴 수업에 적용하여, 심층면담, 비디오 촬영, 수업의 서술적 관찰, 관련 문서자료를 통해 자료를 수집하였다. 수집된 자료는 사례 기록 분석, 귀납적 범주 분석을 통해 분석하였으며 평가의 실효성, 교육적 효과, 교사의 전문성으로 범주화하였다. 평가의 실용성은 경제적 평가, 생활통지표 활용의 최적 도구, 교육 관련자에게 주는 이로움의 주제로 분류하였고, 교육적 효과는 피드백 제공의 용이, 자율적 참여, 경기력 향상의 주제로 분류하였다. 교사의 전문성은 도구 제작 쉬움, 도구 제작 어려움, 빠르게 학생수준 파악의 주제로 분류하였다.

The purpose of this study was observed using the rubric assessment tools look at the examples are viewing. Suitable for research purposes, to 8 teachers, the interview was selected during the study, Hwaseong-si, Gyeonggi-A Elementary School to 15 students through questionnaire survey meaning that teachers in the study, 3 patients finalist. Development and observation rubric assessment tool, in order to check the suitability of the validity of security and research purposes for observation assessment tool completed the preliminary research through the rubrics, a preliminary study was conducted three rounds of six class apply the lessons to badminton, data were collected through in-depth interviews, shooting video, descriptive observation of lessons, and related documentation. Recorded on a case-by-case analysis of the collected data were analyzed through inductive category analysis, evaluation of effectiveness, educational effectiveness, and were categorized by the professionalism of teachers. Educational effectiveness evaluation of the practicality of the economic evaluation, the optimal tool life, take advantage of report cards, and that the benefits of education to a group of people, subjects were classified as easy to provide feedback to the subject of the voluntary participation, performance-enhancing classification. Professionalism of teachers authoring tool easy tool production difficulties, quickly to identify the subject of the student level were classified.

The current study aims to design The current study aims to design an analytic writing scale with reference to the TOEFL iBT® Scoring rubric from the Educational Testing Service (ETS) and to examine the reliability of the newly designed analytic rubric using English argumentative writing collected from 26 Korean undergraduate and graduate students. There are three main findings in this study: First, intra-rater reliability was examined among three raters showing a high correlation between the holistic and the analytic scorings. Second, inter-rater reliability was explored in terms of correlation coefficients, agreement rates (adjacent and perfect), Cohen’s Kappa coefficients, and Fleiss Kappa coefficients. In addition, the intraclass correlation coefficient (ICC) revealed a high correlation between the score on a new analytic rubric and the original holistic TOEFL score. Among the four rubric dimensions, ‘unity-progression-coherence’ and ‘language use’ showed relatively lower correlations than the other two dimensions (topic and task, organization and development). Also, the dimension that showed the highest correlation with the holistic ETS score is ‘organization and development.’ Moreover, ‘unity-progression-coherence’ contributed notably to the analytic assessment. A survey on raters’ perceptions of rubrics and scoring, and interviews suggested that they had challenges scoring based on the descriptors of two rubrics (analytic and holistic). This study has pedagogical implications for scoring writing, designing rubrics, and rater training.

본 연구의 목적은 교수적 루브릭 참조 자기평가가 통합된 장애학생의 수업참여행동과 비장애학생의 자기주도적 학습능력에 미치는 영향을 밝히는 것이었다. 실험집단은 A 초등학교에 통합된 5학년 지적장애 여학생 1명과 통합학급 비장애학생 14명이었고, 통제집단은 B 초등학교에 통합된 5학년 지적장애 여학생 1명과 통합학급 비장애학생 12명이었다. 독립변인은 국어과, 사회과, 과학과 수업에 적용된 교수적 루브릭 참조 자기평가이었고, 종속변인은 통합된 장애학생의 수업참여 행동과 비장애학생의 자기주도적 학습능력이었다. 장애학생의 수업참여행동의 변화는 상황간 중다간헐 기초선 설계를 적용하여 분석하였으며, 녹화된 비디오를 통해 목표행동의 발생 여부에 대한 관찰자료를 수집하였다. 연구결과 첫째, 교수적 루브릭 참조 자기평가를 적용한 결과, 초등 국어과, 사회과, 과학과 수업에 통합된 장애학생의 수업참여행동 발생률이 향상되었다. 둘째, 교수적 루브릭 참조 자기평가를 적용한 결과, 실험집단 비장애학생의 자기주도적 학습능력이 통제집단에 비해 통계적으로 유의미하게 향상되었다. 본 연구는 장애학생의 일반교육과정의 접근과 교육적 통합을 위한 교수방법으로서의 교수적 루브릭 참조 자기평가의 효과를 검증하였다는 점에서 그 의의가 있다고 할 수 있다.

The purpose of this study was to investigate the effect of an instructional rubric-referenced self-assessment on academic engagement behaviors of students with intellectual disabilities and self-directed learning abilities of nondisabled students in an inclusive elementary class. While the experimental group was composed of 5th-grade one girl with intellectual disabilities and 14 nondisabled students in an inclusive class, the control group was composed of 5th-grade one girl with intellectual disabilities and 12 nondisabled students in an inclusive class. The intervention was an instructional rubric-referenced self-assessment. The dependent variables were academic engagement behaviors of a student with intellectual disabilities and self-directed learning abilities of nondisabled students. While the research design for academic engagement behaviors of a student with intellectual disabilities was multiple probe across situation design, that for self-directed learning abilities of nondisabled students was a pre- and post-test control group design. The research results were as follows: (1) The instructional rubric-referenced self-assessment was effective in improving academic engagement behaviors of a student with disabilities in Korean language, social studies, and science; (2) There was a statistically significant difference between the experimental group and the control group on the self-directed learning abilities of nondisabled students.

본 연구는 대학도서관 환경에서 요구되는 사서의 AI 리터러시 역량을 체계적으로 규정하고, 이를 진단하기 위한 평가 루브릭을 개발․적용하는 데 목적이 있다. 이를 위해 ACRL(2025), UNESCO(2024), EDUCAUSE(2024) 등 주요 국제 표준과 국내외 선행연구를 분석하여 기술적 지식, 비판적 평가, 실천적 적용, 윤리적 실행의 네 가지 핵심 영역과 18개 세부 역량으로 구성된 AI 리터러시 프레임워크를 도출하였다. 개발된 루브릭은 42명의 대학도서관 사서를 대상으로 자기평가 방식으로 예비 적용되었으며, 탐색적 요인분석과 신뢰도 분석을 통해 도구의 구조 타당성과 내적 일관성을 검증하였다. 분석 결과, 사서들의 AI 리터러시 종합 수준은 기초 단계에 머물러 있었으며, 특히 윤리적 실행과 정책․규제 이해, 데이터 편향성 인식 등 책임 기반 역량이 가장 취약한 것으로 나타났다. 또한 AI 관련 교육 경험은 기술적 지식, 실천적 적용, 윤리적 실행 영역에서 유의한 차이를 보이며 실제 역량 향상에 긍정적 영향을 미치는 것으로 확인되었다. 본 연구는 대학도서관 사서의 AI 역량 진단을 위한 최초의 표준화된 평가 틀을 제시했다는 점에서 학술적․실무적 의의를 가지며, 향후 지속적인 실습 중심 교육체계 구축과 국가․기관 차원의 AI 리터러시 역량 표준 마련의 필요성을 제언한다.

This study aims to systematically define the AI literacy competencies required of academic librarians and to develop and implement an assessment rubric tailored to the academic library context. To this end, major international standards?including ACRL (2025), UNESCO (2024), and EDUCAUSE (2024)?as well as relevant domestic and international literature were reviewed to construct an AI literacy framework comprising four core domains (technical knowledge, critical evaluation, practical application, and ethical practice) and eighteen sub-competencies. The rubric developed in this study was pilot-tested through self-assessment with 42 academic librarians, and its structural validity and internal consistency were verified using exploratory factor analysis and reliability analysis. The results indicate that the participants’ overall AI literacy level remains at a basic stage, with particularly low performance in responsibility-oriented competencies such as ethical practice, understanding of AI-related policies and regulations, and awareness of data bias. Furthermore, prior AI-related training was found to exert a significant positive influence on competencies across technical knowledge, practical application, and ethical practice. This study provides the first standardized assessment framework for diagnosing AI literacy among academic librarians, offering both scholarly and practical contributions. Based on the findings, the study emphasizes the need to establish practice-oriented continuing education programs and to develop national and institutional standards for AI literacy in the library sector.

본 연구의 목적은 국내 대학도서관 발전계획을 분석하여 핵심 구성요소를 반영하고 있는지 점검하고 대학도서관발전계획 수립에 대한 개선방안을 모색하는 것이다. 이를 위해 외국 대학 및 도서관 평가 관련 연구를 통해 도출된 루브릭(Rubric) 평가기법을 활용하였다. 연구 대상은 QS 세계대학평가 및 THE 세계대학평가를 참고하여 국내 상위 15개 대학의 도서관을 선정하고, 발전계획의 핵심 구성요소를 얼마나 반영하고 있는지 평가하였다. 연구결과는 다음과 같다. 첫째, 대학도서관 발전계획을 평가한 결과, 구성요소 중 ‘목적’, ‘목표’, ‘실행계획’의 내용을 대부분 반영하고 있었으나 ‘사명’, ‘비전’에 취약점이 나타났다. 둘째, 일부 사립대학 도서관은 핵심 구성요소를 모두 포함하여 선진국 수준의 전략적 계획 차원으로 나아가고 있었다. 셋째, ‘목적’을 대부분의 대학도서관에서 명시하고 있었지만, 형식적인 기술과 연계성으로 한계를 보였다. 종합적인 평가에서는 최고점 15점 중 양호 12곳, 미흡 3곳으로 국내 대학도서관들의 발전계획은 대체로 ‘양호’한 수준으로 나타났다. 이에 대한 개선방안으로 ‘발전계획 수립을 위한 테스크포스 구성’, ‘발전계획 공개 및 홍보’, ‘사서 대상 발전계획 교육 강화’를 제언하였다.

The purpose of this study is to analyze domestic academic library development plans, check whether key components are reflected, and seek ways to improve the establishment of academic library development plans. To this end, a rubric evaluation technique derived from research related to evaluation of foreign universities and libraries was used. The libraries of the top 15 domestic universities were selected by referring to the QS World University Evaluation and THE World University Evaluation as the subjects of the study, and how much the core components of the development plan were reflected were evaluated. The results of the study are as follows. First, as a result of evaluating the university library development plan, most of the contents of ‘purpose’, ‘goal’, and ‘action plan’ were reflected, but vulnerabilities were found in ‘mission’ and ‘vision’. Second, some private academic libraries were moving toward strategic planning at the level of advanced countries, including all of the core components. Third, although most academic libraries specified ‘purpose’, it showed limitations due to perfunctory description and connection. In the comprehensive evaluation, out of the highest score of 15, 12 were good and 3 were poor, indicating that the development plans of domestic academic libraries were generally at a ‘good’ level. As an improvement measure, it was suggested to form a task force for development plan establishment, to disclose and promote development plans, and to strengthen education on development plans for librarians.

Purpose: This study was done to evaluate the Lasater Clinical Judgement Rubric for use with Korean nursing students. Methods: A methodological study was used to validate the rubric developed by Lasater to assess clinical judgment during nursing simulation. Participants were 34 nursing students at K University in Seoul. Between February and May, 2012, analysis was done of 91 video clips recording performance during simulation. Results: Findings showed reliability and validity of the rubric. For internal consistency, Cronbach‘s α score was .884 and intraclass correlation coefficient was .839, which established reliability. The rubric was validated using the exploratory factor analysis and content validity. The content validity score was 83%, establishing the appropriateness and readiness of the tool. Factor analysis showed that noticing, responding, and reflecting domains had Eigen values of 2.669, 1.991, and 2.912, respectively and were bound, but unlike the original tool in which four factors noticing, interpretation, responding, and reflecting domains were bound. Conclusion: Results of the study indicate that the rubric shows acceptable reliability and validity in Korean nursing students. This evaluation tool for nursing simulation allows nursing faculty to objectively evaluate students’ clinical judgment as well as students to reflect on their clinical judgment process during simulation.

이글에서는중등현장에서2015 개정교육과정에따른문학교육의과정중심 평가의양상을2019년1학기현장에서쓰인평가루브릭을통해살펴봤다. 천안 에있는중학교31곳의1학년평가계획서를자료로중등현장의과정중심평가가 이뤄지고있는과정을살폈다. 충남지역중학교1학년은자유학년제로학교수 준 교육과정이 운영되고 있으며, 평가는 지필평가 없이 수행평가 실시한다. 2019년천안지역내중학교중13개학교가과정중심평가를문면화하고있었으 며, 교육과정의 재구성에 따라 평가기준을 변용하여 제시한 경우17개교, 교육 부가제시하는핵심성취기준에따른평가기준을그대로제시한경우는9개교였 다. 이중2015 개정교육과정의성취기준을그대로평가에적용한경우는4학교 였다. 31개교중루브릭이외체크리스트나척도만으로설명된평가기준이나타 난 경우는 2개교였다. 많은 교사들이교육과정의성취기준을 중등현장의 개별성을고려하여 재조 직하고있었으며, 교수·학습 활동과 평가를 유기적으로 연계하는 가운데, 루브 릭을활용하고있었다. 이때루브릭은중등현장에서학습자와교사들에게성취 기준에도달하기까지의 안내적 기능을수행하고있었으며, 참평가로서의 문학 평가나, 문학능력의총체적평가가루브릭을통해이뤄지고있는점을확인할 수 있었다.

This article reviewed the aspect of the course-based evaluation of literary education, according to the 2015 revised curriculum at secondary school, through the evaluation rubric used in the field in the first semester of 2019. For this, the 7th-grade evaluation plans of 31 secondary schools in Cheonan were invested as the primary document. The first year of secondary school in Chungnam is a free-year system, and the evaluation is conducted without written evaluation. In 2019, 13 secondary schools in the Cheonan-si area were making a course-based evaluation in the evaluation plan. 17 schools were renovated the evaluation criteria and restructured the curriculum. Many teachers have reorganized the achievement standards of the curriculum in consideration of the individuality of the schools and utilized the rubric for linking teaching and learning activities and evaluation. In these cases, the rubric was performing a guiding function in the class on how to reach the achievement standards. Also, the literary evaluation as a true evaluation or the overall evaluation of literary ability is performed through the rubric.

연구의 배경 및 목적: 본 연구는 치위생학과 학생들의 전문직간 협업역량을 평가하기 위한 도구로써, 특히 보건 의료팀 팀워크 역량 평가 루브릭을 개발하고자 수행되었다. 치과위생사는 다양한 보건의료직종과 협업하여 환자 의 구강 및 전신건강을 관리하고 환자의 문제를 해결해야 하기에 협업역량이 중요하다. 그러나, 치위생학 교육에 서 이를 적절히 평가할 수 있는 평가도구는 부족한 실정이기에 본 연구에서는 보건의료팀 협업 역량 관련 문헌을 근거로 치위생 팀워크 역량 평가기준을 마련하는 것을 목표로 하였다. 연구방법: 치위생학과 학생들의 보건의료팀 협업역량에 관한 국내외 문헌을 고찰하여 핵심역량과 행동지표를 도 출하였다. 루브릭 개발 절차에 따라 6단계로 수행하였으며 기대하는 수준에 대한 명확한 정의, 핵심개념 결정, 루브릭의 유형결정, 핵심개념들에 대한 명확한 정의, 각 요소에 대한 수행준거 수립, 척도 점수를 개발하였다. 문 헌고찰을 통해 치과위생사에게 요구되는 전문직간 협업 4가지 핵심역량(가치와 윤리, 역할과 책임, 의사소통, 팀워 크)을 정의하고, 이 중 ‘팀워크’를 핵심개념으로 선정한 후 10개의 평가지표를 구성하였다. 10개의 평가지표는 지 식·기술·태도의 영역으로 분류하였다. 결과: 가치와 윤리, 역학과 책임, 의사소통, 팀워크에 대한 정의와 구체적인 행동지침을 제시하였다. 문헌고찰을 통해 정의한 보건의료팀 팀워크 역량을 치위생 역량에 맞도록 수정한 후 치위생 협업 역량으로 정의하였다. 팀워 크 중심의 10개 평가지표를 선정하고 영역별로 지식 3개, 기술 5개, 태도 2개로 분류하였다. 루브릭 평가안 개발 을 위하여 역량학습목표를 제시하였고, 10개의 지표를 탁월함, 발전 중, 초보자의 수행준거로 평가하기 위하여 각 지표마다 구체적 행동기술을 포함하도록 구성하였다. 결론: 본 연구를 통해 개발된 루브릭은 치위생 교육현장에서 학생들의 보건의료팀 팀워크 지식, 기술, 태도를 평 가하는데 활용할 수 있으며 교수피드백 및 자가평가서로써 교육적 가치가 있다고 판단된다. 개발된 루브릭 평가 도구는 학생의 자기평가 및 교육자의 교수설계에도 활용 가능하며, 향후 전문가 타당도와 신뢰도 검증을 통해 전 문직간 교육 프로그램과 연계한 적용 연구를 시행하고 도구의 효과성을 평가할 필요가 있다

Background: This study aimed to develop assessment criteria for teamwork competencies centered on dental hygiene practice, based on literature on collaborative competencies within healthcare teams. Methods: A review of domestic and international literature on collaborative competencies within healthcare teams was conducted to identify core competencies and behavioral indicators. The rubric development process consisted of six steps: clearly defining the expected level, determining core concepts, determining the rubric type, operationalizing the core concepts, establishing performance criteria for each element, and developing scale scores. Through a literature review, we defined four core competencies for interprofessional collaboration required of dental hygienists (values and ethics, roles and responsibilities, communication, and teamwork). Of these, "teamwork" was selected as the core concept and 10 evaluation indicators were developed. These 10 evaluation indicators were categorized into the domains of knowledge, skills, and attitude. Results: Definitions and specific behavioral guidelines for the four core competencies for interprofessional collaboration were presented. The healthcare teamwork competencies defined through the literature review were modified to align with dental hygiene competencies and defined as dental hygiene collaboration competencies. Ten evaluation indicators centered on teamwork were selected and categorized into three knowledge, five skills, and two attitudes. Competency learning objectives were presented to develop a rubric assessment plan. Each of the 10 indicators was designed to include specific behavioral skills, allowing for evaluation at the levels of excellence, development, and beginner. Conclusion: The rubric developed through this study can be used to assess students' knowledge, skills, and attitudes regarding teamwork in healthcare teams in dental hygiene education settings. It is considered to have educational value as a tool for teaching feedback and self-assessment. Future research is needed to assess the tool's effectiveness by linking it to interprofessional education programs through expert validation of its validity and reliability.

지금까지 많은 연구들에서 담화 능력은 수험자의 의사소통 능력을 판단하기 위한 중요한 구인으로 다루어져 왔다. 하지만 담화 능력은 언어 능력의 다른 부분인 문법이나 어휘 혹은 발음 등과 같이 모국어 화자의 발화 직관만으로 평가 기준을 명확하게 기술하기 힘들다. 그래서 지금까지 많은 평가들에서는 담화 능력을 모호하고 주관적인 용어를 사용하여 채점 기준을 기술하고, 그 기준을 사용하여 평가해 왔다. 본 연구에서는 담화 능력을 평가하는 데 있어서 이러한 문제점을 보완하기 위하여 Fulture(2011)가 제안한 수행기반채점표(performance Decision Tree: PDT) 방식의 채점기준표 개발 방안을 제안하는 데 그 목적이 있다. 본 연구는 이해용․이향(2015)과 이용․이해용(2018)의 후속 연구로 선행연구들에서 다루었던 ‘부탁하기’ 과제에서의 모국어 화자의 담화 구조와 담화 능력별 한국어 학습자들의 담화 특징을 기반으로, 먼저 채점자들의 채점 경향을 분석하고, 그 결과를 범주화, 단계화하여 PDT 방식의 채점표를 개발하였다. 본 연구에서 제안한 담화 능력 평가를 위한 PDT 방식의 채점기준표는 담화 능력을 평가하는 데 있어 모호함이나 주관성으로 인하여 나타날 수 있는 채점 신뢰도 문제를 해결하여 보다 타당한 채점기준표를 개발하는 데 기여할 수 있을 거라 본다.

Many researches have argued that discourse competence is a significant part of the communicative competences required for foreign learners. Accordingly, foreign language assessments treat discourse competence as an important construct for determining test takers' communicative competences. However, unlike for other linguistic competences, such as grammar, vocabulary, or pronunciation, it is difficult to present a clear grading scale for discourse competence that is based on the accuracy of native speakers on an absolute standard. As a result, many former assessments have used scoring rubrics with vague and subjective terms. To supplement these previous problems, this research presents a scoring rubric, based on the Performance Decision Tree method, and assesses native speakers’ discourse structures and foreign learners’ discourse characteristics per various levels of discourse competences in a REQUEST task. After conducting an additional analysis on graders’ grading tendencies, this study developed a performance-based scoring rubric by categorizing and sequencing the results. The Performance Decision Tree scoring rubric for discourse competence can contribute towards developing a more valid scoring rubric and solve the problem of scoring reliability, resulting from previous scoring rubrics’ vagueness and subjectivity.

본 연구는 치위생관리과정을 평가하기위한 루브릭평가도구를 적용하여 학습자의 만족도를 확인하여 학습 자와 교수자에게 실습교과의 평가도구로서 루브릭평가지가 긍정적인 영향을 미치는지 확인하고자 하였다. 부산광 역시에 소재한 D대학 3학년학생 총 42명을 대상으로 2023년 5월 4일부터 6월 16일까지 수업에 참여한 학생들에 관한 평가를 진행한 후 만족도를 조사하였다. 조사한 결과는 SPSS 26.0을 이용하여 통계분석하였다. 연구결과 신 뢰도 검증과 타당도 검증을 통해 도출된 루브릭평가지를 실제 교과과정에 적용해 본 결과 수업의 질을 향상하는 데 도움이 되는 평가도구임을 확인하였다. 또, 루브릭평가의 적용 후 학습만족도를 통해 평가도구가 학생들을 평 가하는데 있어 객관적이고, 학습효과를 향상시킬 수 있음을 확인하였다. 이를 통해 타 교과에서도 루브릭 개발을 시도할 수 있는 기반을 마련하였으며, 앞으로 많은 전공 교과목의 평가도구 개발과 검증을 위한 후속 연구가 계속 되어지길 제언한다.

This study attempted to check the satisfaction of learners by applying a rubric evaluation tool to evaluate the dental hygiene management process to see if the rubric evaluation paper had a positive effect on learners and instructors as an evaluation tool for practical subjects. A total of 42 students from D university located in Busan city were evaluated for the students who participated in the class from May 4 to Jun 16, 2023, and their satiscation was investigated. The survey results were statistically analyzed using SPSS 26.0. As a results of applying the rubric evaluation paper derived through reliability verification and validity verification to the actual curriculum, it was confirmed that it is an evaluation tool that helps improve the quality of classes. In addition, it was confirmed that the evaluation tool can be objective and improve the learning effect in evalution students through learning satisfaction after applying the rubric evaluation. This laid the foundation for attempting to develop rubric in other subjects, ans it is suggested that follow-up research will continue to deveolop and verify evaluation tools for many major subjects in the future.

본 연구에서는 일본어 교육에서 학생 참여형 수업을 실시하기 위한 교수 방법이나 전공과 목에서 루브릭 평가의 표준모델 도입 제안의 일환으로서 3가지 전공과목의 루브릭 평가 실천 보고 및 고찰을 하였다. 고찰의 결과는 다음과 같다. 　 프레젠테이션(presentation)의 루브릭(Rubric) 평가안을 제시함으로서 교수자에게 맡겨지기 쉬운 평가(評価)를 학생들과 공유가 가능하게 되었다. 또한, 학생 각자가 스스로 평가 기준을 의식하고 수업 활동에 능동적으로 참여함으로서, 자율적인 학습을 촉진할 뿐 아니라 타인의 발표를 객관적으로 평가할 수 있는 힘을 키우는 것으로도 이어졌다. 그리고 프레젠테이션 평 가에서 루브릭의 평가 항목 및 기준의 명확화, 루브릭이 학습 동기부여나 학습 목표 달성에 효과적이다고 말할 수 있다. 본 연구에서 전공일본어 교육에 루브릭 평가 표준 모델을 제안하였다. 이것이 평가의 주된 방향으로 활용이 가능하지만, 각 전공 교과과목의 특성을 반영하고 학습 목표와 학습자의 눈 높이에 맞추는 루브릭 평가안을 실천/수정해 갈 필요가 있다. 향후 과제로서 학습자끼리 행한 동료평가 결과 및 자기 평가도 분석하여 명확한 평가를 하기 위한 지도법이나 루브릭의 평가 기준을 상세하게 만들 필요가 있다.

In this study, we examined the practice of rubric assessment in three major subjects in the discipline of Japanese Education in order to find the essential instructional methods that would enhance the interactive classes in Japanese Education. The purpose of this study is to suggest the proposal of a standard-model of rubric assessment in major subjects. As a result this study identifies the essential parts for making rubric models. Firstly, by showing rubric for a presentation, it was possible to share the assessments with learners that teachers/instructors tend to entrust all the time . Secondly, it was able to encourage learners' autonomy and to foster the ability to evaluate other people's presentation objectively. Thirdly, the study shows that the rubric assessments encouraged learners motivations because of the rubric assessments items and criteria in presentation evaluation clarified by this study. Thus, this study suggests a standard-model of rubric assessment for major courses in Japanese Education. This model can be used for evaluating learners' performance, especially in presentation. However, it is important to keep modifying the rubric items and criteria by considering the class contents, characteristics and goals so that these assessments can adjust class goals and learners' perspectives . As future tasks, by analyzing peer-evaluations, this study points to the further efforts to make instructional methods for minute assessments and to consider flexible rubric criteria.

이 연구는 실과 i목제품 만들기/ 단원에서 학습자 중심의 루브릭을 적용하였을 때 학생들의 학업성취도에 미치는 효과를 구명하는데 목적을 두었다. 이 연구의 목적을 달성하기 위하여 학습자 중심 루브릭을 적용하기 위한 수업 주제로 ‘목제품 만들기’ 단원을 선정하고, 선행연구를 통하여 루브릭의 개념과 효과, 학습자 중심 루브릭을 개발하는 과정을 구안하였다. 학습자 중심 루브럭을 개발하는 절차에 따라 학습자 중심 루브릭을 개발하고 수행평가 과정에 따라 6학년 2개반을 실험집단과 통제집단으로 구분하여 학업성취도에 미치는 효과를 분석하였다. 이 연구를 통하여 얻어진 결과 및 결론은 첫째, 학습자 중심 루브릭의 개발 절차와 루브릭의 개발 요소들을 기초로 하여 교사와 학생 간 협상과정을 통하여 ‘목제품 만들기 단원’의 수행평가에 적절한 학습자 중심 루브릭이 개발되었다. 둘째, 학습자 중심 루브릭이 학업성취도에 긍정적인 효과를 미쳤다. 학습자 중심 루브릭은 학생들의 성취의욕과 동기를 부여했기 때문에 학업성취도에 긍정적인 영향을 미친 것으로 해석된다.

This study aims to comprehend the effects of student-based Rubric for 'woodworking' unit on the students' academic achievement. To achieve this goal, the 'woodworking' unit was selected as the topic of lesson for applying the student-based Rubric, and the process to develop the concept and effects of Rubric and the student-based Rubric was planned. In the experimental group, the student-based Rubric through a process of negotiation between teachers and students was applied and the made student-based Rubric was provided to the control group. In this study, applying to student-based Rubric and the control group was created to propose student-based Rubric. In this study, a post control group design model was applied for designing post-experimental control group design was applied to design models as experimental design. The conclusion of the results of this study are as follows. First, the student-based Rubric which can be applied to the performance assessment of the 'woodworking' unit based on the development process of the student-based Rubric and the development elements of Rubric was developed. This Rubric analyzes the 'woodworking' unit and it was developed through the negotiation process with teachers and students. Second, the score of academic achievement of experimental group that the student-based Rubric was applied by 'woodworking' unit was higher than the score of the control group. The student-based Rubric had positive effects on the students' academic achievement. Namely, the student-based Rubric was developed through the negotiation process between teachers and students, so the students' motivation and inducement can be obtained.

본 연구는 학습자 특성을 고려한 교사의 수행평가기준 선택 및 개발을 돕기 위한 툴의 설계 및 개 발을 목적으로 한다. 본 연구에서는 데이터마이닝의 분류 및 연관규칙 탐사 기법을 적용하여 교사의 선택 경향과 학생의 특성에 따른 수행평가 유형을 분석하였으며, 이를 통하여 기존 루브릭의 활용 및 신규개발에 대한 적용 방안을 제공하였다. 학습자의 환경, 관심 및 능력을 고려한 수행평가기준의 개 발 및 활용은 데이터마이닝의 “분류”를 통한 학습자 중심의 루브릭 적용으로 가능하다. 또한 교사의 학습영역별로 축적된 루브릭 선택 성향을 연관규칙을 통해 추출하여 교수자의 루브릭 선택을 지원함 으로써 수행평가에 소요되는 노력과 시간을 경감시키는 효과가 있다. 수행평가나 루브릭 간의 연관성 과 학생의 특성 및 성취도에 따라 수행평가를 분류하는 본 프로그램은 교육행정 정보시스템(National Education Information System; NEIS)의 수행평가 요소와 연계하여 교수자의 루브릭 선택, 변경 및 생성을 지원한다.

In this study, we designed and developed a tool to help teachers select and develop effective performance assessment criteria considering characteristics of individual learners. Using this tool, we can analyze preferences of teachers and characteristics of students for each rubric by exploring the classification and association rules through data mining. Those findings can give us guidelines and insights for the development and the selection of performance assessment criteria. The classification rules found are used for the learner-centered evaluation reflecting learners' interests, capabilities, and circumstances. Association rules found are utilized for analyzing teachers' preference, which enable to reduce time and efforts for the development and selection of rubric. Also, this tool supports creation, change, and selection of teachers' rubric linked with the performance assessment of NEIS(National Education Information System).