객관도3

객관도(Objectivity)는 쉽게 말해 '채점자의 신뢰도'이다. 결과를 누가 채점하더라도 얼마나 일관된 점수가 나오느냐가 바로 객관도라고 할 수 있다. 1. 객관도의 두 가지 측면 객관도는 크게 두 가지 방향에서 검토됩니다. - 평가자 간 객관도 (Inter-rater Reliability): 여러 명의 채점자가 동일한 답안지를 채점했을 때, 그 점수들이 얼마나 서로 일치하는지를 나타냅니다. - 평가자 내 객관도 (Intra-rater Reliability): 한 명의 채점자가 동일한 답안지를 시간 간격을 두고 여러 번 채점했을 때, 점수가 얼마나 일관되게 유지되는지를 나타냅니다. (예: 아침에 채점할 때와 밤에 피곤할 때의 점수가 같아야 함) 2. 객관도를 높이는 방법 객관도가 낮으면 평가의 공정성이 훼손되므로, 이를 높이기 위해 다음과 같은 노력이 필요합니다. - 채점 기준의 구체화 (루브릭 활용): 모호한 기준 대신 '어떤 내용이 포함되면 몇 점' 식의 상세한 채점 기준표(Rubric)를 미리 작성합니다. - 공동 채점 및 재검토: 여러 명이 함께 채점하고 의견을 조율하거나, 무작위로 추출하여 재채점을 실시합니다. - 블라인드 채점: 채점자가 학생의 이름이나 배경 정보를 알 수 없게 하여 선입견(후광 효과)을 방지합니다. - 문항별 채점: 한 학생의 1번부터 10번까지를 쭉 채점하는 것이 아니라, 모든 학생의 1번 문항만 먼저 채점하는 방식입니다. (앞 문항의 인상이 뒤 문항 채점에 영향을 주는 것을 막기 위함)