한 교육 평가 기관에서 표준화된 논술 시험을 평가할 5명의 평가자를 고용합니다. 각 평가자는 교육을 완료하기 위해 표준 등급에 따라 일관성 있게 논술을 평가할 수 있어야 합니다. 각 평가자는 알려진 표준 등급이 있는 52개의 논술을 평가합니다.
이 데이터를 사용하여 계수형 합치도 분석을 시연할 수 있습니다.데이터에는 각 표본에 대한 알려진 표준이 포함되어 있어서 테스트 엔지니어는 등급의 일관성과 정확성을 다른 평가자는 물론 표준과도 비교하여 평가할 수 있습니다.
워크시트 열 | 설명 |
---|---|
평가자 | 논술을 평가하는 평가자의 이름: 성민, 문영, 해진, 두진, 현민 |
표본 | 논술(표본) 식별자: 1 - 52 |
등급 | 논술 표본에 대해 평가자가 매긴 등급: -2, -1, 0, 1, 2 |
표준 | 논술 표본에 대해 알려진 표준 등급: -2, -1, 0, 1, 2 |