섬유 날염 회사의 직물 평가자들은 면직물의 날염 품질에 대한 등급을 1-5점으로 매깁니다. 이 품질 엔지니어는 날염 품질에 대해 평가자가 매긴 등급의 일관성과 정확성을 평가하려고 합니다. 엔지니어는 평가자 네 명에게 직물 표본 50개의 날염 품질에 대해 랜덤 순서로 두 번씩 등급을 매기도록 요청합니다.
데이터에는 각 표본에 대한 알려진 표준이 포함되어 있어서 품질 엔지니어는 등급의 일관성과 정확성을 다른 평가자는 물론 표준과도 비교하여 평가할 수 있습니다.
- 표본 데이터를 엽니다 섬유날염품질.MWX.
- 을 선택합니다.
- 데이터 배열 형식에서 속성 열를 선택하고 반응를 입력합니다.
- 표본에 표본을 입력합니다.
- 평가자에 평가자을 입력합니다.
- 알려진 표준/속성에 표준을 입력합니다.
- 계수형 데이터 범주가 정렬됨을 선택합니다.
- 확인을(를) 클릭합니다.
결과 해석
- 평가자 내부 표
- 각 평가자가 각 표본에 대해 두 개 이상의 등급을 제공하기 때문에, 엔지니어는 각 평가자의 일관성을 평가할 수 있습니다.
- 각 평가자 대 표준 표
- 각 표본에 대해 알려진 표준이 있기 때문에 엔지니어는 각 평가자 등급의 정확성과 일관성을 평가할 수 있습니다.
- 평가자 간 표
- 평가자 간 표는 50개 중 37개의 표본에 대해 평가자의 등급이 합치한다는 것을 보여줍니다.
- 모든 평가자 대 표준 표
- 각 표본에 대해 알려진 표준이 있기 때문에 엔지니어는 모든 평가자 등급의 정확성과 일관성을 평가할 수 있습니다.
참고
결과의 p-값 0.0000은 반올림되었습니다. 그러나 p-값이 매우 작고 0.00005보다 작다는 결론을 안전하게 내릴 수 있습니다.
평가 합치도
| 평가자 | # 검사됨 | # 일치됨 | 백분율 | 95% CI |
|---|---|---|---|---|
| 은혜 | 50 | 50 | 100.00 | (94.18, 100.00) |
| 병규 | 50 | 48 | 96.00 | (86.29, 99.51) |
| 우진 | 50 | 43 | 86.00 | (73.26, 94.18) |
| 민수 | 50 | 45 | 90.00 | (78.19, 96.67) |
Fleiss의 카파 통계량
| 평가자 | 반응 | 카파 | SE 카파 | Z | P(대 > 0) |
|---|---|---|---|---|---|
| 은혜 | 1 | 1.00000 | 0.141421 | 7.0711 | 0.0000 |
| 2 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 3 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 4 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 5 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 전체 | 1.00000 | 0.071052 | 14.0741 | 0.0000 | |
| 병규 | 1 | 1.00000 | 0.141421 | 7.0711 | 0.0000 |
| 2 | 0.89605 | 0.141421 | 6.3360 | 0.0000 | |
| 3 | 0.86450 | 0.141421 | 6.1129 | 0.0000 | |
| 4 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 5 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 전체 | 0.94965 | 0.071401 | 13.3002 | 0.0000 | |
| 우진 | 1 | 0.83060 | 0.141421 | 5.8733 | 0.0000 |
| 2 | 0.84000 | 0.141421 | 5.9397 | 0.0000 | |
| 3 | 0.70238 | 0.141421 | 4.9666 | 0.0000 | |
| 4 | 0.70238 | 0.141421 | 4.9666 | 0.0000 | |
| 5 | 1.00000 | 0.141421 | 7.0711 | 0.0000 | |
| 전체 | 0.82354 | 0.071591 | 11.5034 | 0.0000 | |
| 민수 | 1 | 1.00000 | 0.141421 | 7.0711 | 0.0000 |
| 2 | 0.83060 | 0.141421 | 5.8733 | 0.0000 | |
| 3 | 0.81917 | 0.141421 | 5.7924 | 0.0000 | |
| 4 | 0.86450 | 0.141421 | 6.1129 | 0.0000 | |
| 5 | 0.86450 | 0.141421 | 6.1129 | 0.0000 | |
| 전체 | 0.87472 | 0.070945 | 12.3295 | 0.0000 |
Kendall의 일치성 계수
| 평가자 | 계수 | 카이 - 제곱 | DF | P |
|---|---|---|---|---|
| 은혜 | 1.00000 | 98.0000 | 49 | 0.0000 |
| 병규 | 0.99448 | 97.4587 | 49 | 0.0000 |
| 우진 | 0.98446 | 96.4769 | 49 | 0.0001 |
| 민수 | 0.98700 | 96.7256 | 49 | 0.0001 |
평가 합치도
| 평가자 | # 검사됨 | # 일치됨 | 백분율 | 95% CI |
|---|---|---|---|---|
| 은혜 | 50 | 47 | 94.00 | (83.45, 98.75) |
| 병규 | 50 | 46 | 92.00 | (80.77, 97.78) |
| 우진 | 50 | 41 | 82.00 | (68.56, 91.42) |
| 민수 | 50 | 45 | 90.00 | (78.19, 96.67) |
Fleiss의 카파 통계량
| 평가자 | 반응 | 카파 | SE 카파 | Z | P(대 > 0) |
|---|---|---|---|---|---|
| 은혜 | 1 | 1.00000 | 0.100000 | 10.0000 | 0.0000 |
| 2 | 0.83060 | 0.100000 | 8.3060 | 0.0000 | |
| 3 | 0.81917 | 0.100000 | 8.1917 | 0.0000 | |
| 4 | 1.00000 | 0.100000 | 10.0000 | 0.0000 | |
| 5 | 1.00000 | 0.100000 | 10.0000 | 0.0000 | |
| 전체 | 0.92476 | 0.050257 | 18.4006 | 0.0000 | |
| 병규 | 1 | 1.00000 | 0.100000 | 10.0000 | 0.0000 |
| 2 | 0.83838 | 0.100000 | 8.3838 | 0.0000 | |
| 3 | 0.80725 | 0.100000 | 8.0725 | 0.0000 | |
| 4 | 1.00000 | 0.100000 | 10.0000 | 0.0000 | |
| 5 | 1.00000 | 0.100000 | 10.0000 | 0.0000 | |
| 전체 | 0.92462 | 0.050396 | 18.3473 | 0.0000 | |
| 우진 | 1 | 0.91159 | 0.100000 | 9.1159 | 0.0000 |
| 2 | 0.81035 | 0.100000 | 8.1035 | 0.0000 | |
| 3 | 0.72619 | 0.100000 | 7.2619 | 0.0000 | |
| 4 | 0.84919 | 0.100000 | 8.4919 | 0.0000 | |
| 5 | 1.00000 | 0.100000 | 10.0000 | 0.0000 | |
| 전체 | 0.86163 | 0.050500 | 17.0622 | 0.0000 | |
| 민수 | 1 | 1.00000 | 0.100000 | 10.0000 | 0.0000 |
| 2 | 0.91694 | 0.100000 | 9.1694 | 0.0000 | |
| 3 | 0.90736 | 0.100000 | 9.0736 | 0.0000 | |
| 4 | 0.92913 | 0.100000 | 9.2913 | 0.0000 | |
| 5 | 0.93502 | 0.100000 | 9.3502 | 0.0000 | |
| 전체 | 0.93732 | 0.050211 | 18.6674 | 0.0000 |
Kendall의 상관 계수
| 평가자 | 계수 | SE 계수 | Z | P |
|---|---|---|---|---|
| 은혜 | 0.967386 | 0.0690066 | 14.0128 | 0.0000 |
| 병규 | 0.967835 | 0.0690066 | 14.0193 | 0.0000 |
| 우진 | 0.951863 | 0.0690066 | 13.7879 | 0.0000 |
| 민수 | 0.975168 | 0.0690066 | 14.1256 | 0.0000 |
평가 합치도
| # 검사됨 | # 일치됨 | 백분율 | 95% CI |
|---|---|---|---|
| 50 | 37 | 74.00 | (59.66, 85.37) |
Fleiss의 카파 통계량
| 반응 | 카파 | SE 카파 | Z | P(대 > 0) |
|---|---|---|---|---|
| 1 | 0.954392 | 0.0267261 | 35.7101 | 0.0000 |
| 2 | 0.827694 | 0.0267261 | 30.9695 | 0.0000 |
| 3 | 0.772541 | 0.0267261 | 28.9058 | 0.0000 |
| 4 | 0.891127 | 0.0267261 | 33.3429 | 0.0000 |
| 5 | 0.968148 | 0.0267261 | 36.2248 | 0.0000 |
| 전체 | 0.881705 | 0.0134362 | 65.6218 | 0.0000 |
Kendall의 일치성 계수
| 계수 | 카이 - 제곱 | DF | P |
|---|---|---|---|
| 0.976681 | 382.859 | 49 | 0.0000 |
평가 합치도
| # 검사됨 | # 일치됨 | 백분율 | 95% CI |
|---|---|---|---|
| 50 | 37 | 74.00 | (59.66, 85.37) |
Fleiss의 카파 통계량
| 반응 | 카파 | SE 카파 | Z | P(대 > 0) |
|---|---|---|---|---|
| 1 | 0.977897 | 0.0500000 | 19.5579 | 0.0000 |
| 2 | 0.849068 | 0.0500000 | 16.9814 | 0.0000 |
| 3 | 0.814992 | 0.0500000 | 16.2998 | 0.0000 |
| 4 | 0.944580 | 0.0500000 | 18.8916 | 0.0000 |
| 5 | 0.983756 | 0.0500000 | 19.6751 | 0.0000 |
| 전체 | 0.912082 | 0.0251705 | 36.2362 | 0.0000 |
Kendall의 상관 계수
| 계수 | SE 계수 | Z | P |
|---|---|---|---|
| 0.965563 | 0.0345033 | 27.9817 | 0.0000 |
