계수형 합치도 분석

섬유 날염 회사의 직물 평가자들은 면직물의 날염 품질에 대한 등급을 1-5점으로 매깁니다. 이 품질 엔지니어는 날염 품질에 대해 평가자가 매긴 등급의 일관성과 정확성을 평가하려고 합니다. 엔지니어는 평가자 네 명에게 직물 표본 50개의 날염 품질에 대해 랜덤 순서로 두 번씩 등급을 매기도록 요청합니다.

데이터에는 각 표본에 대한 알려진 표준이 포함되어 있어서 품질 엔지니어는 등급의 일관성과 정확성을 다른 평가자는 물론 표준과도 비교하여 평가할 수 있습니다.

  1. 표본 데이터를 엽니다 섬유날염품질.MTW.
  2. 통계분석 > 품질 도구 > 계수형 합치도 분석을 선택합니다.
  3. 데이터 배열 형식에서 속성 열를 선택하고 반응를 입력합니다.
  4. 표본표본을 입력합니다.
  5. 평가자평가자을 입력합니다.
  6. 알려진 표준/속성표준을 입력합니다.
  7. 계수형 데이터 범주가 정렬됨을 선택합니다.
  8. 확인을(를) 클릭합니다.

결과 해석

평가자 내부 표
각 평가자가 각 표본에 대해 두 개 이상의 등급을 제공하기 때문에, 엔지니어는 각 평가자의 일관성을 평가할 수 있습니다.
은혜의 100%에서 우진의 86%에 이르기까지 모든 평가자의 합치율이 높습니다.
α = 0.05에서 Fleiss의 카파 통계량에 대한 p-값이 모든 평가자 및 모든 반응에 대해 0.0000입니다. 그러므로, 엔지니어는 합치가 우연만에 의한 것이라는 귀무 가설을 기각합니다.
이 예의 등급이 순서형이기 때문에 엔지니어는 Kendall의 일관성 계수를 평가합니다. 모든 평가자에 대한 Kendall 일치성 계수의 범위가 0.98446과 1.000 사이로, 이는 높은 합치도 수준을 나타냅니다.
각 평가자 대 표준 표
각 표본에 대해 알려진 표준이 있기 때문에 엔지니어는 각 평가자 등급의 정확성과 일관성을 평가할 수 있습니다.
각 평가자가 50개의 직물 표본에 대해 등급을 매겼습니다(# 검사됨). 은혜는 모든 시행에서 47개의 표본을 정확하게 검사하여(# 일치됨) 94%의 합치율을 보였습니다. 우진은 모든 시행에서 41개의 부품을 정확하게 검사하여 82%의 합치율을 보였습니다.
α = 0.05에서 Fleiss의 카파에 대한 p-값이 모든 평가자 및 모든 반응에 대해 0.0000입니다. 그러므로, 엔지니어는 합치가 우연만에 의한 것이라는 귀무 가설을 기각합니다.
모든 평가자에 대한 Kendall 일치성 계수의 범위가 0.951863과 0.975168 사이로, 이 수치는 표준과의 높은 합치도 수준을 나타냅니다.
평가자 간 표
평가자 간 표는 50개 중 37개의 표본에 대해 평가자의 등급이 합치한다는 것을 보여줍니다.
0.881705의 전체 카파 값은 평가자 간 등급의 절대 합치도 수준이 높다는 것을 나타냅니다. Kendall의 일치성 계수는 0.976681로, 강한 연관성이 있음을 나타냅니다.
평가자 간 통계량은 평가자의 등급을 표준과 비교하지 않습니다. 평가자의 등급에 일관성이 있어도 이 통계량은 등급이 올바른지 여부를 나타내지 않습니다.
모든 평가자 대 표준 표
각 표본에 대해 알려진 표준이 있기 때문에 엔지니어는 모든 평가자 등급의 정확성과 일관성을 평가할 수 있습니다.
모든 평가자의 등급 50개 중 37개가 알려진 표준과 합치되며, 합치율은 74.0%입니다.
0.912082의 전체 카파 값은 평가자의 등급과 표준 간의 절대 합치도 수준이 높다는 것을 나타냅니다. Kendall의 일치성 계수는 0.965563으로, 강한 연관성이 있음을 나타냅니다.
모든 평가자 대 표준 통계량은 평가자의 등급을 표준과 비교합니다. 엔지니어는 평가자가 부여한 등급이 일관되고 정확하다는 결론을 내릴 수 있습니다.
참고

결과의 p-값 0.0000은 반올림되었습니다. 그러나 p-값이 매우 작고 0.00005보다 작다는 결론을 안전하게 내릴 수 있습니다.

반응에 대한 계수형 합치도 분석

평가자 내부

평가 합치도 평가자 # 검사됨 # 일치됨 백분율 95% CI 은혜 50 50 100.00 (94.18, 100.00) 병규 50 48 96.00 (86.29, 99.51) 우진 50 43 86.00 (73.26, 94.18) 민수 50 45 90.00 (78.19, 96.67) # 일치됨: 평가자의 평가가 시행 전반에 걸쳐 일치합니다.
Fleiss의 카파 통계량 평가자 반응 카파 SE 카파 Z P(대 > 0) 은혜 1 1.00000 0.141421 7.0711 0.0000 2 1.00000 0.141421 7.0711 0.0000 3 1.00000 0.141421 7.0711 0.0000 4 1.00000 0.141421 7.0711 0.0000 5 1.00000 0.141421 7.0711 0.0000 전체 1.00000 0.071052 14.0741 0.0000 병규 1 1.00000 0.141421 7.0711 0.0000 2 0.89605 0.141421 6.3360 0.0000 3 0.86450 0.141421 6.1129 0.0000 4 1.00000 0.141421 7.0711 0.0000 5 1.00000 0.141421 7.0711 0.0000 전체 0.94965 0.071401 13.3002 0.0000 우진 1 0.83060 0.141421 5.8733 0.0000 2 0.84000 0.141421 5.9397 0.0000 3 0.70238 0.141421 4.9666 0.0000 4 0.70238 0.141421 4.9666 0.0000 5 1.00000 0.141421 7.0711 0.0000 전체 0.82354 0.071591 11.5034 0.0000 민수 1 1.00000 0.141421 7.0711 0.0000 2 0.83060 0.141421 5.8733 0.0000 3 0.81917 0.141421 5.7924 0.0000 4 0.86450 0.141421 6.1129 0.0000 5 0.86450 0.141421 6.1129 0.0000 전체 0.87472 0.070945 12.3295 0.0000
Kendall의 일치성 계수 평가자 계수 카이 - 제곱 DF P 은혜 1.00000 98.0000 49 0.0000 병규 0.99448 97.4587 49 0.0000 우진 0.98446 96.4769 49 0.0001 민수 0.98700 96.7256 49 0.0001

각 평가자 대 표준

평가 합치도 평가자 # 검사됨 # 일치됨 백분율 95% CI 은혜 50 47 94.00 (83.45, 98.75) 병규 50 46 92.00 (80.77, 97.78) 우진 50 41 82.00 (68.56, 91.42) 민수 50 45 90.00 (78.19, 96.67) # 일치됨: 시행 전반에 대한 평가자의 평가가 알려진 표준과 일치합니다.
Fleiss의 카파 통계량 평가자 반응 카파 SE 카파 Z P(대 > 0) 은혜 1 1.00000 0.100000 10.0000 0.0000 2 0.83060 0.100000 8.3060 0.0000 3 0.81917 0.100000 8.1917 0.0000 4 1.00000 0.100000 10.0000 0.0000 5 1.00000 0.100000 10.0000 0.0000 전체 0.92476 0.050257 18.4006 0.0000 병규 1 1.00000 0.100000 10.0000 0.0000 2 0.83838 0.100000 8.3838 0.0000 3 0.80725 0.100000 8.0725 0.0000 4 1.00000 0.100000 10.0000 0.0000 5 1.00000 0.100000 10.0000 0.0000 전체 0.92462 0.050396 18.3473 0.0000 우진 1 0.91159 0.100000 9.1159 0.0000 2 0.81035 0.100000 8.1035 0.0000 3 0.72619 0.100000 7.2619 0.0000 4 0.84919 0.100000 8.4919 0.0000 5 1.00000 0.100000 10.0000 0.0000 전체 0.86163 0.050500 17.0622 0.0000 민수 1 1.00000 0.100000 10.0000 0.0000 2 0.91694 0.100000 9.1694 0.0000 3 0.90736 0.100000 9.0736 0.0000 4 0.92913 0.100000 9.2913 0.0000 5 0.93502 0.100000 9.3502 0.0000 전체 0.93732 0.050211 18.6674 0.0000
Kendall의 상관 계수 평가자 계수 SE 계수 Z P 은혜 0.967386 0.0690066 14.0128 0.0000 병규 0.967835 0.0690066 14.0193 0.0000 우진 0.951863 0.0690066 13.7879 0.0000 민수 0.975168 0.0690066 14.1256 0.0000

평가자 사이

평가 합치도 # 검사됨 # 일치됨 백분율 95% CI 50 37 74.00 (59.66, 85.37) # 일치됨: 모든 평가자의 평가가 서로 일치합니다.
Fleiss의 카파 통계량 반응 카파 SE 카파 Z P(대 > 0) 1 0.954392 0.0267261 35.7101 0.0000 2 0.827694 0.0267261 30.9695 0.0000 3 0.772541 0.0267261 28.9058 0.0000 4 0.891127 0.0267261 33.3429 0.0000 5 0.968148 0.0267261 36.2248 0.0000 전체 0.881705 0.0134362 65.6218 0.0000
Kendall의 일치성 계수 계수 카이 - 제곱 DF P 0.976681 382.859 49 0.0000

모든 평가자 대 표준

평가 합치도 # 검사됨 # 일치됨 백분율 95% CI 50 37 74.00 (59.66, 85.37) # 일치됨: 모든 평가자의 평가가 알려진 표준과 일치합니다.
Fleiss의 카파 통계량 반응 카파 SE 카파 Z P(대 > 0) 1 0.977897 0.0500000 19.5579 0.0000 2 0.849068 0.0500000 16.9814 0.0000 3 0.814992 0.0500000 16.2998 0.0000 4 0.944580 0.0500000 18.8916 0.0000 5 0.983756 0.0500000 19.6751 0.0000 전체 0.912082 0.0251705 36.2362 0.0000
Kendall의 상관 계수 계수 SE 계수 Z P 0.965563 0.0345033 27.9817 0.0000