Exemplo de Análise de concordância por atributos

Avaliadores de tecidos em uma indústria de estamparia avaliam a qualidade da estamparia em algodão em uma escala de 1 a 5 pontos. O engenheiro de qualidade deseja avaliar a consistência e a exatidão das classificações dos avaliadores. O engenheiro pede que quatro avaliadores classifiquem a qualidade da estamparia em 50 amostras de tecidos duas vezes, em ordem aleatória.

Como os dados incluem um padrão conhecido para cada amostra, o engenheiro de qualidade pode avaliar a consistência e a exatidão das classificações em comparação com o padrão, bem como com outros avaliadores.

  1. Abra os dados amostrais, QualidadeDaEstamparia.MTW.
  2. Selecione Estat > Ferramentas da Qualidade > Análise de concordância por atributos.
  3. Em Dados organizados como, selecione Coluna de atributoe insira Resposta.
  4. Em Amostras, insira Amostra.
  5. Em Avaliadores, insira Avaliador.
  6. Em Padrão/atributo conhecido, insira Padrão.
  7. Selecione As categorias dos dados do atributo são ordenadas.
  8. Clique em OK.

Interpretar os resultados

Tabela Entre Avaliadores
Como cada avaliador fornece duas ou mais classificações para cada amostra, o engenheiro pode avaliar a consistência de cada avaliador.
Todos os avaliadores têm boas taxas de correspondência, de Amanda com 100% para Eric com 86%.
O valor-p para estatística kappa de Fleiss é 0,0000 para todos os avaliadores e todas as respostas, com α = 0,05. Por isso, o engenheiro rejeita a hipótese nula de que a concordância é devida somente ao acaso.
Como este exemplo tem classificações ordinais, o engenheiro examina o coeficiente de concordância de Kendall. O coeficiente de concordância de Kendall para todos os avaliadores varia entre 0,98446 e 1,000, o que indica um alto nível de concordância.
Tabela Cada avaliador x padrão
Como não há um padrão conhecido para cada amostra, o engenheiro pode avaliar a exatidão e a consistência de cada classificação do avaliador.
Cada avaliador classificou 50 amostras de tecido (nº de inspecionados). Amanda mediu corretamente 47 amostras em todos os ensaios (nº de correspondências), 94% corresponderam. Eric mediu corretamente 41 amostras em todos os ensaios, 82% corresponderam.
O valor de p para kappa de Fleiss é 0,0000 para todos os avaliadores e todas as respostas, com α = 0,05. Por isso, o engenheiro rejeita a hipótese nula de que a concordância é devida somente ao acaso.
Coeficiente de correlação de Kendall para todos os avaliadores varia entre 0,951863 e 0,975168, o que confirma o alto nível de concordância com o padrão.
Tabela Entre avaliadores
A tabela Entre Avaliadores mostra que os avaliadores concordam com suas classificações em 37 de 50 amostras.
O valor global de kappa de 0,881705 indica um bom nível de concordância absoluta das classificações entre os avaliadores. O coeficiente de concordância de Kendall de 0,976681 confirma essa forte associação.
As estatísticas entre os avaliadores não comparam as classificações dos avaliadores com o padrão. Embora as classificações dos avaliadores possam ser consistentes, essas estatísticas não indicam se a classificações estão corretas.
Tabela Todos os avaliadores x padrão
Como não há um padrão conhecido para cada amostra, o engenheiro pode avaliar a exatidão de todas as classificações dos avaliadores.
Os avaliadores corresponderam 37 de 50 classificações de todas as avaliações com o padrão conhecido, para 74,0% correspondido.
O valor geral de kappa de 0,912082 indica um bom nível de concordância absoluta das classificações entre avaliadores e com o padrão. O coeficiente de concordância de Kendall de 0,965563 confirma essa forte associação.
Todos os avaliadores versus estatísticas padrão comparam as classificações dos avaliadores com o padrão. O engenheiro pode concluir que as classificações dos avaliadores são consistentes e corretas.
Observação

O valor de p de 0,0000 na saída é arredondado. Mas é possível concluir com segurança que o valor de p é muito baixo e é < 0,00005.

Análise de Concordância por Atributos para Resposta

Dentro dos Avaliadores

Concordância de Avaliação Nº Nº Avaliador de Inspecionados de Correspondências Percentual IC de 95% Amanda 50 50 100,00 (94,18; 100,00) Britt 50 48 96,00 (86,29; 99,51) Eric 50 43 86,00 (73,26; 94,18) Mike 50 45 90,00 (78,19; 96,67) Nº de Concordâncias: O avaliador concorda com os ensaios.
Estatísticas de Kappa de Fleiss Avaliador Resposta Kappa EP de Kappa Z P(vs > 0) Amanda 1 1,00000 0,141421 7,0711 0,0000 2 1,00000 0,141421 7,0711 0,0000 3 1,00000 0,141421 7,0711 0,0000 4 1,00000 0,141421 7,0711 0,0000 5 1,00000 0,141421 7,0711 0,0000 Global 1,00000 0,071052 14,0741 0,0000 Britt 1 1,00000 0,141421 7,0711 0,0000 2 0,89605 0,141421 6,3360 0,0000 3 0,86450 0,141421 6,1129 0,0000 4 1,00000 0,141421 7,0711 0,0000 5 1,00000 0,141421 7,0711 0,0000 Global 0,94965 0,071401 13,3002 0,0000 Eric 1 0,83060 0,141421 5,8733 0,0000 2 0,84000 0,141421 5,9397 0,0000 3 0,70238 0,141421 4,9666 0,0000 4 0,70238 0,141421 4,9666 0,0000 5 1,00000 0,141421 7,0711 0,0000 Global 0,82354 0,071591 11,5034 0,0000 Mike 1 1,00000 0,141421 7,0711 0,0000 2 0,83060 0,141421 5,8733 0,0000 3 0,81917 0,141421 5,7924 0,0000 4 0,86450 0,141421 6,1129 0,0000 5 0,86450 0,141421 6,1129 0,0000 Global 0,87472 0,070945 12,3295 0,0000
Coeficiente de Concordância de Kendall Avaliador Coef Qui-Quadrado GL P Amanda 1,00000 98,0000 49 0,0000 Britt 0,99448 97,4587 49 0,0000 Eric 0,98446 96,4769 49 0,0001 Mike 0,98700 96,7256 49 0,0001

Cada Avaliador versus Padrão

Concordância de Avaliação Nº Nº Avaliador de Inspecionados de Correspondências Percentual IC de 95% Amanda 50 47 94,00 (83,45; 98,75) Britt 50 46 92,00 (80,77; 97,78) Eric 50 41 82,00 (68,56; 91,42) Mike 50 45 90,00 (78,19; 96,67) Nº de Correspondências: A avaliação do avaliador ao longo dos ensaios concorda com o padrão conhecido.
Estatísticas de Kappa de Fleiss Avaliador Resposta Kappa EP de Kappa Z P(vs > 0) Amanda 1 1,00000 0,100000 10,0000 0,0000 2 0,83060 0,100000 8,3060 0,0000 3 0,81917 0,100000 8,1917 0,0000 4 1,00000 0,100000 10,0000 0,0000 5 1,00000 0,100000 10,0000 0,0000 Global 0,92476 0,050257 18,4006 0,0000 Britt 1 1,00000 0,100000 10,0000 0,0000 2 0,83838 0,100000 8,3838 0,0000 3 0,80725 0,100000 8,0725 0,0000 4 1,00000 0,100000 10,0000 0,0000 5 1,00000 0,100000 10,0000 0,0000 Global 0,92462 0,050396 18,3473 0,0000 Eric 1 0,91159 0,100000 9,1159 0,0000 2 0,81035 0,100000 8,1035 0,0000 3 0,72619 0,100000 7,2619 0,0000 4 0,84919 0,100000 8,4919 0,0000 5 1,00000 0,100000 10,0000 0,0000 Global 0,86163 0,050500 17,0622 0,0000 Mike 1 1,00000 0,100000 10,0000 0,0000 2 0,91694 0,100000 9,1694 0,0000 3 0,90736 0,100000 9,0736 0,0000 4 0,92913 0,100000 9,2913 0,0000 5 0,93502 0,100000 9,3502 0,0000 Global 0,93732 0,050211 18,6674 0,0000
Coeficiente de Correlação de Kendall Avaliador Coef EP de Coef Z P Amanda 0,967386 0,0690066 14,0128 0,0000 Britt 0,967835 0,0690066 14,0193 0,0000 Eric 0,951863 0,0690066 13,7879 0,0000 Mike 0,975168 0,0690066 14,1256 0,0000

Entre Avaliadores

Concordância de Avaliação Nº Nº de Inspecionados de Correspondências Percentual IC de 95% 50 37 74,00 (59,66; 85,37) Nº de Correspondências: As avaliações de todos os avaliadores concordam entre si.
Estatísticas de Kappa de Fleiss Resposta Kappa EP de Kappa Z P(vs > 0) 1 0,954392 0,0267261 35,7101 0,0000 2 0,827694 0,0267261 30,9695 0,0000 3 0,772541 0,0267261 28,9058 0,0000 4 0,891127 0,0267261 33,3429 0,0000 5 0,968148 0,0267261 36,2248 0,0000 Global 0,881705 0,0134362 65,6218 0,0000
Coeficiente de Concordância de Kendall Coef Qui-Quadrado GL P 0,976681 382,859 49 0,0000

Todos os Avaliadores versus Padrão

Concordância de Avaliação Nº Nº de Inspecionados de Correspondências Percentual IC de 95% 50 37 74,00 (59,66; 85,37) Nº de Correspondências: As avaliações de todos os avaliadores concordam com o padrão conhecido.
Estatísticas de Kappa de Fleiss Resposta Kappa EP de Kappa Z P(vs > 0) 1 0,977897 0,0500000 19,5579 0,0000 2 0,849068 0,0500000 16,9814 0,0000 3 0,814992 0,0500000 16,2998 0,0000 4 0,944580 0,0500000 18,8916 0,0000 5 0,983756 0,0500000 19,6751 0,0000 Global 0,912082 0,0251705 36,2362 0,0000
Coeficiente de Correlação de Kendall Coef EP de Coef Z P 0,965563 0,0345033 27,9817 0,0000
Ao usar esse site, você concorda com a utilização de cookies para análises e conteúdo personalizado.  Leia nossa política