La différence principale réside dans la façon dont chaque commande définit une concordance dans les expériences répliquées, pour lesquelles chaque évaluateur note chaque sujet plusieurs fois.
définit chaque répétition comme 1 opportunité de concordance. Inversement, définit chaque ensemble de répétitions comme 1 opportunité de concordance.Supposons par exemple que chaque évaluateur note chaque sujet 3 fois. Si l'évaluateur A attribue une note au sujet A qui correspond 2 fois sur 3 au standard, la commande
attribue à l'évaluateur A 0 concordance sur 1 opportunité lors de l'évaluation du sujet A. Toutefois, la commande attribue à l'évaluateur A 2 concordances sur 3 opportunités lors de l'évaluation du sujet A.De la même manière, si l'évaluateur B note le sujet B et attribue une note qui correspond au standard 3 fois sur 3, la commande
attribue à l'évaluateur B 1 concordance sur 1 opportunité lors de l'évaluation du sujet B. Cependant, la commande attribue à l'évaluateur B 3 concordances sur 3 opportunités lors de l'évaluation du sujet B.Les différentes façons de compter les correspondances peuvent entraîner des pourcentages de concordance différents pour les mêmes données, lorsque ces dernières sont analysées à l'aide des deux commandes.