Каппа Коэна для основных факторов на несколько предметов. Какой процент данных должен быть проверен?
Привет я хотел бы запустить каппа Коэна на некоторых данных экзамена. Я ищу наличие или отсутствие трех стратегий в 25 аналогичных пунктах для 12 участников. Примеры, которые я видел для использования пакета irr, фокусируются на том, что каждый участник делает один ответ и оценивает его. У меня есть 25 ответов от каждого участника. Какой процент я должен использовать, чтобы получить точную оценку? Соглашение о двух оценках для одного ответа от каждого участника будет рассматривать только 1/25 данных и кажется слишком низким.
Спасибо Брайан