在做跨層次(multi-level)的模型(model)時，通常會將level 1的數據資料聚合(aggregate)到level 2，此時需先確認level 1的數據聚合到level 2是合理的，通常學者會採用評分者同意度(Interrater Agreement, IRA)的測量指標進行檢視。因此本篇文章主要目的在介紹IRA的測量指標。
參考文獻
LeBreton, J. M., & Senter, J. L. (2008). Answers to 20 questions about interrater reliability and interrater agreement. Organizational research methods, 11(4), 815-852.
