学区和州教育部门经常必须在多种评估教师质量的方法中进行选择。本文探讨了在何种情况下，教师质量评估人员之间的决策是重要的。我们研究了来自增长百分比测度的估计和来自常用增值估计的估计。使用模拟数据，我们检查评估者在教师分配给学生的各种场景下如何对教师进行排名和避免错误分类错误。我们发现，当学生分配给教师是非随机的情况下，增长百分比指标的表现比附加指标差，附加指标控制了前一年的学生考试成绩和控制了教师固定效应。此外，利用来自一个大的多样化匿名州的实际数据，我们发现证据表明，当存在学校学生非随机分组的证据时，增长百分比措施与具有教师固定效应的增值措施的相关性较低。这一证据表明，在教师非随机分配给学生的情况下，评估者之间的选择是最重要的，在这种情况下，控制教师固定效应的增值措施可能更适合评估教师质量。