通过选拔和培训后的候选评价员需经过考核合格后才能成为真正的评价员。考核主要是检验候选评价员操作的正确性、稳定性和一致性。正确性是考察每个候选评价员是否能正确地评价样品。例如是否能正确区别、正确分类、正确排序、正确评分等。稳定性是考察每个候选评价员对同一组样品先后评价的再现程度，一致性是考察各候选评价员之间是否掌握同一标准作出一致的评价。

一般来讲，一名评价员只是评价一类固定样品，所以适合一种目的的评价员不必要求适合其他目的，不适合某种目的的评价员也不一定不适合于其他目的。

1.用于差别检验的评价员的考核

①区别能力。使用三点检验法。使用实际中将要评价的材料样品，提供三个一组共10组样品，让候选评价员将每组样品区别开来。根据正确区别的组数判断候选评价员的区别能力。

②稳定性。经过一定的时间间隔，再重复进行上述1-①中的作法。比较两次正确区别的组数。根据两次正确区别的样品组数的变化情况判断该候选评价员的操作稳定性。

③一致性。用同一系列样品组对不同的候选评价员分别进行1-①的作法。根据各候选评价员正确区别的样品组数判断该批候选评价员差别检验的一致性。

2.用于分类检验的评价员的考核

①分类正确性。让候选评价员分别评价一组包括感官指标合格与不合格的若干个样品。根据对样品合格与否的分类，考核候选评价员分类的正确性。

②分类稳定性。经过一段时间，让某一候选评价员对同一样品组重复进行2-①中的考核，然后进行Mcnemar检验以考核该候选评价员的分类稳定性。

③分类一致性。为了评价候选评价员对若干种样品的分类评价是否一致，可使用Cochran的Q检验方法。

3.用于排序检验的评价员的考核

①排序正确性。将一系列特性强度已知的样品提供给候选评价员排序。根据侯选评价员排序的错误的次数，考核其排序的正确性。

②排序稳定性。采用Spearman秩相关检验。

③排序一致性。采用Friedman检验考核各候选评价员之间排序的一致性。

4.用于评分检验的评价员的考核

通过对每个评价员评价结果作方差分析等方式，判断候选评价员对样品评价的区别能力、评分的稳定性及评分的一致性。

5.用于定性和定量描述的评价员的考核

①定性描述。主要在培训过程中考查和挑选。可向候选评价员提供对照样品和一系列描述词，让其识别与描述。若不能正确识别和描述70%以上的对照样品则不能通过该项考核。

②定量描述。提供3个一组共6组不同样品。用方差分析等评分考核方法考核候选评价员定量描述的区别能力、稳定性和一致性。

6.再培训

评价员的评价水平经过一段时间以后可能会下降，因此对其操作水平应定期检查和考核，达不到规定要求的应重新培训。