評価者間信頼性

評価者間信頼性とは？複数評価者間の一致度を高める考え方を解説

はじめに

360度評価や面接評価など、複数の評価者が関わる仕組みを導入したものの、評価者によって評価結果が大きくばらつき、被評価者から不公平感を訴えられてしまう。人事評価制度の運用でしばしば直面する課題です。評価に対する不信感が募ると、優秀な人材の離職や、評価制度そのものへの協力姿勢の低下につながりかねません。評価項目や評価基準を整えていても、評価者ごとの解釈の違いまでは把握できていないケースが少なくありません。こうした評価の一致度を確認するための考え方が評価者間信頼性です。本記事では、その内容と実務での活用場面、押さえておきたいポイントを解説します。

評価者間信頼性とは？

評価者間信頼性とは、複数の評価者が同一の対象を評価した際に、評価結果がどの程度一致しているかを示す指標です。評価者間の一致度が高いほど、評価者の主観に左右されにくい、信頼性の高い評価が行われていると判断できます。心理測定や統計の分野で用いられてきた概念で、級内相関係数やカッパ係数といった統計的な手法によって数値化されることがあります。

評価者間信頼性と混同されやすい概念に評価者内信頼性があります。評価者間信頼性が複数の評価者の間での一致度を扱うのに対し、評価者内信頼性は、同一の評価者が同じ対象を異なる時点で評価した場合の結果の一致度を扱う点で異なります。人事評価の実務では、評価者間信頼性が低い場合、評価基準の解釈が評価者によって異なっている可能性が高く、評価者研修や評価基準の見直しが必要になります。

よく使われるシーン

360度評価やアセスメントセンターなど、複数の評価者が関わる制度を設計する場面で使われます。人事部門が、評価結果に評価者ごとの偏りがないかを分析する場面でも用いられます。採用面接において、複数の面接官の評価結果を比較し、評価基準のすり合わせを行う場面でも参照されます。人事評価制度の見直しにあたり、現行制度の課題を客観的に検証する場面でも使われます。人事部門が新しい評価制度を導入する前に、試行運用を通じて評価者間の一致度を検証する場面でも活用されます。

評価者間信頼性を理解することの重要性

評価制度に対する社員の納得感は、評価結果が公平に導き出されているという実感に支えられています。評価者間信頼性の考え方を理解しておくと、評価者の主観による差を見過ごさず、制度そのものの質を検証する視点を持てるようになります。既存の登録語であるハロー効果や中心化傾向といった評価エラーは、個々の評価者に生じやすい偏りを扱う概念であるのに対し、評価者間信頼性は、複数の評価者を横断して評価の一致度を検証する、いわば制度全体の測定精度を扱う概念である点が異なります。両者をあわせて理解しておくと、評価制度の課題を個人と仕組みの両面から点検できるようになります。評価制度への納得感を高めたい企業にとって、見過ごされがちな観点であるといえます。