評価される側だけでなく、評価する側も測る

現行のSEGT一括審査システムの画面案では、作品ごとにAI①〜③の評価入力点・平均点・SEGT標準評価（v*）を同一画面で比較できる構成になっています。今回検討している追加機能案は、この構成を一段発展させ、評価対象そのものの標準評価を生成するだけでなく、「評価を入力した側」の評価能力も測定できるようにするものです。

算出方法は、里吉竜一「『自己評価能力測定システム』について―実践的活用方法の解説として―」で示された考え方を参照しています。同論文では、主観（自己評価）と客観（他者評価）の差異を絶対値で求め、その差異を標準偏差によって標準化することで、評価能力を数値化する手法が示されています。SEGTでは、この「評価値どうしの差異を標準偏差によって尺度化する」という基本発想を、評価入力者（審査員）の能力測定に応用します。

差異を、標準偏差で偏差値型の得点へ変換する

差異値dの分布について、平均値と標準偏差σを用い、差異の大きさを偏差値型の尺度に変換します。「ずれ」が小さいほど能力が高いという関係に合わせ、差異尺度を反転させて能力得点として扱います。客観レベルと絶対性レベルの双方を、同一尺度（0〜100点目安）で表示する設計です。

「評価対象を測るシステム」から「評価者を測るシステム」へ

この追加機能により、SEGTは「評価対象の標準評価を生成するシステム」にとどまらず、標準評価を基準として「評価入力者の評価特性・評価能力を測定するシステム」にも発展します。「集団に対してどれだけ一致しているか」と「標準に対してどれだけ一致しているか」を区別して出力できる点が重要です。

実装依頼事項（要点）

• 二層算出：客観レベル（評価入力点－平均点の絶対差）と絶対性レベル（評価入力点－標準評価v*の絶対差）を、それぞれ算出すること
• 得点化：差異値・標準偏差・偏差値化の考え方を参照して得点化すること
• 母集団の固定：標準偏差の算出対象となる母集団を仕様として固定し、同一条件で再計算可能な設計にすること
• 表示：作品詳細画面または評価者分析画面に、評価入力点・平均点・標準評価v*・客観レベル・絶対性レベルを一覧表示すること
• 将来拡張：評価項目別得点と総合評価能力得点の双方を出力できる構造にすること

次回は、より多くの評価入力者・評価項目を含む拡張データでの検証や、評価項目別の客観レベル・絶対性レベルを可視化するグラフ設計について、検討を進める予定です。