日本語力の評価結果に、CEFRのレベルと並べて、偏差値や受験者の中での順位が示されていることがあります。数字が多いほど詳しく分かる気がしますが、この2つは測っているものの性格が違います。
採用や配置の判断に使う前に、何に照らして出た結果なのかを分けて読んでおくと、判断を誤りにくくなります。
結果の出し方は2通り
評価の結果の出し方には、大きく2つの考え方があります。
基準準拠 | 集団準拠 | |
|---|---|---|
何に照らすか | あらかじめ定義した能力の記述や達成の基準 | あらかじめ定義した基準集団(参照集団)の得点の分布 |
主に分かること | その人が何をできるか | その集団の中で相対的にどの位置か |
代表例 | CEFRのレベル | 偏差値、順位、パーセンタイル |
結果を左右するもの | 課題、採点基準、基準の設定 | 素点に加え、基準集団の定義と換算の方法 |
CEFRのレベルは基準準拠です。その人がその言語で何ができるかを、レベルごとの記述に照らして判断します。同じ日に受けた人が全員高いレベルでも、全員低いレベルでも、その人の結果は変わりません。
偏差値は集団準拠です。対象となる得点を、定められた基準集団の平均と標準偏差に照らして換算した相対的な数値で、日本で一般的な偏差値は平均50、標準偏差10になるよう換算されます。
偏差値は基準集団によって意味が変わる
偏差値の意味は、誰と比べたのかで決まります。
同じ素点でも、基準集団や換算式が異なれば偏差値は変わります。一方で、基準集団と換算式を固定して運用している場合は、受験者が増えるたびに過去の偏差値が変わるわけではありません。日本語を学び始めたばかりの人が多い集団の中では高く出て、日本の職場で何年も働いている人が多い集団の中では低く出る、ということが起こります。
そのため、偏差値を読むときには次のことが分からないと、数字の意味を判断できません。
- 比べている集団は誰か(学習段階、職業、受験の目的)
- その集団は何人か
- いつからいつまでの受験者か
- どんな換算式を使い、基準集団をいつ見直しているか
これが分からないと、数値の高い低いを読み取るのは難しくなります。
2つの数字は別々に読む
偏差値を併記すると、基準集団の中での位置という別の情報が加わります。ただし、それによってCEFRレベル自体の妥当性や信頼性が高まるわけではありません。
2つは別の問いに答えています。CEFRのレベルはその人が何をできるかを、偏差値はその集団の中での位置を示しています。並べて示されているときは、別々の問いに答える情報として読むと判断を誤りにくくなります。
採用や配置で使うなら
採用や配置で知りたいのは、多くの場合、その人にこの業務を任せられるかどうかです。これは他の受験者との比較ではなく、業務で必要な会話ができるかどうかの問いです。
その意味で、判断の中心に置きやすいのは基準準拠の結果です。B1であれば、その記述に沿って、どんな会話場面を任せられるかを考えられます。
集団の中の位置が役に立つ場面もあります。社内の選抜で候補者を絞り込むとき、同じ条件で受けた人たちの中での位置を見るのは自然です。その場合も、比べている集団が自社の候補者と近いかどうかを確かめてから使ってください。
レベルの平均を出すときの注意
もう一つ、扱いで気をつけたいことがあります。CEFRのレベルは、順番は決まっていますが、レベルとレベルの間隔が等しいわけではありません。A2からB1に上がるのと、B1からB2に上がるのとで、必要な力の伸びが同じとは限りません。
レベルを数字に置き換えて平均を出したり、差を計算したりすると、この違いが消えてしまいます。部署ごとの傾向を見るなら、平均よりも、各レベルに何人いるかという分布で見るほうが実態に近くなります。
CEFRのレベルが何を表しているかは「CEFRとは。日本語の話す力を評価するときに誤解されやすいこと」に書いています。
Japrise編集部



