測定方法

このサイトの数値がどう作られているかを公開します。主観や掲載料は順位に一切影響しません。

生成AIに採用代行について質問し、回答に名前が挙がった回数を数えています。製品の品質・価格・満足度を評価しているのではありません。

1つの状況を1問だけで聞くと、標本が 4 しかなく、半数が挙がっても95%信頼区間は15〜85%になり、何も言えません。言い回しを変えて複数回聞くことで標本を確保しています。同じ文を繰り返すのではなく言い回しを変えるのは、同一の質問文の反復では回答が似通い（級内相関 0.63）、情報が増えないためです。

各状況につき 5 通りの言い回しを用意しています。ここでは1つずつ掲載しています。質問文の全文は、掲載企業からの求めに応じて開示します。

隣り合う順位の多くは統計的に区別できません。1位刻みで並べると実際より精密に見えてしまうため、区別できない範囲は同順位として扱っています。

判定には McNemar検定を使っています。同じ質問に同じAIが答えた結果なので標本に対応があり、両社とも挙がった回答は差の情報を持ちません。そこで食い違った回答だけで判定します。両社がよく一緒に挙がる組ほど、小さな差でも区別できます。

同順位の幅は標本数で決まります。質問を増やすほど狭くなります（18問なら 14.2pt、52問なら 7.9pt、85問なら 6.1pt）。

2回以上名前が挙がった企業をすべて掲載しています。1回だけの言及は抽出の誤りが混じるため除いています。掲載の可否・順位に、当サイトの主観や金銭は関係しません。

上位群は順位と数値を、それ以降は五十音順で社名のみを掲載しています。上位群との差が統計的に確かめられない以上、順位をつけることが正確でないためです。

• 生成AIの回答は非決定的で、同じ質問でも結果が変わります。
• AIのモデルが更新されると数値が変動します。更新を検出した月は前月比を掲載しません。
• AIの回答は検索結果に依存するため、測定時点の検索状況を反映します。
• 4つのAIは均等に扱っています。実際の利用者数は各AIで異なるため、AI別の内訳を必ず併記しています。

測定方法に関するお問い合わせはこちらから承ります。掲載内容についてのお申し出の扱いは、掲載と削除の方針にすべて書いています。