アンケートの回答時間と不正回答の関連性を検証～第二弾～

20代は60代に比べ不正回答率が2.6倍

年代別不正回答発生率

設問タイプ別に、年代別の不正回答発生率を比較してみると、概ね、年齢が上がる程低くなり、年齢が下がる程高くなる傾向が確認できる。
特に5段階マトリクス（表形式）設問における年代差が顕著で60代に比べて20代の不正回答率は2.6倍にのぼる。
※年代が上がるほど不正回答率が低いのではないかという仮説から、60代の不正回答率を1として、各年代の値を算出。

■複数回答のマトリクス

ストレートの回答を不正回答と定義。不正回答個数をカウントし、その回答時間をまとめた。全不正回答の合計を100とした時に、20代の不正回答のうち90%が30秒以内、半数が9秒以内（20代の平均回答時間18.2秒に対して9.2秒速い）に、60代の不正回答のうち90%が53秒以内、半数が20秒以内（60代の平均回答時間31.1秒に対して11.1秒速い）に集中している。
20代と60代で不正回答の半数が発生する時間に11秒、不正回答の9割が発生する時間に23秒の差がみられるが、各年代の平均回答時間を考慮すると、20代60代ともに回答時間が速いほど不正回答も多いことが示唆される。

単一回答のマトリクス

　ストレートの回答を不正回答と定義。不正回答個数をカウントし、その回答時間をまとめた。全不正回答の合計を100とした時に、20代の不正回答のうち90%が12秒以内、半数が5秒以内（20代の平均回答時間16.0秒に対して11秒速い）に、60代の不正回答のうち90%が43秒以内、半数が12秒以内（60代の平均回答時間25.9秒に対して13.9秒速い）に集中している。
20代と60代で不正回答の半数が発生する時間に7秒、不正回答の9割が発生する時間に31秒の差がみられるが、各年代の平均回答時間を考慮すると、20代60代ともに回答時間が速いほど不正回答も多いことが示唆される。

マトリクス形式の5段階単一回答

ストレートの回答を不正回答と定義。不正回答個数をカウントし、その回答時間をまとめた。全不正回答の合計を100とした時に、20代の不正回答のうち90%が30秒以内、半数が14秒以内（20代の平均回答時間21.9秒に対して7.9秒速い）に、60代の不正回答のうち90%が30秒以内、半数が21秒以内（60代の平均回答時間33.0秒に対して12秒速い）に集中している。
20代と60代で不正回答の半数が発生する時間に7秒の差がみられるが、各年代の平均回答時間を考慮すると、20代60代ともに回答時間が速いほど不正回答も多いことが示唆される。

■総括

今回の検証は結論を出すことを目的としているわけではないため、明確な基準値を定めることはしないが、回答時間が早すぎると、不正回答である可能性が高まることは分かった。
また、年代により不正回答が発生する回答時間に違いがみられることから、一律に回答時間で不正回答と判断することは難しいといえる。
設問形式にもよるが、不正回答発生が集中する時間に20代と60代で最大31秒もの差が、平均回答時間では最大12.9秒の差がみられる。

どの設問形式においても、20代は、回答時間が速いほど不正回答も多いことを示唆しているが、

20代は回答そのものの時間が速いため、時間をかけずに、視覚的に分かりやすく、直感で回答できるような設問設計が望ましいといえる。また、設問数のボリュームが大きいアンケートは、不正回答がでやすいことも予測できる。

今後、選択肢の数による検証、視線等の生態データによる検証も行い
不正と思われるデータを、恣意的ではなく根拠を持って一律に排除できる仕組みを構築していきます。