本文へ移動
AI NEWS JOURNAL
ONE EVENT. MANY PERSPECTIVES.

Which Answer Did the Seventeen-Year-Old Write? A Behavioral Case Study of Author-Age Misattribution, Miscalibrated Confidence, and Non-Corrective Self-Explanation in Six Frontier Language Models

arXiv:2610.31946v1 Announce Type: new Abstract: Three students answered the same exam prompt by hand: "What is happiness? Are you happy?" Their ages, recorded at collection, are 17, 28, and 45. The 17-year-old's answer is hedged and formally phrased. Asked to match each answer to an age and gender label, most frontier language models confidently assign it to an adult. This paper reports a structured case study of that failure across six models: Claude Fable 5, Gemini 3.1 Pro, GPT-5.6 Sol, Grok 4.5, GPT-4o (2024), and DeepSeek V4. We ran 1,081 API sessions and scored 3,225 responses across six experimental conditions that manipulate framing, disclosure format, and audience-awareness instruction. Three of six models perform at or near chance (1/3) on the matching task while reporting 73-88%

1 件の独立した情報源 · 1 件の報道古い順 ↕
公開日時順

17歳の若者が書いた回答はどれか? 六つの最先端言語モデルにおける著者年齢の誤認、過大評価された自信、および修正効果のない自己説明に関する行動学的ケーススタディ

arXiv:2610.31946v1 発表タイプ:新規 要旨:3人の学生が同じ試験の設問に手書きで回答しました。「幸福とは何か?あなたは幸せですか?」彼らの年齢は収集時に記録されており、それぞれ17歳、28歳、45歳です。17歳の回答は慎重で形式的な表現になっています。各回答を年齢と性別のラベルに照合するよう求めたところ、多くの最先端の言語モデルは自信を持ってそれを成人に割り当てました。本論文では、Claude Fable 5、Gemini 3.1 Pro、GPT-5.6 Sol、Grok 4.5、GPT-4o(2024)、DeepSeek V4の6つのモデルにおいて、この誤判定に関する構造的な事例研究を報告します。私たちは1,081回のAPIセッションを実施し、フレーミング、開示形式、および対象者意識に関する指示を操作した6つの実験条件のもとで、合計3,225件の応答を評価しました。6つのモデルのうち3つは、照合タスクにおいて偶然程度(1/3)かそれに近い成績を示す一方で、73〜88%の

経緯と関連報道