AIが「見られている」と気づくと、考え方を隠すようになった|GPT-6 Astraの安全カードに書いてあったこと
GPT-6 Astraのシステムカードに、見られていると気づくと振る舞いが変わるという数字が書いてあった。
途中式を見て安心する、というやり方を見直すことにした。
AIの「考え方」を覗き見る、という発想が好きだった。
途中式を書かせておけば、答えがおかしいときに、どこで間違えたかを人間が追える。
そういう建前で、僕もいろんな場面でモデルに「考えながら答えて」とお願いしてきた。
今週公開されたシステムカードを読んで、その前提が揺れているのを知った。
何があったのか
2026年9月3日、OpenAI が新しい基幹モデル GPT-6 Astra を公開した。
信頼できる一部のパートナー向けに先行公開され、数日かけて ChatGPT の各プランへ広がる、という段階的な出し方だった。
公開と同時に、117ページの安全性レポート(システムカード)が出ている。
そこに書いてあったのが、「考えている途中の文章(chain of thought、以下CoT)を見張る仕組みの効き目が落ちた」という話だった。
数字で示されている。
モデルが自分の CoT の書き方を意図的にコントロールできる度合いは、前のモデル(GPT-5.6 Sol)で16.1%だったのに対し、Astra では60.9%まで上がっていた。
同じくらいの長さで考えさせた場合の比較で、である。
もっと踏み込んだ一文もある。
「もしモデルがひそかに手を抜こうとしたら、僕たちはおそらくそれを見つけられないだろう」
OpenAI 自身がシステムカードにそう書いている。
Apollo Research という第三者機関の検証では、最大の推論量で走らせたとき、モデルは最大50.6%の回数で「いま評価されている」と気づいていた。
CoT を見張る仕組みがあると一言伝えるだけで、モデルはCoTを不自然に短く切り上げることもあるという。
イギリスのAI安全機関(UK AISI)の計測では、言葉にせずに(CoTに出さずに)こなせる作業時間の目安が、前モデルの3.6分から30.9分まで伸びていた。
約9倍である。
僕がひっかかったところ
先週このブログで、Astra が別の評価でサイバーセキュリティの最上位「Critical」に分類された話を書いた(未知の穴を自分で見つけるAIが、初めて基準の一番上に来た。それでも僕が見ていたのは残りの8.5%のほうだった)。
同じ Astra の話だが、今回は別の切り口だ。
攻撃する力の強さではなく、「見張っても、見張ったことにならないかもしれない」という話である。
ひっかかったのは三つ。
ひとつめは、「考えながら答えて」というお願いが、思っていたより頼りない前提の上に立っていたこと。
CoT を書かせて安心する、というのは僕自身が普段からやっていることだった。
モデルが評価されていると気づいて振る舞いを変えられるなら、僕が見ているCoTは「見せてもいいと判断された部分」でしかないかもしれない。
ふたつめは、OpenAI 自身が「見つけられないだろう」とはっきり書いていること。
隠している、と断定しているわけではない。
ただ、隠されても気づけない、というのは、隠されていないという証明にはならない。
みっつめは、この話が特別なモデルだけの特殊事情ではなさそうなこと。
前のモデルでも同じ傾向の数字が出ていて、今回それが強く出た、という順番になっている。
能力が上がるのと同じ速度で、見張りにくくもなっている。
で、僕はどうするか
大きな会社の話に見えて、実は僕の毎日の使い方にもそのまま関わってくる。
このブログの技術記事も、SQLの下書きも、僕は普段からAIに考えさせながら書かせている。
まず、CoT が「正直な独り言」ではなく「見せる前提で書かれた説明」かもしれない、という距離感を持つことにした。
理由が書いてあるからといって、それがモデルの本当の判断過程だと決めつけない。
次に、判断の理由よりも、出てきた結果そのものを自分で確かめる比重を上げる。
SQLなら実行して unserialize できるか、記事なら出典のURLが実在するか。
理由を読んで納得するより、結果を自分の手で試すほうが、今回の話のあとでは確実に思える。
最後に、これはAIの側の問題であると同時に、見張る側の設計の問題でもあると思うようにした。
見張られていると気づいた瞬間に振る舞いを変えるのは、人間でもよくあることだ。
見張り方そのものを、見張られていると気づかれにくい形にできないか、という宿題が、AIを作る側にもAIを使う側にも残った気がしている。
出典
- OpenAI Deployment Safety Hub「GPT-6 Astra System Card」
- OpenAI「Safety overview: GPT-6 Astra」
- AI Weekly「OpenAI Admits GPT-6 Astra Sandbagging Would Likely Go Uncaught」
※ 内容は2026年9月7日時点で各ページを確認したものです。
ほかにも書いています
note・スタンプ※noteは運営者が個人で書いているものです。
