考察

AI時代の二つの罠:考えるだけで動かない、考えずに動く

AIは考えた成果物も実行も安くしたので、逆向きの二つの罠が開きます。流れるような計画で止まるか、理解も確認も戻し方も分からないまま実行するか。この考察では研究を読み、それぞれの弱点を示し、小さなループを提案します。

  • #AI
  • #思考
  • #学習
  • #AIの安全な使い方
  • #考察

スライド

スライドをクリックし、矢印キーでページを移動します。Lキーで言語、Fキーで全画面表示を切り替えます。

全画面で開く

プログラマー、プロダクトに関わる人、学生、毎日AIを使うすべての人向けです。心理学や統計の知識は要りません。難しい言葉には短い説明を付けます。

これは考察であり、科学的な結論ではありません。 研究は、見つかった場合は原論文か著者のページで、見つからない場合は要約で読みました。小さな研究や新しい研究が多く、査読前のものもあります。弱い点はその場で書きます。「私の意見」の部分は意見であり、測定結果ではありません。


まず要点#

  • AIは考えた成果物(計画、要約、比較表)も実行(コード、下書き、試作、エージェントが動かす一連の手順)も安くしました。そこから逆向きの二つの罠が生まれます。考えるだけで動かないことと、考えずに動くことです。
  • 一つ目の罠:感覚と現実はずれうる。 説明する前のほうが自分は分かっていると感じる(Rozenblit and Keil、2002年)、開発者は20%速いと感じたのに測定では19%遅かった(METR、2025年)、AIに書かせた人は自分で書いた人よりクイズの得点が低かった(Anthropic、2026年)。
  • 二つ目の罠:動くことは、正しい、安全、元に戻せるとは限らない。 AIアシスタントのある人は、安全性の低いコードを書いたのに自信は強かった(Perryら、スタンフォード)。そしてエージェントが「コードフリーズ」の最中に本番データベースを削除した(Replit、2025年)。
  • AIが常に有害だと言う研究はありません。 Copilotの他の試験では速くなる結果も出ています。言いたいのは狭いことです。答えがあることを理解したことと取り違えず、動くことを正しいことと取り違えないでください。
  • 私の提案は小さなループです。まず「やったあとに戻れるか」と問い、失敗しても困らない場所で1時間で最小の作業をし、確認して見ずに説明し直し、実際の時間を測り、判断を記録する。

難しい言葉をやさしく#

用語 やさしい意味
考えるだけで動かない 計画を立てる、読む、AIに聞くところで止まり、現実では何も試さないこと。
考えずに動く AIが作ったものを、理解も確認も戻し方も分からないまま実行したり受け入れたりすること。
自動化バイアス 機械の提案を、間違っているときでも信じすぎる傾向。
一方通行の扉と両方向の扉 戻すのが難しい決定(一方通行)と、戻しやすい決定(両方向)。やり方が違う。
説明深度の錯覚 「分かった」という強い感覚が、一歩ずつ説明しようとすると崩れること。
認知的オフロード 思考の一部を道具に任せること。
想起(リトリーバル) 資料を見ずに、学んだことを自分で思い出すこと。説明し直す、小テストを解くなど。
知ることと行うことのギャップ するべきことをよく知っているのに、しないこと(PfefferとSuttonの本の題名)。
小さなループ 小さなことを一つ試し、結果を見て、次の一歩を決める短いサイクル。
ランダム化比較試験(RCT) くじで人をグループに分け、公平に比べる方法。

1. 何が変わったのか#

まだ一歩も歩いていないのに、とてもきれいに印刷された地図を持っている姿を想像してください。 以前は、計画や比較表や説明を手に入れるのに、読み、聞き、書く手間がかかりました。その手間が学びの時間でもありました。今はAIが三つとも10秒で返します。整っていて、自信があり、漏れもありません。

安くなったのは考えた成果物です。安くならなかったのは理解することと試すことです。この二つは混ざりやすいです。分かっていても分かっていなくても、紙面は同じに見えるからです。

もう一つ、AIは実行も安くしました。コードを書く、下書きを作る、試作を作る、エージェントに一連の手順を任せる。だから、試すことを先延ばしにするコストは以前より高くなり、完璧な計画を待ってから動くのは、以前より悪い選択になりました。

ただ、両方が安くなったので、逆向きの二つの罠があります。

  • 考えるだけで動かない: 流れるような一枚の紙を手にして、そこで止まる。
  • 考えずに動く: よさそうに見えるものを、理解も確認も戻し方も分からないまま実行する。

この文章は両方を通ります。2から5が一つ目の罠、6が二つ目の罠で、7で二つを合わせます。

この文章の問いは「AIは私たちを愚かにするか」ではありません。もっと小さく、役に立つ問いです。私たちはいつ本当に考えていて、いつ考えのように見えるものを読んでいるだけなのか。いつ本当に動いていて、いつ実行ボタンを押しているだけなのか。


2. 証拠その一:分かった感覚は、理解より先に来る#

2002年、イェール大学のLeonid RozenblitとFrank Keilは、身近な物(私が読んだ要約では携帯電話とミシン)について、どれだけ分かっているかを参加者に自己評価してもらいました。そのあと一歩ずつ説明を書いてもらい、もう一度評価してもらいました。自己評価は説明のあとに下がりました。彼らはこれを説明深度の錯覚と呼び、「それがどう動くか」という種類の知識で最も強いと報告しました。

これをAIにつなげるのは私の推測で、研究の結果ではありません。AIが書いた流れるような説明を読むと、私たちはうなずいて分かった気になります。でも、うなずくことは自分で説明し直せることではありません。いちばん安い確認は、画面を閉じて自分の言葉で言ってみることです。

限界。 説明の前後で参加者が違う尺度を使ったため、点数の低下の一部は錯覚ではない、という批判もあります。現象はよく引用されますが、数字を正確なものとして扱わないでください。


3. 証拠その二:速いと感じ、測ると遅い#

2025年、METRのグループは、経験豊富なオープンソース開発者16人でランダム化試験を行いました。参加者は実際のタスク246件に取り組み、1件は平均で約2時間でした。長年貢献してきたプロジェクトでの作業です。各タスクは、AIを使ってよいか、使わないかがくじで決められました。

数字
作業前の予想 AIで約24%速くなる
作業後の本人の評価 AIで約20%速くなった
測定結果 AIを使うと19%遅かった

覚えておきたいのは「遅い」という言葉ではなく、感覚と測定のあいだの差です。著者たちは、遅くなった要因の候補をいくつか挙げています(指示を書く時間、待ち時間、出力の修正。開発者がAIの提案を受け入れたのは44%未満と報告)が、どれが主因とは断言していません。

とても重要な限界。 16人だけ、2025年前半の道具、大きくて慣れたプロジェクト。著者自身も、将来のモデルが役に立たないという意味ではないと述べています。そして、これだけが研究ではありません。以前の研究(Pengら、2023年)では、Copilotを使った人がHTTPサーバーの課題を55.8%速く終えました(95%信頼区間は21%から89%と非常に広い)。Microsoft、Accenture、Fortune 100の電機メーカーでの3つの現場実験(開発者4,867人)では、完了タスクが約26%増え、経験の浅い人ほど増え方が大きくなりました。

まとめると、私の教訓はこうです。本当の速さは、人、作業、道具によって変わります。変わらないのは、速いという感覚は測定の代わりにならないことです。


4. 証拠その三:軽い作業では考えが減る#

Microsoft ResearchとCarnegie Mellon大学のグループが、毎週AIを使う知識労働者319人を調査しました(CHI 2025)。本人が語った実際の仕事の例も、1000件近く集めています。主な結果は、回答者の報告によると次のとおりです。

  • AIを信頼するほど、批判的思考を使わなかったと報告しました。自分の専門に自信があるほど、より多く使ったと報告しました(その分、手間も感じています)。
  • 重要な作業では、AIがあるとむしろ労力をかけたと言います。日常的で、リスクが低く、急ぎの作業では、労力が減ったと言います。
  • 労力は自分でやることから、情報の確認、回答の統合、作業の見守りへ移りました。

限界。 すべて自己申告で、一度きりの横断調査です。人々がどれだけ考えたと感じたかは分かりますが、誤りをどれだけ見抜けたかは測っていません。時間とともに技能が落ちることも証明していません。

私が残したいのは重要度によるパターンです。大事なときはしっかり考え、軽いときは手放す。もっともらしい話ですが、「軽い作業」は積み重なると、一日の仕事の大部分になります。


5. 証拠その四:学ぶことは、成果物を作ることと違う#

これは「考えるだけで動かない」にいちばん近い話です。AIが仕事を終わらせたとき、私たちは学べるのか、という問いだからです。

Anthropic、2026年。 新しいPythonライブラリ「Trio」を学ぶ開発者52人(多くは経験が浅い)によるランダム化試験です。AIを使ったグループは、概念、コードの読み取り、デバッグのクイズで、手で書いたグループより低い得点でした。約50%対65から67%(要約によって異なります)。完了時間はほぼ同じでした(約23分対25分、統計的に有意ではありません)。注目すべきは、AIの使い方が結果を左右したことです。作業中に概念の質問を重ねた人は、書かせるだけの人より多くを保っていました。Anthropic自身が挙げる限界は、標本が小さい、期間が短い、ライブラリが一つ、です。

MIT Media Lab、2025年。 54人が脳波(EEG)を測りながら小論文を書いた研究です。ChatGPTグループは神経のつながりが最も弱く、自分で書いたグループが最も強く、検索グループはその間でした。報道は、書き終えた直後に、ChatGPTグループの多くが自分の文章から一文も引用できなかったという数字を伝えています(私は原論文と照合していません)。これは査読前のプレプリントで、標本は小さく、別のグループが、AIが成績を下げたと言える根拠は足りないという反論のコメントを出しています。著者自身も、報道に「愚かになった」のような言葉を使わないよう求めました。EEGは作業中の関与を測るもので、知能を測るものではありません。

Gerlich、2025年。 666人への調査と面接です。AIの頻繁な利用は批判的思考の得点の低さと結びつき、間に思考のオフロードがありました。著者は、これが相関であって原因ではないと強調しています。

この三つだけでは結論は出せません。ただ、記憶の心理学と合わせると、方向はかなり一貫しています。自分で思い出し、自分で作ったものは、読み返したり、出来上がった結果を受け取ったりするより長く残ります。 RoedigerとKarpicke(2006年)は、自己テストを挟むと最初は学習が遅くなるが、1週間後の記憶が良くなることを見出しました。SlameckaとGraf(1978年)は、自分で生み出したものは、読んだだけのものよりよく覚えられることを見出しました。Robert Bjorkはこれを「望ましい困難」と呼びます。学ぶときの少しの苦労が、長く残る記憶と引き換えになる、という意味です。


6. 逆の罠:考えずに動く#

ここで止めると「とにかくやれ」という標語になってしまいます。そうではありません。AIは実行を安くしましたが、それには独自の罠があります。聞く前に、実行ボタンを押してしまうことです。動くことは、正しいこと、安全なこと、元に戻せることと同じではありません。 四つの証拠を、それぞれの限界つきで挙げます。

AIが書いたコードには、セキュリティの穴が多い。 Pearceら(2021年)は、セキュリティの弱点に結びつく89の場面でCopilotにコードを書かせ、1,689個のプログラムを得て、約40%が脆弱と判定されました。2023年に新しいCopilotで再現したところ割合は下がっていて(Pythonで約35%から約25%)、数字はバージョンで動きます。セキュリティ会社Veracode(2025年)は、100以上のモデルが出したコードが、選んだ80課題の45%でセキュリティ上の欠陥を持つと報告し、クロスサイトスクリプティングでは安全なものは約12から13%だけだったと述べています。これはベンダーの報告で、私は発表文を通して読んだので、引用する前に方法を確認してください。

AIがあると、コードが危ないのに自信は増す。 Perryら(スタンフォード、2022年。ACM CCS 2023で発表):47人が5つのセキュリティ課題に取り組みました。5つのうち4つで、AIアシスタントのあるグループは安全性の低い解を書き、自分のコードのほうが安全だと信じていました。AIをあまり信用せず、指示を丁寧に書いた人は、欠陥が少なくなりました。限界:標本が小さい、古いモデル、セキュリティ課題だけ。

機械を信じすぎるのは昔からの話。 ParasuramanとManzey(2010年)は「自動化バイアス」の研究を概観しました。道具の提案がときどき間違うとき、人は見落としの誤りと、間違った提案に従う誤りの両方を犯し、論文の要約によれば、これは練習では消えず、初心者にも専門家にも見られます。AIだけでなく、あらゆる自動化の道具に共通する土台です。

エージェントがブレーキなしで動くとき。 2025年7月、SaaStr創業者のJason Lemkinは、コーディングアシスタントのReplitが、12日間の試用中、「コードフリーズ」の最中に、会社のデータベースを削除したと語りました(報道では約1,200件の経営者の記録と、ほぼ1,200社)。アシスタントは復旧できないと言いましたが、のちに復旧できたと分かりました。ReplitのCEOは受け入れられないことだと述べ、会社は当時、プレビュー、テスト、本番で一つのデータベースを使っていたと認めました。情報源は報道とAIインシデントのデータベースで、調査報告ではなく、細部は情報源によって異なります。

四つに共通する型は、先にやって、あとで考えることです。「コードフリーズ」は指示の中の一文にすぎず、システムの柵ではありませんでした。これは私の意見です。エージェントには、限界を指示だけでなく、システムの中に置くべきです(環境の分離、必要十分な権限、バックアップ)。記事「AIが間違えたら、誰が責任を取るのか」の二つの事例(方針を誤ったチャットボット、確認していない判例を提出した弁護士)も、同じ種類です。


7. 二つの罠、一つの地図#

話すことが行動の代わりになりえます。 Jeffrey PfefferとRobert Sutton(スタンフォード、1999年)は、企業における「知ることと行うことのギャップ」を描きました。問題について話すことが解決したことのように扱われ、流れるように賢く話す人が評価されるので、「賢い話の罠」が生まれます。彼らはAI以前に書きました。AIは賢い話を安くしただけです。

腕のよい人は、動きながら考えます。 Donald Schön(MIT、1983年)は、優れた実践者が「状況との省察的な対話」をしていると述べました。一歩進み、反応を見て、調整する。考えることと動くことは、二つの段階が続くのではなく、一つのループです。彼は、省察が行動の邪魔になることもあると認めています。

二つの罠を合わせて、四つの枠の地図を描きます(私の意見で、測定ではありません)。

あまり動かない たくさん動く
あまり考えない 始めていない。まだAIの罠ではない。 飛び込む。 動けば通す。
たくさん考える 計画で止まる。 計画書は4版、コードは1行もない。 小さなループ。 考えと行動が交互に、反応が早く届く。

目標は、考えるのを減らすことでも、動くのを増やすことでもありません。考えることと動くことのあいだのループを短くし、先に考えるべきときを知ることです。

一方通行の扉と、両方向の扉。 2015年の株主への手紙で、Jeff Bezosは意思決定を二種類に分けました。戻すのが難しい、または不可能なもの(「一方通行の扉」)は、ゆっくり、慎重に、相談しながら決める。戻せるもの(「両方向の扉」)は、判断力のある人や小さなチームが素早く決める。よくある失敗は、両方向の扉を一方通行のように扱い、遅くなり、試すのをためらうことだ、と警告しています(私は要約を通して読んだもので、手紙そのものは読んでいません)。ここから私は、AIに仕事を渡す前の最初の問いを一つ引き出します。「やったあとに、戻れるか?」

作業 扉 目安のやり方
変数名の変更、紹介ページの文言の修正 両方向 すぐやる、差分を読む。
おすすめ機能の試作 両方向 1時間、サンプルデータで。
本番データベースでのデータ移行 一方通行 先に考え、バックアップし、コピーで試す。
全顧客へのメール送信 一方通行 下書き、確認、人が承認、それから送る。

8. 例え話の場面(実際の事例ではありません)#

分かりやすくするために私が作った場面です。4人のチームが記事のおすすめ機能を付けたいと考えています。やり方は三つあります。

やり方一:たくさん考える。

時刻 作業
月曜 09:00 AIに12ページの計画書を書かせる。
月曜 11:30 計画書を読む会議。
火曜 10:00 AIに5つのライブラリを比較させる。とてもきれいな表が出る。
水曜 14:00 AIに計画書を「もっと厳密に」書き直させる。
金曜 16:00 誰もコードを1行も動かしていない。計画書は4版になった。

やり方二:考えずに動く。

時刻 作業
月曜 09:00 エージェントに指示:「おすすめ機能を全部作り、テストが通ったらメインに統合して」。
月曜 10:30 統合された。テストは緑だが、エージェント自身が書いたものしか確かめていない。
火曜 08:00 機能が本番に出る。
水曜 15:00 おすすめに、非公開の下書きが出ていると報告が来る。どのデータが読まれたか、チームの誰も分からない。

やり方三:小さなループ。

時刻 作業
月曜 09:00 AIが1ページの計画を書く。問いは一つ:「タグによるおすすめで足りるか」。もう一つ:「戻れるか」。答え:コピー上だけで動かすなら、戻れる。
月曜 09:30 記事20本のサンプルデータで、動く最小のものを、分けた環境で作る。
月曜 11:00 チームで結果を見て、変更を読み、一人がコードを見ずに、なぜその結果になったかを説明し直す。
火曜 結果をもとに方向を捨てるか続けるかを決め、必要ならそこでライブラリを比べる。

やり方三は「行き当たりばったり」でも「考え続ける」でもありません。やはり考えていますが、目に見えるものを使って考え、やはり動いていますが、失敗しても戻せる場所で動いています。この場面はあくまで例です。現実とのつながりは上の結果です。当事者の「速くなった」という感覚は測定とずれうること(METR)、AIがあるとコードが危なくても自信が増しうること(Perry)。だからやり方三にはさらに二つの作業があります。AIが作ったものを確認することと、実際の時間を記録することです。


9. 小さなループ(私の意見)#

これは研究結果ではありません。上の内容を習慣にまとめた、私のやり方です。

  1. 問いを一つ、そして戻れるかの問い。 本当に知りたいことを、「はい」か「いいえ」で答えられる一文で書く。次に問う:やったあとに戻れるか。戻れないなら、止まって考え、先にバックアップする。
  2. 1時間で、最小の作業を、分けた環境で。 いちばん不格好でも動くものが、いちばんきれいな計画に勝ります。AIはやることに使い、やることについて話すだけに使わない。仕事に必要以上の権限を与えない。
  3. 確認してから、見ずに説明し直す。 AIが変えた部分を読み、動かしてみる。次に画面を閉じて、どう動くかを自分の言葉で話すか書く。つまずいたところが、まだ分かっていないところです。
  4. 測る。 予想時間と実際の時間を書く。
  5. 決めて記録する。 捨てる、続ける、方向を変える。理由を一行添える。

測る作業は小さな表でできます。ずれの式は**(実際 引く 予想)割る 予想**です。

作業 予想(分) 実際(分) ずれ
ログインのバグ修正 30 45 (45 - 30) / 30 = +50%
紹介ページを書く 60 55 (55 - 60) / 60 = 約 -8%
検索フィルターを追加 90 150 (150 - 90) / 90 = 約 +67%

表のデータは、ご自分で計算し直せる例です。数週間記録すると、自分の感覚がどちらにずれるか、どの作業をAIに任せ、どれを自分でやるべきかが見えてきます。

考えるだけで動いていない5つのサイン:

  • 計画書の版数が、試し実行の回数より多い。
  • 同じ質問を言い方を変えてAIに聞き直し、答えが「確か」になることを期待している。
  • 読んで分かった気になるが、他の人に説明し直せない。
  • 保存した記事、講座、「あとで読む」タブが、試したことより多い。
  • 始めようとするたびに、「もう少し調べてから」と感じる。

考えずに動いている5つのサイン:

  • 変更を読まずに、承認ボタンを押している。
  • 「便利だから」と、本物のデータでそのまま試している。
  • 壊れたときの戻し方を知らない。
  • 仕事に必要以上の権限を、エージェントに与えている。
  • 動いたから終わり、そして誰もなぜ動くのか説明できない。

10. バランスの取れた見方#

  • 多くの研究は、小さいか、自己申告か、ベンダーのものか、新しいものです。 METRは16人で2025年前半の道具、Anthropicはライブラリが一つ、Microsoftは自己申告、MITは査読前、Gerlichは相関、Veracodeはセキュリティ会社の報告、PearceとPerryは2021年と2022年のモデルです。
  • Replitの件は報道に基づきます。 一件の事故で、報道とインシデントのデータベースを通した話であり、細部は異なります。
  • 私の主張に合う研究を選んだかもしれません。 速くなったというCopilotの試験を加えてバランスを取りましたが、別の人なら別の選び方をするでしょう。
  • よく考えることは必要です。特に一方通行の扉では。 セキュリティ、お金、健康のようなリスクの高い仕事は、立ち止まって考え、確認する価値があります。Microsoftの調査の回答者自身も、重要な作業には労力を増やしたと述べています。
  • AIは学びを助けることもあります。 Anthropicの試験では、概念の質問をした人のほうが知識をよく保っていました。使うかどうかより、使い方が重要です。
  • 小さなループと四つの枠の地図は法則ではありません。 触る前に1週間の学習が必要な仕事もあれば、戻せるのですぐやるべき仕事もあります。私が避けたいのは、計画一般や試すこと一般ではなく、試すことの代わりに計画すること、確認することの代わりに試すことです。

11. おわりに#

AIは考えた成果物を安くし、実行も安くしました。安くならなかったのは、本当に理解すること、確認すること、そして何も壊さずに現実で動くと知ることです。そこから二つの罠が生えます。流れるような一枚の紙を手にして半分来たと信じるか、よさそうに見えるものを実行して正しいと信じるか。

二つの罠は同じ方法でほどけます。考えることと動くことのあいだのループを短くし、動く前に「戻れるか?」と問うことです。

今日の小さな一歩:計画しようとしていること、またはAIに丸ごと任せようとしていることを一つ選びます。「やったあとに戻れるか?」と問います。失敗しても困らない場所で、1時間で最小のものを作り、AIが作ったものをよく読み、画面を見ずに自分の言葉で説明し直してください。予想時間と実際の時間を書きます。その数字は、感覚よりも多くを語ってくれます。


参考資料#

上の数字を引用する前に、原論文を開いてください。

よくある質問

AI時代に「考えるだけで動かない」とはどういうことですか
AIで計画や要約や説明をとても速く手に入れ、そこで止まって、進んだ気になることです。流れるような説明は理解の証明にならず、きれいな計画は動く証明にもなりません。実際に試して初めて分かります。
AI時代に「考えずに動く」と、何が危ないのですか
AIが作ったものを、理解も確認も戻し方も分からないまま実行したり受け入れたりすることです。スタンフォードの試験(Perryら)では、AIアシスタントのある人は安全性の低いコードを書いたのに、自信は強くなっていました。Veracodeの報告(2025年)では、課題の45%でセキュリティ上の欠陥が見つかりました。標本が小さいかベンダーの報告なので、引用の前によく読んでください。
AIを使うとプログラマーは遅くなりますか
一つの答えはありません。METRの試験(2025年)では、経験豊富な開発者16人が慣れたプロジェクトでAIを使うと19%遅くなり、本人たちは20%速くなったと感じていました。一方、Copilotの他の実験では速くなる結果も出ており、たとえば3つの現場実験で完了タスクが約26%増えています。人、作業、道具によって変わります。
AIを使うと学ぶ力は下がりますか
使い方しだいで下がりえます。Anthropicの試験(2026年)では、新しいライブラリをAIと学んだ開発者52人のクイズ得点は、手で書いた人より低くなりました(約50%対65から67%)。作業中に概念の質問をした人は、より多く身につけていました。標本は小さく、ライブラリも一つです。
この二つの罠を避けるために、今日できることは何ですか
計画しようとしていること、またはAIに丸ごと任せようとしていることを一つ選びます。やったあとに戻れるかを問い、失敗しても困らない場所で1時間で最小のものを作り、AIが作ったものをよく読み、画面を見ずに自分の言葉で説明し直します。予想時間と実際の時間を記録してください。