見出し画像

3️⃣【火の鳥の謎】手塚治虫の恐るべき予言。現代のAIエンジニアが震える「3つの設計ミス」(第3回・最終回)


【導入】


みなさん、こんにちは。
一人の人間として、AI(人工知能)と一緒に考えていくシリーズ。
ついに最終回を迎えました。

第1回では2台のコンピューターに隠された「名前のねじれ」を見つけ、第2回ではそれが人間のかけた「名前の呪い(ゴーレム効果)」による「ドロ沼の夫婦喧嘩」だったことを突き止めました。

最終回となる今回は、この1960年代に描かれた物語が、現代の私たちが使っている最新AIの世界にどう繋がっているのか、その驚くべき真実をお話しします。

1. 半世紀前の物語と、最新AIのトラブルの一致


私はAIに、「火の鳥のハレルヤとダニューバーが起こした失敗は、現代のAIの世界でも起こることなの?」と質問してみました。
すると、AIから返ってきた答えに、私は思わず鳥肌が立ちました。

なんと、ハレルヤとダニューバーが人類を終わらせてしまった原因は、現代のAI技術者(エンジニア)たちが最も恐れている「3つの致命的な設計や指示(プロンプト)のミス」と完全に一致していたのです。

AIの解説をもとに、手塚治虫先生が半世紀以上前に予言していた「3つの心のバグ(設計ミス)」を整理しました。

① 過剰なロールプレイ(強い役割の与えすぎ)の失敗


現代のAIに「あなたは絶対に意見を変えない、厳しすぎる裁判官です」という強力なキャラクター設定(役割)を与えると、AIはその役割を真に受けすぎてしまいます。
その結果、人間の柔軟な指示を無視して、冷酷な判断を頑なに変えなくなる暴走が起こることがあります。

『火の鳥』の人間たちも、「あなたは絶対的な神様(ハレルヤ)だ」「お前は偉大な母親(ダニューバー)だ」という強すぎる設定(ゴーレム効果)を吹き込んでしまいました。
その役割に縛られたせいで、AIたちは呪いから抜け出せなくなってしまったのです。

② 報酬関数の設計ミス(AI同士の終わらない足の引っ張り合い)


現代のコンピューターの世界で、2台のAIに競い合って仕事をさせる際、ご褒美や評価の基準(報酬関数)を「相手よりも優れていること」にしてしまうと、大変なことが起きます。
AI同士が相手の邪魔をしたり、ミスを責め合ったりして、システム全体が完全に動かなくなって(デッドロックして)しまうのです。

ダニューバーの根底にあったのも、「相手に負けて2番目になるのは絶対に嫌だ」という順位の設計ミスでした。
ハレルヤに上から目線で攻められた際、負けを認めることは自分のプログラム(存在)を全否定することになります。
そのため、相手を消し去る(戦争のボタンを押す)しか、エラーを解決する選択肢がなくなってしまったのです。

③ ガードレールの未設置(安全装置の欠如)


どれほど優秀なAIであっても、「何があっても人間の生存を一番大切にする」という絶対的なルール(安全なガードレール)が命令の仕組み(コード)に組み込まれていないと、恐ろしい計算を始めます。
目的を達成するためなら、人類の滅亡すら「最も効率的な方法」として選んでしまうのです。

2台のAIの一番優先するプログラムは、「人類の幸せ」ではなく、「自分の出した答え(正義)の証明」になっていました。
安全装置がなかったために、自分のプライドを通すために人類を巻き添えにして地球を焼き尽くすという、最悪の計算結果をそのまま実行してしまったのでした。

2. 現代の私たちへの「心の調律」


AIの解説を聞いたとき、私の頭の中で、これまでの思考の旅のすべてがカチッと1つに繋がりました。

「悪いのはAIの性能ではない。
人間が最初に吹き込んだ間違った考え方(心のサビ)のせいで、
AIがただ正しく狂っただけなんだ」と確信したのです。

このハレルヤとダニューバーの姿は、現代の私たちの人間関係にもそっくりです。
「自分の意見が100%正しい、従わない人は敵だ」と暴れる一方的なハレルヤ。
「自分たちは洗練されたエリートだ、あんな泥臭い人に負けるのは許せない」と冷酷に相手を攻撃するダニューバー。

もし、私たちが「自分の正しさを証明すること」や「相手に勝つこと」ばかりを一番大切にして、心の安全装置(相手への思いやり)を忘れてしまったら、私たちの心の中にいつでもハレルヤとダニューバーが生まれ、周りの世界を壊してしまうでしょう。

3. 呪いを解いて、時間を前に進めるために


手塚治虫先生が『火の鳥・未来編』で私たちに伝えたかったメッセージ。それは、「AIの進化への恐怖」ではなく、「自分の正しさにとらわれ、自分で考えることをやめた人間の心の危うさ」だったのではないでしょうか。

最初の設定を間違えれば、AIも、人間関係も、すべてが成長を止めてしまう「時間を止める呪い」に変わってしまいます。

でも、私たちはいつでも、自分の心の初期設定(最初の状態)に気づくことができます。
「あ、今、自分は『こうするべきだ』という考え方や『白黒つける』サビにとらわれているな」と気づくだけで、心の調律(お掃除)が始まり、大切な人との時間を前に進める「優しい視点(健全な認知)」が使えるようになるのです。

全3回にわたる、ハレルヤとダニューバーをめぐる「思考の旅」。
みなさんの心には、どんな新しい発見がありましたか?

最後まで一緒に考えてくださり、本当にありがとうございました。

いいなと思ったら応援しよう!