写真:Billion Photos / shutterstock
人類が生み出したLLM。だが、人類はその正体をちっとも理解できていない
2023.04.06
Updated by WirelessWire News編集部 on April 6, 2023, 07:01 am JST
写真:Billion Photos / shutterstock
2023.04.06
Updated by WirelessWire News編集部 on April 6, 2023, 07:01 am JST
昨今、ChatGPTを筆頭とする、いわゆるLLM(Large Language Model)の話題がかまびすしい。人類が生まれて初めて、人間以外で「人間らしく」会話できる機械(というかアプリケーション)を手にしたのだから、無理もない。
この2022年とか2023年という年は人類の歴史にとって永遠に記憶に残る年、いわばポスト○○みたいな○○に何かが入って節目となるような(「ポストコロナ」とか「ポスト冷戦」みたいな)数年になるだろう。○○の「前」の時代には永遠に戻らない、というような。
今のところ○○にどんな単語を入れればいいか、僕もまだ決めかねてはいるのだが、今日はLLMが人類にもたらすインパクトについて語りたいわけではない。もっと理学的な話、しいて言えば、科学的探求の対象としてのLLMの価値について、である。
LLMは紛うことなき人類の創生物である。人類の知性が無から生み出した存在であることは間違いない。だが、その一方、人類はLLMをちっとも理解できていない、と言ったら驚くだろうか?
ロボット工学の三原則で名高いSF作家のアシモフは、ロボットが登場するミステリ(いわゆる推理小説)の作家としても名を馳せた。実はアシモフには「黒後家蜘蛛の会シリーズ」という、SF作家としての名声が無くてもそれだけで十分に歴史に残れるミステリの名作シリーズがあるくらいなので、ミステリを書くことは彼にとって造作もないことだった。
だが、それにしてもロボットが出てくるミステリはそのままでは成り立つのが難しい。ロボットが現場の目撃者だとしてその頭をパックリ開いたら犯行の一部始終が録画されていました、というのではミステリが成立しないからだ。この困難を乗り越えるため、アシモフはあろうことか、自らが設定したロボットの頭脳たるポジトロン頭脳を「設計者も容易にその動作原理が解らない代物」と設定した。いくらなんでも無理があるだろう(とこの小説を初めて読んだ時中学生か高校生だった僕も)と思ったものだが、現実のLLMも出来上がってみれば似た様なものになった。
LLMがここまで人々を惹きつける理由
最新型のLLMであるGPT-4が持っているパラメータ数は100兆個(!)とも言われている。勿論、ポジトロン頭脳にはならざるLLMの「中身」を人間は自由に見ることができるのだが、100兆個のパラメータの「値」がわかっても「なぜ、GPT-4は難しい質問に専門家張りの答えを(時に)返せるのか?」という問いに応えられる人類は、今のところこの世界に存在しない。
実際にLLMが課せられているのは、文章の一部の意図的に隠されたところを当てる「穴埋め問題」とか、どの文章がどの文章の次に来るかという「文章の連続問題」に過ぎないので、それを学んだだけ(正確にはファインチューニングと言って目的に応じた「軽い」追加的な学習は必要である)でそんな器用なことができるのか、本当のところを理解している人はいないのである。
そんな馬鹿な、と思う人もいるかもしれないが、実はこの現象は人知れず人類は経験済みなのである。
※本稿は、モダンタイムズに掲載された記事の抜粋です(この記事の全文を読む)。
この筆者の記事をもっと読む
「本当のDX」を考えるウェブメディア『モダンタイムズ』
おすすめ記事と編集部のお知らせをお送りします。(毎週月曜日配信)
登録はこちら