AI時代に言語学の存在の意味はあるのか？

AIブームは人工知能という言葉が生まれた1950年代から3回あった。第1のブームは1980年代の古典的人工知能だったが、これは完全な失敗に終わった。第2は2000年代に深層学習（ニューラルネット）が話題になったときで、画像処理や音声認識ができるようになった。

しかし人間の知能のコアは言語であり、言葉を理解する自然言語処理はニューラルネットではできなかった。東大の入試問題を解かせようとした東ロボくんも挫折し、自然言語処理には絶対的な限界があると思われていた。

ところが本書が出版された2023年に登場したチャットGPTは、その状況を大きく変え、第3のブームを生んだ。ニューラルネットで自然言語を処理する大規模言語モデルが実用化したのだ。本書はそのインパクトを言語学の立場から語っている。

ここ半世紀の言語学は、チョムスキーの生成文法とそれ以外の異端派の戦いだったが、異端派は1990年代から認知言語学と名乗るようになった。その特徴は

• 文法と語彙の区別を認めない
  
• 言葉の意味は文脈で決まるという使用ベースモデル
  
• 文法は経験的なパターン認識で決まるというスキーマ理論

これはLLMとまったく同じである。それは認知言語学の影響を受けたのだろうか。GPTに聞いてみた。

続きは4月7日（月）朝7時に配信する池田信夫ブログマガジンで（初月無料）