これまでのところ、「満足のいくよく書かれた中長の物語を語ること」は、数学的証明、音楽生成、研究報告書、コード、その他多くの仕事よりもLLMにとってはるかに難しいことが証明されています。 技術的な理由はかなり明確ですが、それらは言語モデルであるはずです
大きな理由の一つは、本当に良い文章を検証するのが難しいため、良い強化学習ができないことです。 しかし、上記のツイートは今年中に引用され、LLMがゼロから作成した非常に良い文章の例を引用してツイートされるのではないかと推測しているので、どうなるか見てみましょう。
75