- LLM（large language models）によって生成されたアイデアは、人間の専門家よりも著しく新しいと評価された。
- 100人以上のNLP研究者に新しいアイデアを考えさせ、LLMによって生成されたアイデアと人間によって生成されたアイデアをレビューさせた結果、LLMのアイデアがより革新的であるとされた（統計的有意性あり、p < 0.05）。
- LLMは新しいアイデアを生成するのが比較的簡単であり、広範囲なデータセットでのトレーニングと様々なコンセプトの組み合わせ能力によるもの。
- OpenAIは、推論能力が向上したと期待される新しいモデルであるStrawberryをリリースする準備を進めている。
- LLMは、様々な分野や無関連のデータポイント間でつながりを作り出す能力を持ち、これは人間の専門家には直感的で即座に明らかにならない可能性のあるもの。
LLMは新しい革新的アイデアを生成することにおいて有用であるが、高度な推論には依然として課題が残っている。
私の考え：LLMは大規模なデータセットでのトレーニングと様々なコンセプトの組み合わせ能力を活かし、新しいアイデア生成において人間の専門家よりも優れていることが示されました。一方、推論能力には課題がありますが、OpenAIなどがその改善に取り組んでいることが示唆されています。LLMは異なる分野やデータポイントを結びつけることができるため、革新的なアイデアを生み出す可能性があります。しかし、深い、ニッチな、基本的なブレークスルーには依然として限界があるようであり、人間とLLMの強みを組み合わせることで、未来の研究に興味深い展開が期待されます。