- 大規模言語モデル（LLMs）の予測能力を評価したところ、UCLの研究者らはAIモデルが人間の専門家よりも提案された神経科学研究の結果をより正確に予測できることが分かった。
- 研究結果は、LLMsが神経科学の研究結果を予測する能力において、人間の専門家に比べて平均81.4％の正確さで圧倒したことを示している。
- UCLの研究者は、神経科学のためのベンチマークであるBrainBenchを開発し、171人の神経科学の専門家と15の汎用LLMsの予測能力を評価した。
- 研究結果によると、LLMsの精度は常に人間の専門家を上回り、特定の神経科学領域に最も精通している専門家でも66％の精度でLLMsに及ばなかった。
- 研究者は、BrainGPTという新しいLLMを開発し、これを神経科学の文献から訓練されたMistralの既存バージョンを用いて作成した。BrainGPTモデルは86％という更なる高い精度を示した。
- 研究の発見は、予測的人工知能技術が神経科学プロセスを向上させ、科学的進歩を加速する可能性を示唆している。
私の考え：この研究は、AIが神経科学に応用されることで科学的進歩を加速させる可能性を示しています。LLMsが人間の専門家よりも高い精度で研究結果を予測できることが明らかになりました。これは、研究者が実験を選択し、限られたリソースを最適に活用する際に役立つ可能性があります。
元記事: https://www.eweek.com/news/ai-prediction-model-outperforms-neuroscientists/