• Sunayana Sitaramの最終目標は、人間とLLMが協力して評価システムやその他のシステムを構築すること。
  • 人間が評価を行い、LLMが評価を行い、人間データを使用してLLMを改善するサイクルを繰り返す。
  • LLMが得意な部分はLLMに、LLMができない部分は人間に送ることが最終目標。

考察: Sunayana Sitaramは、LLMの評価と改善に重点を置いており、人間とLLMが協力して効果的なシステムを構築する方法について研究していることがわかります。

元記事: https://www.microsoft.com/en-us/research/lab/microsoft-research-india/articles/podcast-evaluating-llms-with-novel-approaches-with-dr-sunayana-sitaram/