- 東京大学のJSKロボティクス研究室の研究者たちは、AIを活用したロボット調理システムを開発
- AIはレシピを使って卵を焼くことができる
- レシピ説明を入力し、それをLLMによって関数のシーケンスに変換
- PDDL記述の古典的な計画によって実行可能なアクション手順が計画される
- VLMを使用して学習した食品状態認識によって、材料の状態変化を認識しながらロボットが調理アクションを実行
- 事前定義されたアクション軌道を使用して動きを実行
この研究では、AIを活用したロボット調理システムが開発され、レシピに基づいて効率的に調理が行えることが示されました。このシステムは、レシピ説明を入力し、それを関数のシーケンスに変換するLLMを使用しています。さらに、PDDL記述による古典的な計画によって実行可能なアクション手順が計画され、VLMを使用した食品状態認識によって材料の状態変化を認識しながら調理アクションが実行されます。事前に定義されたアクション軌道を使用して、ロボットがスムーズに動作することが確認されています。
元記事: https://www.techeblog.com/ai-robot-cooking-system-egg/