このページは機械翻訳によって英語から日本語に翻訳されました。 英語のオリジナルをご覧ください。

ロボティクスの研究者、アクティブインフェーザーの研究者、制御工学者が統一された感知行動学習アーキテクチャが古典的な制御と再現学習を上回るか補完できるかどうか評価します。

アクティベート・インフェリエンスとロボティクス

ロボットは体の不確実性付き感知者と行動者として、期待自由エネルギー最小化の自然的な試験台である

次の最適な行動

アクティベート・インフェリエンスとロボット工学パスウェイ

このページの最もシグナルの強い公開リンクから始め、関連リソースとディレクトリのビューに進みます。

ロボットは不安定な条件下で、不確実性を考慮に入れた感知、行動、学習を繰り返し行い、ノイズや多様なセンサを使用し、不完全な制御器を使用する——これは自由エネルギー原理がそのような状況を描述するために作られたものだ。不安定な条件下で動作するロボットシステムの状態推定、コントロール、計画、モデル学習を統一するためのアクティブインファーザーという名の文献はまだ少ないですが、理論的な論文から実証的実装まで幅広く存在し、物理的人間oidsとマニピュレータに対する実験も行われている。このページでは、その文献が適用されるパターン、名付けられたツールやラボ、そして強力なデモを通常のエンジニアリングメソッドに昇華するためにはまだ解決すべき問題についてまとめている。

なぜそのドメインが合っている

古典的なロボティクスは、状態推定(Kalman/パーティクルフィルタ)、制御(LQR、MPC、PID)そして、増加するように reinforcement learning をそれぞれのモジュールとして解決します。一方で、Active inference は、単一の生成モデル下での近似ベイジアン推論を用いてこれら三つを統合し、感知と学習に対する variational free energy を最小化することで行動選択を行います。Lanillos および同僚らは、この概念的な統合がロボットが理想的なテストブレッドとなる理由を説明しています:彼らは、不確実なセンサーストリームから隠れた変数(身体構造、物体の状態、ダイナミクス)について信念を維持しなければならず、モデルの期待範囲内で観測値を保持するために行動を行います。Millidge および同僚らの制御が推論である literature の分析は、特定の仮定下で、Active inference ポリシーは標準的な最適制御または reinforcement learning 解決法に帰着することを示し、既存のコントローラーが自由エネルギー最小化の特別なケースとして読み取れるようにします。

文献におけるパターン

生成モデルのロボティクス実装は、一般的に既知の物理法則と運動学に基づいて構築され、学習されたエンドツーendで実装されることが多い: humanoid ボディーペースティングのワークは前進運動学と多モード(視覚/プロポジオシスティック)観察モデルをエンコードし、一方で操作制御者は関節動力学、慣性、接触力などをエンコードする。すると期待自由エネルギーが政策選択を駆動します — Pezzato、Ferrari、Hernándezの適応的操作制御器(IEEE Robotics and Automation Lettersに発表)はオンラインでダイナミック不確実性とセンサ故障に対応し、Baioumy et al. のボールバランスングエージェントは期待自由エネルギーが genuinelyな探査行動を誘発する好奇心のような行動を引き起こします。精度重み付け — 感覚チャネルや事前確信の信頼性に基づいて信頼度を調整すること — この作業では頻繁に現れ、特にFerrariグループのバーターオーロラスキームがセンサ故障を検出し補正する際です。階層的な多レベルアーキテクチャは概念的に議論されるが、具体的な階層化実装は稀で、主にシミュレーション限定的です。

キーコンピュージョンとツール

pymdpは報告の唯一の名付けられた汎用ソフトウェアライブラリであり、Delft工科大学の Riccardo Ferrari のグループによって開発された離散状態(POMDP)アクティブインフェアスのオープンソースPythonパッケージです。この情報はPubMedに掲載されたステップバイステップチュートリアルを通じて紹介されました。Delft工科大学 Riccardo Ferrari のグループは、適応制御(ICRA 2021)、古典的な制御の無偏アクティブインフェアス(IROS 2022)、そしてベータリマージン故障耐性を含む最も継続的な操作制御に関する研究の実装コードが引用されているサイトで生産されています。Pablo Lanillosと協力者(TUミュンヘンと日本ベースのパートナー)は、 humanoidラインをリードしており:物理 humanoidの身体認識と達成、そして鏡自体他者の区別を活性インフェアスとニューラルネットワーク前モデルが組み込まれた自己/他者区分。 Bristolロボティクスラボとアクティブタッチラボは、ベイジアンアクティブセンシング触覚探査システム(指先配列、 whiskers)を提供しており、これは原則として活性インフェアスの原理を体現していますが、常にそのように形式化することはありません。Verses AIのブログ投稿は、工業界での早期の関心を示唆していますが、それは明確にレビューされていないことに注意してください。

未解決の問題

レポートは、以下の5つの未解決の分野にさらなる証拠が必要だと指摘しています:高次元でリアルタイム動作するロボットに対する期待自由エネルギー評価のスケーラビリティ(これまでにはシミュレーションのみで対応されています);物理を手作業で設定した生成モデルと学習されたコンポーネントをバランスよく指定する原理的な生成モデルのスペック;古典的コントローラーと深層 reinforcement learning (RL) とのシステム的な比較 Benchmarking(まだ標準化されたベンチマークセットは存在しません);分布変動下での安全性と堅牢性、Zorzi et al. の DR-FREE フレームワークが提案されていますが物理ロボットへの適用はありません;そしてインstitutional adoption で、アクティブインフェアランスツールチェーンはまだROSや深層学習スタックよりも遠く成熟していません。レポートは明確に多くの主張が質的または証拠の原理的な結果に基づいていることを警告しています。

リファレンス・バックボーン

Christopher L. Buckley, Chang Sub Kim, Simon McGregor, Anil K. Seth (2017). The free energy principle for action and perception: A mathematical review. Journal of Mathematical Psychology. DOI: 10.1016/j.jmp.2017.09.004. Thomas Parr, Giovanni Pezzulo, Karl J. Friston (2022). Active Inference: The Free Energy Principle in Mind, Brain, and Behavior. MIT Press. Giovanni Pezzulo, Francesco Rigoli, Karl J. Friston (2017). Active Inference, homeostatic regulation and adaptive behavioural control. Progress in Neurobiology. DOI: 10.1016/j.pneurobio.2017.08.001. Pablo Lanillos, Cristian Meo, Corrado Pezzato et al. (2021). Active Inference in Robotics and Artificial Agents: Survey and Challenges. arXiv. DOI: 10.48550/arXiv.2112.01871. Lancelot Da Costa, Thomas Parr, Noor Sajid, Sebastijan Veselic, Victorita Neacsu, Karl J. Friston (2020). Active inference on discrete state-spaces: A synthesis. Journal of Mathematical Psychology. DOI: 10.1016/j.jmp.2020.102447.

キーの表面

Active Inferenceとロボティクスを一目で

統合推論ループ

活性化推定、制御、学習を一つの生成モデルに基づく単一のvariational自由エネルギー最適化下で、別々に手で組み込まれたモジュールから再考する。

精密重視の故障耐性

ベータリセブンルアルピクレッシエンルラーニングは、リアルタイムで信頼性の低いセンサチャネルを軽視させることで、センサー故障下でもコントローラのパフォーマンスを維持します。

Mixed 证据品質

発見はpeer-reviewedジャーナルの研究(IEEE RAL、PubMed-indexedチュートリアル)と未レビューのプレプリントや業界ブログ記事(Verses AI)を含み、まだ標準化された比較ベンチマークセットが存在しないアクティブインフェリエンスと古典的な制御やRLとの比較はありません。

関連リソース

このページの公開リンク

外部リンクは共有レジストリから解決されるため、訪問者向け目的地は中央集権的かつ確認可能な状態が保たれます。

Repository / Projects

GitHub organization

Audience: Developer

Public GitHub organization for Institute repositories and open-source work.

projectsgithub-org