説明
Solarianは、ロボットの包括的な開発、制御、遠隔操作、トレーニングのために設計されたオープンソースのPythonフレームワークです。ハードウェア統合から高度なAI制御まで、ロボティクスプロジェクトのための統一スタックを提供し、開発者がロボットを効率的に構築、シミュレーション、展開できるようにします。このフレームワークは、ロボット、サーバー、コントローラーの3つのノードアーキテクチャを中心に構築されており、それぞれが異なるマシン上で別々のプロセスとして実行できます。
続きを読む
Solarianの設計の鍵は、リアルタイムのマルチプロセスモジュール性です。アーム、グリッパー、カメラなどの各ハードウェアモジュールは、設定可能なレートで独自のOSプロセスで動作し、共有メモリリングバッファを介してロボットループと通信します。これにより、高頻度のコンポーネントが遅いコンポーネントによってボトルネックされることがなく、正確で応答性の高い制御が可能になります。このフレームワークには、組み込みの運動学も含まれており、逆運動学の自動解決と前方運動学を通じたライブポーズ報告により、エンドエフェクターのコマンドを可能にします。
Solarianは、ハードウェアとスキルのプラグアンドプレイシステムを通じて再利用性と拡張性を強調しています。開発者は、サーボドライバー、アーム、グリッパー、カメラをプラグインとしてインストールし、構成を完了できます。同様に、動作計画から学習したポリシーまでのスキルは、互換性のあるアクションを公開する異なるロボット間でインストールおよび再利用できます。このフレームワークは、シミュレーションを標準でサポートしており、同じロボットの宣言と構成を使用して、フラグを設定するだけでMuJoCoの世界または物理ハードウェアを駆動できます。
際立った機能はAIエージェントコントローラーであり、これにより任意のSolarianコントローラーがAIエージェントに変換されます。このラッパーは、視覚言語モデル(Anthropic、OpenAI、または互換性のあるサーバーなど)を取り囲み、ユーザーがチャットを介して高レベルのタスクを指示できるようにします。エージェントはタスクを計画し、ロボットの物理的スキルをツールとして呼び出すことによってそれを実行します。高速モニターモデルは、カメラを通じて実行中のスキルを継続的に観察し、リアルタイムのフィードバックを提供し、動的な調整や介入を可能にします。このコントローラーは非常に構成可能で、すべてのモジュールとコマンドにわたって構成されたYAMLを利用するためにHydraを使用します。
学習と開発のために、Solarianは堅牢な録画およびトレーニング機能を提供します。カメラフィードとセンサー信号のセッション録画をそのネイティブレートで行うことができ、データ品質が失われることはありません。データセット管理ツールは、エピソードのミラーリング、分割、トリミング、マージを容易にします。このフレームワークは、拡散やACTなどのさまざまなポリシーのトレーニングをサポートし、ローカルまたはクラウドGPUで実行でき、これらのトレーニングされたポリシーをスキルに展開するためのサービスを提供します。開発者ユーティリティには、型付きの観察とアクション(Pydanticスキーマを使用)やキャリブレーションツールが含まれており、概念から機能するロボットへの移行を容易にします。
- カテゴリーロボティクスと AI ハードウェア
- 料金モデルオープンソース
- デプロイOn-premise, Cloud (Solarian Base GPUs)
- プラットフォームWeb
Solarianの主要機能
ロボティクスのためのオープンソースPythonフレームワーク
ハードウェア用のリアルタイムマルチプロセスモジュール
ロボット↔サーバー↔コントローラーアーキテクチャ
プラグアンドプレイのハードウェアおよびスキルプラグイン
チャット駆動のロボットタスクのためのAIエージェントコントローラー
任意の視覚言語モデル(Anthropic、OpenAI、vLLM)との統合
エンドエフェクター制御のための組み込み運動学
MuJoCoによるシミュレーションサポート
セッション録画およびデータセット管理
ポリシートレーニングおよび提供機能
Hydra駆動のYAML構成
Pydanticによる型付きの観察とアクション
キャリブレーションツールを含む開発者ユーティリティ
高スループットのノード間通信のためのZeroMQ
ポリシーと推論のためのPyTorchサポート
Solarianの使い方は?
Solarianをインストール: `pip install solarian`を使用し、オプションでAIエージェント機能のために`pip install 'solarian[agent]'`を使用します。
プロジェクトをスキャフォールド: `solarian create-project`を使用して新しいロボティクスプロジェクトを設定します。
ハードウェアモジュールを接続: プラグアンドプレイのハードウェアドライバーとその構成を`solarian install <module_name>`を使用してインストールします。
システムを構成: `conf/robot.yaml`、`conf/controller.yaml`、およびモジュール固有のYAMLファイルを編集してロボットと制御ロジックを定義します。
コンポーネントを実行: リレイサーバー、ロボットループ、コントローラープロセスを開始し、必要に応じて別々のマシンで実行します。
スキルを定義: AIエージェントコントローラーがツールとして使用できる物理的スキルを作成またはインストールします。
AIエージェント制御を有効にする: `conf/controller.yaml`に`agent:`ブロックを追加し、`agent_enabled=True`ツールを宣言します。
ロボットと対話: チャットを介してAIエージェントコントローラーに高レベルのタスクを指示し、アクションを計画および実行します。
Solarianの使用例
- カスタムロボットの構築
- ロボットの遠隔操作
- AIエージェント制御
- ロボットスキルの開発
- ロボティクスシミュレーション
- ロボットポリシートレーニング
- ロボティクス研究
- ハードウェア統合
- 学習のためのデータ収集



