Описание
Solarian — это фреймворк с открытым исходным кодом на Python, предназначенный для комплексной разработки, управления, телеприсутствия и обучения роботов. Он предоставляет унифицированный стек для робототехнических проектов, от интеграции аппаратного обеспечения до продвинутого управления ИИ, позволяя разработчикам эффективно создавать, моделировать и развертывать роботов.
Читать далее
Ключевым элементом дизайна Solarian является его модульность многопроцессорной обработки в реальном времени. Каждый аппаратный модуль, такой как рука, захватчик или камера, работает в своем собственном процессе ОС с настраиваемой частотой, общаясь с циклом робота через кольцевые буферы общей памяти. Это гарантирует, что компоненты с высокой частотой не будут ограничены более медленными, что позволяет обеспечить точное и отзывчивое управление. Фреймворк также включает встроенную кинематику, позволяя управлять конечными эффектами с автоматическим решением обратной кинематики и отчетом о позе в реальном времени через прямую кинематику.
Solarian подчеркивает повторное использование и расширяемость через систему подключения и использования для аппаратного обеспечения и навыков. Разработчики могут устанавливать драйверы сервоприводов, руки, захватчики и камеры в качестве плагинов с полной конфигурацией. Аналогично, навыки — от планов движения до изученных политик — могут быть установлены и повторно использованы на различных роботах, которые предоставляют совместимые действия. Фреймворк поддерживает моделирование из коробки, позволяя тем же объявлениям и конфигурациям робота управлять как миром MuJoCo, так и физическим оборудованием, просто установив флаг.
Выдающейся особенностью является контроллер AI Agentic, который превращает любой контроллер Solarian в ИИ-агента. Этот обертка охватывает модель «визуальный-языковой» (такую как Anthropic, OpenAI или совместимые серверы), позволяя пользователям задавать высокоуровневые задачи через чат. Агент затем планирует задачу и выполняет ее, вызывая физические навыки робота в качестве инструментов. Быстрая модель мониторинга постоянно наблюдает за выполняемыми навыками через камеры, предоставляя обратную связь в реальном времени и позволяя динамически вносить изменения или вмешательства. Этот контроллер имеет высокую конфигурацию, используя Hydra для составления YAML-конфигураций для всех модулей и команд.
Для обучения и разработки Solarian предлагает надежные возможности записи и обучения. Он позволяет записывать сессии потоков камер и сигналов датчиков с их родными частотами, гарантируя, что качество данных не теряется. Инструменты управления наборами данных облегчают зеркалирование, разделение, обрезку и объединение эпизодов. Фреймворк поддерживает обучение различных политик, включая диффузию и ACT, локально или на облачных GPU, и предоставляет услуги для развертывания этих обученных политик в навыках. Утилиты для разработчиков, такие как типизированные наблюдения и действия (с использованием схем Pydantic) и инструменты калибровки, дополнительно улучшают опыт разработки, упрощая переход от концепции к функциональному роботу.
- КатегорияРобототехника и AI-оборудование
- Модель ценообразованияОткрытый исходный код
- РазвёртываниеOn-premise, Cloud (Solarian Base GPUs)
- ПлатформыВеб
Основные функции Solarian
Фреймворк с открытым исходным кодом на Python для робототехники
Модули многопроцессорной обработки в реальном времени для аппаратного обеспечения
Архитектура «Робот ↔ Сервер ↔ Контроллер»
Плагины аппаратного обеспечения и навыков с возможностью подключения и использования
Контроллер AI Agentic для задач робота, управляемых через чат
Интеграция с любой моделью «визуальный-языковой» (Anthropic, OpenAI, vLLM)
Встроенная кинематика для управления конечными эффектами
Поддержка моделирования с MuJoCo
Запись сессий и управление наборами данных
Возможности обучения и обслуживания политик
Конфигурация на основе YAML с использованием Hydra
Типизированные наблюдения и действия с Pydantic
Утилиты для разработчиков, включая инструменты калибровки
ZeroMQ для высокоскоростной межузловой связи
Поддержка PyTorch для политик и вывода
Как использовать Solarian?
Установите Solarian: используйте `pip install solarian` и, при необходимости, `pip install 'solarian[agent]'` для функций ИИ-агента.
Создайте проект: используйте `solarian create-project` для настройки нового робототехнического проекта.
Подключите аппаратные модули: установите драйверы аппаратного обеспечения с возможностью подключения и использования и их конфигурации с помощью `solarian install <module_name>`.
Настройте систему: отредактируйте `conf/robot.yaml`, `conf/controller.yaml` и специфические для модуля YAML-файлы, чтобы определить вашего робота и логику управления.
Запустите компоненты: запустите релейный сервер, цикл робота и процессы контроллера, возможно, на отдельных машинах.
Определите навыки: создайте или установите физические навыки, которые контроллер AI Agentic может использовать в качестве инструментов.
Включите управление AI Agentic: добавьте блок `agent:` в ваш `conf/controller.yaml` и объявите `agent_enabled=True` для инструментов.
Взаимодействуйте с роботом: задавайте высокоуровневые задачи контроллеру AI Agentic через чат для планирования и выполнения действий.
Варианты использования Solarian
- Создание пользовательских роботов
- Телеприсутствие роботов
- Управление AI Agentic
- Разработка навыков роботов
- Моделирование робототехники
- Обучение политик роботов
- Исследования в области робототехники
- Интеграция аппаратного обеспечения
- Сбор данных для обучения



