Описание
Hi Pikoo — это AI-агент-питомец для семьи с открытым исходным кодом, созданный для того, чтобы быть знакомым компаньоном в доме. Работая на Live моделях, он обладает функциями локального пробуждения, выразительными двойными глазами и возможностью вести живые беседы. Проект побуждает пользователей создавать и настраивать своего собственного AI-питомца, начиная с симулятора и переходя к физическому устройству.
Читать далее
Основной опыт сосредоточен вокруг естественных, плавных бесед. Hi Pikoo может следовать контексту, не требуя, чтобы каждая мысль была отдельной командой, и он сохраняет общие темы и значимые детали в ходе взаимодействий, позволяя пользователям продолжать с того места, где они остановились. Он также может работать совместно, используя настроенные инструменты для поиска информации или выполнения задач.
Архитектура системы состоит из устройства, сервера и модели. Устройство, обычно представляющее собой плату Waveshare ESP32-S3 DualEye, обрабатывает захват аудио, воспроизведение ответов и выражения глаз на своих двух круглых экранах. Qwen Audio Agent 2.0.1 компилирует свой собственный Live Provider, делегирование Terra, сессии, семейную память и инструменты в режиме выполнения. Live управляет речью, в то время как Terra обрабатывает делегированные задачи и фоновые операции. Шлюз сохраняет текст, резюме и списки, при этом ключи и профили семьи остаются на сервере пользователя.
Управление памятью является сложным, различая недавний текст для восстановления тем, дайджесты для связанной истории и долгосрочную память для подходящих семейных фактов. Отдельные списки ведутся для покупок и дел. Terra может использовать настроенный поиск, чтение публичных страниц и семейные списки, с возможностью добавления дополнительных инструментов MCP для расширенной функциональности. Проект является открытым исходным кодом, оригинальный код, графика и документация лицензированы под Apache-2.0, в то время как веса пробуждения и прошивка с моделями имеют отдельные некоммерческие условия.
Разработка Pikoo модульная, позволяя пользователям выбирать конкретные компоненты для изменения, такие как логика устройства, выражения глаз или сервер агента. Проект также предоставляет STL-файлы для 3D-печати корпуса в форме кошачьей мордочки. Хотя пользователям необходимо подготовить оборудование, развернуть сервисы и настроить систему, это предоставляет уникальную возможность создать персонализированного AI-компаньона. Реальные разговоры с моделями и онлайн-инструменты требуют сетевого подключения, а текущие расходы зависят от выбранных моделей, серверов и внешних сервисов. Данные семьи, включая память и голос, управляются развернутым сервером пользователя и настроенной службой модели.
- КатегорияКонструкторы AI-агентов
- Модель ценообразованияОткрытый исходный код
- РазвёртываниеDIY / Self-Hosted
- ПлатформыNode.js, Bash, C++17
Основные функции Hi Pikoo
Семейный AI-агент-питомец
Работа на Live моделях
Обнаружение локального пробуждающего слова
Выразительные двойные глаза
Возможности живого общения
Следит за контекстом беседы
Сохраняет общие темы и память
Настраиваемые инструменты для задач и информации
Поддержка платы Waveshare ESP32-S3 DualEye
Время выполнения Qwen Audio Agent 2.0.1
Делегирование Terra для фоновых задач
Шлюз для сохранения текста, резюме и списков
Отдельные роли для контекста, памяти и списков
Настраиваемый поиск и чтение публичных страниц
DIY проект с открытым исходным кодом
Модульная разработка для устройства, глаз и сервера
Дизайны корпусов для 3D-печати
Как использовать Hi Pikoo?
Подготовьте оборудование: приобретите плату Waveshare DualEye, подходящий динамик и USB-источник питания.
Установите программное обеспечение: убедитесь, что установлены Node.js 24+, npm, Bash и компилятор C++17.
Запустите демонстрацию глаз: начните оффлайн-демонстрацию глаз локально, чтобы уточнить выражения и потоки взаимодействия.
Разверните сервер: настройте сервер для запуска агента и управления семейными данными.
Настройте систему: настройте шлюз, службы моделей и внешние инструменты.
Соберите корпус: скачайте и 3D напечатайте предоставленные STL-файлы для корпуса в форме кошачьей мордочки.
Соберите устройство: подключите плату, микрофон, динамик и дисплеи.
Взаимодействуйте: общайтесь с Hi Pikoo через беседы и используйте его настроенные инструменты.
Варианты использования Hi Pikoo
- Семейный компаньон
- Поиск информации
- Управление задачами
- Персонализированная разработка AI
- Исследование открытого AI
