Description
Hi Pikoo est un agent AI familial open-source à faire soi-même (DIY) conçu pour être un compagnon familier à la maison. Alimenté par des modèles Live, il dispose de capacités de réveil local, d'yeux expressifs et de la capacité à engager des conversations en direct.
Lire la suite
Le cœur de l'expérience repose sur des conversations naturelles et fluides. Hi Pikoo peut suivre le contexte sans que chaque pensée doive être une commande distincte, et il conserve les sujets partagés et les détails significatifs à travers les interactions, permettant aux utilisateurs de reprendre là où ils s'étaient arrêtés. Il peut également travailler de manière collaborative, faisant appel à des outils configurés pour trouver des informations ou effectuer des tâches.
L'architecture du système comprend un appareil, un serveur et un modèle. L'appareil, généralement une carte Waveshare ESP32-S3 DualEye, gère la capture audio, la lecture des réponses et les expressions des yeux sur ses deux écrans ronds. Le Qwen Audio Agent 2.0.1 compose son fournisseur Live natif, la délégation Terra, les sessions, la mémoire familiale et les outils en temps réel. Live gère la parole, tandis que Terra s'occupe des tâches déléguées et des opérations en arrière-plan. Une passerelle persiste le texte, les résumés, la mémoire familiale et les listes, avec des clés et des profils familiaux restant sur le serveur de l'utilisateur.
La gestion de la mémoire est sophistiquée, distinguant entre le texte récent pour la restauration des sujets, les résumés pour l'historique lié et la mémoire à long terme pour les faits familiaux appropriés. Des listes distinctes sont maintenues pour les courses et les tâches à faire. Terra peut utiliser des recherches configurées, la lecture de pages publiques et des listes familiales, avec la possibilité d'ajouter d'autres outils MCP pour une fonctionnalité étendue. Le projet est open-source, avec le code original, les graphiques et la documentation sous licence Apache-2.0, tandis que les poids de réveil et le firmware contenant des modèles ont des conditions non commerciales distinctes.
Le développement sur Pikoo est modulaire, permettant aux utilisateurs de choisir des composants spécifiques à modifier, tels que la logique de l'appareil, les expressions des yeux ou le serveur de l'Agent. Le projet fournit également des fichiers STL pour l'impression 3D de l'enveloppe en forme de tête de chat. Bien qu'il nécessite que les utilisateurs préparent le matériel, déploient des services et configurent le système, il offre une opportunité unique de créer un compagnon AI personnalisé. Les conversations en temps réel des modèles et les outils en ligne nécessitent une connectivité réseau, et les coûts d'exploitation dépendent des modèles, serveurs et services externes choisis. Les données familiales, y compris la mémoire et la voix, sont gérées par le serveur déployé par l'utilisateur et le service de modèle configuré.
- CatégorieCréateurs d'agents IA
- Modèle tarifaireOpen Source
- DéploiementDIY / Self-Hosted
- PlateformesNode.js, Bash, C++17
Fonctionnalités principales de Hi Pikoo
Animal de compagnie AI familial
Alimenté par des modèles Live
Détection de mot de réveil local
Yeux expressifs
Capacités de conversation en direct
Suit le contexte de la conversation
Conserve les sujets partagés et la mémoire
Outils configurables pour les tâches et l'information
Support de la carte Waveshare ESP32-S3 DualEye
Exécution du Qwen Audio Agent 2.0.1
Délégation Terra pour les tâches en arrière-plan
Passerelle pour la persistance du texte, des résumés et des listes
Rôles distincts pour le contexte, la mémoire et les listes
Recherche configurable et lecture de pages publiques
Projet open-source à faire soi-même
Développement modulaire pour l'appareil, les yeux et le serveur
Conceptions d'enveloppe imprimables en 3D
Comment utiliser Hi Pikoo ?
Préparer le matériel : Obtenez une carte Waveshare DualEye, un haut-parleur approprié et une alimentation USB.
Installer le logiciel : Assurez-vous que Node.js 24+, npm, Bash et un compilateur C++17 sont installés.
Exécuter la démo des yeux : Démarrez la démo des yeux hors ligne localement pour affiner les expressions et les flux d'interaction.
Déployer le serveur : Configurez un serveur pour exécuter l'Agent et gérer les données familiales.
Configurer le système : Configurez la passerelle, les services de modèle et les outils externes.
Construire l'enveloppe : Téléchargez et imprimez en 3D les fichiers STL fournis pour l'enveloppe en forme de tête de chat.
Assembler l'appareil : Connectez la carte, le microphone, le haut-parleur et les affichages.
Interagir : Engagez-vous avec Hi Pikoo à travers des conversations et utilisez ses outils configurés.
Cas d'utilisation de Hi Pikoo
- Compagnon familial
- Récupération d'informations
- Gestion des tâches
- Développement AI personnalisé
- Exploration AI open-source
