설명
Hi Pikoo는 가정에서 친숙한 동반자가 되도록 설계된 오픈 소스 DIY 가족 AI 에이전트 애완동물입니다. Live 모델로 구동되며, 로컬 웨이크 기능, 표현력이 풍부한 이중 눈, 실시간 대화에 참여할 수 있는 능력을 갖추고 있습니다. 이 프로젝트는 사용자가 시뮬레이터로 시작하여 물리적 장치로 발전할 수 있도록 자신의 AI 애완동물을 구축하고 사용자 정의하도록 장려합니다.
더 읽기
핵심 경험은 자연스럽고 유창한 대화에 중점을 둡니다. Hi Pikoo는 모든 생각이 별도의 명령이 될 필요 없이 맥락을 따를 수 있으며, 상호작용 간에 공유 주제와 의미 있는 세부 정보를 유지하여 사용자가 중단한 지점에서 다시 시작할 수 있도록 합니다. 또한 구성된 도구를 호출하여 정보를 찾거나 작업을 수행하는 협업 작업도 가능합니다.
시스템 아키텍처는 장치, 서버 및 모델로 구성됩니다. 장치는 일반적으로 Waveshare ESP32-S3 DualEye 보드로, 두 개의 원형 화면에서 오디오 캡처, 응답 재생 및 눈 표현을 처리합니다. Qwen Audio Agent 2.0.1은 네이티브 Live Provider, Terra 위임, 세션, 가족 기억 및 도구를 런타임에서 구성합니다. Live는 음성을 관리하고 Terra는 위임된 작업과 백그라운드 작업을 처리합니다. Gateway는 텍스트, 요약 및 목록을 지속적으로 저장하며, 키와 가족 프로필은 사용자의 서버에 남아 있습니다.
메모리 관리는 정교하여 주제 복원을 위한 최근 텍스트, 바인드된 기록을 위한 요약, 적절한 가족 사실을 위한 장기 기억을 구분합니다. 쇼핑 및 할 일 목록을 위해 별도의 목록이 유지됩니다. Terra는 구성된 검색, 공개 페이지 읽기 및 가족 목록을 활용할 수 있으며, 기능 확장을 위해 추가 MCP 도구를 추가할 수 있는 옵션이 있습니다. 이 프로젝트는 오픈 소스이며, 원본 코드, 그래픽 및 문서는 Apache-2.0 라이센스 하에 있으며, 웨이크 가중치 및 모델을 포함하는 펌웨어는 별도의 비상업적 조건을 가지고 있습니다.
Pikoo의 개발은 모듈화되어 있어 사용자가 장치 논리, 눈 표현 또는 에이전트 서버와 같은 특정 구성 요소를 수정할 수 있습니다. 이 프로젝트는 고양이 얼굴 인클로저를 3D 프린팅하기 위한 STL도 제공합니다. 사용자가 하드웨어를 준비하고 서비스를 배포하며 시스템을 구성해야 하지만, 개인화된 AI 동반자를 만들 수 있는 독특한 기회를 제공합니다. 실시간 모델 대화 및 온라인 도구는 네트워크 연결을 필요로 하며, 운영 비용은 선택한 모델, 서버 및 외부 서비스에 따라 달라집니다. 가족 데이터, 메모리 및 음성은 사용자가 배포한 서버와 구성된 모델 서비스에 의해 관리됩니다.
- 카테고리AI 에이전트 빌더
- 요금제오픈 소스
- 배포DIY / Self-Hosted
- 플랫폼Node.js, Bash, C++17
Hi Pikoo의 핵심 기능
가족 AI 에이전트 애완동물
Live 모델로 구동
로컬 웨이크 단어 감지
표현력이 풍부한 이중 눈
실시간 대화 기능
대화 맥락을 따름
공유 주제 및 기억 유지
작업 및 정보에 대한 구성 가능한 도구
Waveshare ESP32-S3 DualEye 보드 지원
Qwen Audio Agent 2.0.1 런타임
백그라운드 작업을 위한 Terra 위임
텍스트, 요약 및 목록을 지속적으로 저장하는 Gateway
구별된 맥락, 기억 및 목록 역할
구성 가능한 검색 및 공개 페이지 읽기
DIY 오픈 소스 프로젝트
장치, 눈 및 서버를 위한 모듈형 개발
3D 프린트 가능한 인클로저 디자인
Hi Pikoo 사용 방법은?
하드웨어 준비: Waveshare DualEye 보드, 적합한 스피커 및 USB 전원을 확보합니다.
소프트웨어 설치: Node.js 24+, npm, Bash 및 C++17 컴파일러가 설치되어 있는지 확인합니다.
눈 데모 실행: 오프라인 눈 데모를 로컬에서 시작하여 표현 및 상호작용 흐름을 다듬습니다.
서버 배포: 에이전트를 실행하고 가족 데이터를 관리할 서버를 설정합니다.
시스템 구성: Gateway, 모델 서비스 및 외부 도구를 구성합니다.
인클로저 제작: 제공된 STL 파일을 다운로드하고 3D 프린트하여 고양이 얼굴 인클로저를 만듭니다.
장치 조립: 보드, 마이크, 스피커 및 디스플레이를 연결합니다.
상호작용: 대화를 통해 Hi Pikoo와 소통하고 구성된 도구를 활용합니다.
Hi Pikoo의 사용 사례
- 가족 동반자
- 정보 검색
- 작업 관리
- 개인화된 AI 개발
- 오픈 소스 AI 탐색
