Hi Pikoo

Proyek ini mendorong pengguna untuk membangun dan menyesuaikan hewan peliharaan AI mereka sendiri, dimulai dengan simulator dan berkembang menjadi perangkat fisik.

Pengalaman inti berputar di sekitar percakapan yang alami dan mengalir. Hi Pikoo dapat mengikuti konteks tanpa memerlukan setiap pemikiran menjadi perintah terpisah, dan ia mempertahankan topik bersama serta detail yang berarti di seluruh interaksi, memungkinkan pengguna untuk melanjutkan dari tempat mereka berhenti. Ia juga dapat bekerja secara kolaboratif, memanggil alat yang telah dikonfigurasi untuk menemukan informasi atau melakukan tugas.

Arsitektur sistem terdiri dari perangkat, server, dan model. Perangkat, biasanya papan Waveshare ESP32-S3 DualEye, menangani pengambilan audio, pemutaran respons, dan ekspresi mata di dua layar bulatnya. Qwen Audio Agent 2.0.1 menyusun penyedia Live asli, delegasi Terra, sesi, memori keluarga, dan alat di runtime. Live mengelola ucapan, sementara Terra menangani tugas yang didelegasikan dan operasi latar belakang. Gateway mempertahankan teks, ringkasan, memori keluarga, dan daftar, dengan kunci dan profil keluarga tetap di server pengguna.

Manajemen memori sangat canggih, membedakan antara teks terbaru untuk pemulihan topik, ringkasan untuk sejarah terikat, dan memori jangka panjang untuk fakta keluarga yang sesuai. Daftar terpisah dipelihara untuk belanja dan tugas yang harus dilakukan. Terra dapat memanfaatkan pencarian yang telah dikonfigurasi, pembacaan halaman publik, dan daftar keluarga, dengan opsi untuk menambahkan lebih banyak alat MCP untuk fungsionalitas yang lebih luas. Proyek ini bersifat sumber terbuka, dengan kode asli, grafik, dan dokumentasi yang dilisensikan di bawah Apache-2.0, sementara bobot bangun dan firmware yang mengandung model memiliki ketentuan non-komersial yang terpisah.

Pengembangan di Pikoo bersifat modular, memungkinkan pengguna untuk memilih komponen tertentu untuk dimodifikasi, seperti logika perangkat, ekspresi mata, atau server Agen. Proyek ini juga menyediakan STL untuk pencetakan 3D penutup wajah kucing. Meskipun memerlukan pengguna untuk menyiapkan perangkat keras, menerapkan layanan, dan mengonfigurasi sistem, ini menawarkan kesempatan unik untuk menciptakan teman AI yang dipersonalisasi. Percakapan model waktu nyata dan alat online memerlukan konektivitas jaringan, dan biaya operasional tergantung pada model, server, dan layanan eksternal yang dipilih. Data keluarga, termasuk memori dan suara, dikelola oleh server yang diterapkan pengguna dan layanan model yang dikonfigurasi.