Разработчик превратил культовую игрушку 90-х Big Mouth Billy Bass в умного AI-ассистента с синхронизацией речи в реальном времени
Open-source проект «BillAI Bass» превратил классическую поющую рыбу в полноценного голосового помощника, способного общаться, синхронно открывать рот и двигать хвостом.
Разработчик Морган Уиллис представил open-source проект «BillAI Bass», который возвращает к жизни легендарную настенную поющую рыбу Big Mouth Billy Bass в виде умного AI-ассистента. Устройство способно вести диалог в реальном времени, при этом рыба не только говорит, но и синхронизирует движение рта с речью, поворачивает голову и двигает хвостом, создавая эффект живого общения.
В основе системы лежит Raspberry Pi 5, выступающий «мозгом» устройства. Используя фреймворк Strands Agents для двухуровневой потоковой передачи данных (bidirectional streaming), рыба обменивается аудиоданными с большой языковой моделью Amazon Nova 2 Sonic через платформу Amazon Bedrock. Низкая задержка передачи данных позволяет добиться высокой точности синхронизации движений рта с генерируемым голосом.
Автор проекта вдохновлялся более ранними разработками, такими как «billy-b-assistant», но полностью переработал систему, применив современные технологии. После публикации на Hacker News проект получил широкое признание: пользователи высоко оценили качество lip-sync и предложили новые идеи, например, научить рыбу отбивать ритм хвостом во время музыки.
Этот проект наглядно демонстрирует, как современные AI-агенты и технологии потоковой передачи данных могут быть успешно интегрированы в реальные физические объекты, делая создание «умного» интерактивного оборудования доступным для энтузиастов и разработчиков.