Oto głośnik Nest Mini ze sztuczną inteligencją pochodzącą spoza Google

Deweloper ogłosił na Twitterze, że udało mu się zasilić popularny inteligentny głośnik Google Nest Mini sztuczną inteligencją. Teraz jego asystent głosowy jest w stanie podsumować otrzymywane wiadomości oraz samodzielnie odnajdować w nich informacje. W jaki sposób to się udało?

Asystent głosowy ze sztuczną inteligencją

Inteligentne głośniki stają się coraz bardziej popularne. Jedną z firm, która proponuje tego typu sprzęt, dający jednocześnie pełen dostęp do usług asystenta głosowego jest Google. Niewielkim urządzeniem tego typu jest Nest Mini, który nie tylko umożliwia uruchamianie muzyki, ale również pozwala na sterowanie całym systemem Smart Home, jaki tworzymy.

I “jailbroke” a Google Nest Mini so that you can run your own LLM’s, agents and voice models.

Here’s a demo using it to manage all my messages (with help from @onbeeper)

🔊 on, and wait for surprise guest!

I thought hard about how to best tackle this and why, see 🧵 pic.twitter.com/rUBGoM1pO0

— Justin Alvey (@justLV) July 18, 2023

Jeden z deweloperów, idąc z duchem czasu i wzrastającą ciekawością na temat AI, wpadł na pomysł, aby obdarować model Google Nest Mini sztuczną inteligencją. Autor, niejaki Justin Alvey, pokazał w jaki sposób można uruchomić własny model LLM oraz asystenta głosowego.

W jaki sposób AI trafiła do Google Nest Mini?

Proces wdrożenia AI do popularnego głośnika rozpoczyna się od płytki drukowanej (PCB). Aby ułatwić te samodzielne działania możliwe jest zastosowanie taniego i prostego układu Wi-Fi, pozwalającego na płynną współpracę z różnego rodzaju platformami audio. Jest to istotny element, aby głośnik był w stanie wykrywać dźwięki oraz głos.

I've been experimenting with multiple of these, announcing important messages as they come in, morning briefings, noting down ideas and memos, and browsing agents.

I couldn’t resist – here's a playful (unscripted!) video of two talking to each other prompted to be AI’s from "Her pic.twitter.com/f9lOUciO3Y

— Justin Alvey (@justLV) July 18, 2023

Stworzone przez dewelopera rozwiązanie zostało oparte o aplikację Beeper, służącą do czatowania w kilku serwisach i platformach. To właśnie dzięki niej możliwe jest odbieranie wiadomości z większości platform komunikacyjnych. Sztuczna inteligencja natomiast pochodzi z GPT 3.5, które podsumowuje wszelkie otrzymane informacje, skąd kierowany jest do ElevenLabs, aby możliwe było zamienienie tekstu na mowę.

Autor pomysłu ma nadzieję, by udostępnić zaprojektowaną płytkę drukowaną (PCB), a także przekazać instrukcje dotyczące kompilacji, oprogramowania układowego oraz bota i kodu serwera. Idea jest naprawdę ciekawa. Jeśli na przykład możliwości Barda trafią do głośników i wyświetlaczy Google, czeka nas ciekawy i zupełnie nowy wymiar inteligentnego domu.