Okulary AR z multimodalnymi sieciami AI otrzymują dofinansowanie od twórcy Pokémon GO

Brilliant Labs przedstawia nowe okulary do rzeczywistości rozszerzonej: Frame

W tygodniu, w którym entuzjaści gadżetów na całym świecie są oczarowani Vision Pro, odważny młody start-up próbuje wygospodarować niszę dla swojego urządzenia rzeczywistości rozszerzonej, które ma zupełnie inny kształt niż urządzenia Apple. Singapurski start-up Brilliant Labs ogłosił dziś swój nowy produkt Frame – parę lekkich okularów do rzeczywistości rozszerzonej obsługiwanych przez multimodalnego asystenta AI o nazwie Noa. Okulary przykuły uwagę i przyciągnęły uwagę Johna Hanke, dyrektora generalnego Niantic, platformy rzeczywistości rozszerzonej stojącej za grami takimi jak Pokémon GO. Brilliant Labs odmówiło ujawnienia kwoty środków otrzymanych od Hanke.

W demonstracji wideo obejrzanej przez TechCrunch jeden z założycieli Brilliant Labs poprosił Noę, aby przedstawiła się za pomocą głosu. Po około trzech sekundach agent wygenerował i wyświetlił odpowiedź tekstową na soczewkach. Oprócz poleceń głosowych Noa może przetwarzać wizualnie, generować obrazy i tłumaczyć dzięki kilku zintegrowanym modelom sztucznej inteligencji: wyszukiwarce konwersacyjnej Perplexity AI; model tekstowo-obrazowy Stable Diffusion firmy Stability AI; Najnowszy model generowania tekstu OpenAI, GPT4; oraz system rozpoznawania głosu Whisper. Obiektywy ramkowe mają rozdzielczość 640 x 400 do wyświetlania filmów i zdjęć.

Dzięki tym funkcjom użytkownik robiący zakupy w centrum handlowym może poprosić Noę o sprawdzenie w Internecie cen pary butów, które przegląda, na przykład za pośrednictwem aplikacji Frame. „Przyszłość interakcji człowiek/sztuczna inteligencja ożyje w innowacyjnych urządzeniach do noszenia i jestem bardzo podekscytowany możliwością udostępnienia silnika reakcji Perplexity w czasie rzeczywistym w Brilliant Labs Frames” – powiedział Aravind Srinivas, dyrektor generalny i założyciel Perplexity, w komunikacie prasowym.

Otwarte i innowacyjne okulary

Pytanie brzmi, czy Frame będzie wystarczająco responsywny, aby którakolwiek z odpowiedzi generowanych przez sztuczną inteligencję była użyteczna. Urządzenia Brilliant Labs obsługujące technologię Bluetooth korzystają dziś ze smartfona, aby uzyskać dostęp do różnych modeli sztucznej inteligencji. Ostatecznie jednak założyciele chcą obejść się bez telefonu hosta i zintegrować lekkie modele uczenia maszynowego bezpośrednio z okularami.

Frame wprowadzony na rynek po inauguracyjnym produkcie Brilliant Labs, Monocle, jednoobiektywowym urządzeniu AR, które przyciągnęło lojalnych fanów w społeczności open source ze względu na jego programowalność i przystępną cenę. Grupa studentów ze Stanford zamieniła nawet urządzenie w asystenta randkowego, który w czasie rzeczywistym podpowiada, co powiedzieć partnerowi.

Frame pozostanie oprogramowaniem typu open source, podobnie jak jego poprzednik, co oznacza, że ​​programiści będą mieli dostęp do zasobów, w tym żywej dokumentacji, bazy kodu open source i schematów sprzętu. Będą także mogli dostosować ustawienia obsługiwanych modeli AI Noa.

Hołd złożony wielkim postaciom historii

W przeciwieństwie do nieporęcznego Vision Pro, Frame jest przeznaczony do noszenia na co dzień i jest wyposażony w soczewki korekcyjne. Ważące 39 gramów i wyposażone w grube, okrągłe, nylonowe oprawki z tworzywa sztucznego okulary według firmy stanowią „hołd dla rewolucyjnych innowacji i pomysłów wprowadzonych przez postacie historyczne, takie jak John Lennon, Steve Jobs i Gandhi”. » Ramka będzie dostępna w przedsprzedaży już dziś, a jej cena detaliczna wyniesie 349 dolarów, czyli tyle samo co Monocle. Dostawy urządzeń rozpoczną się w kwietniu.

Od momentu powstania w 2019 r. Brilliant Labs udało się przyciągnąć znaczącą grupę aniołów biznesu. W czerwcu ubiegłego roku informowaliśmy o inwestycji wartej 3 miliony dolarów od Brendana Iribe, współzałożyciela Oculus; Adam Cheyer, współzałożyciel Siri; Eric Migicovsky, założyciel Pebble i były partner Y Combinator; i inni. Dzięki nowemu zastrzykowi kapitału Hanke całkowite finansowanie firmy wynosi 6 milionów dolarów.

Źródło: www.bing.com