Umjetna inteligencija i proaktivna pomoć nalaze se na rubu revolucije u načinu na koji koristimo tehnologiju u svakodnevnom životu. Trenutno su većina alata za proširenu stvarnost ograničena na izričite naredbe korisnika, što može biti neugodno i neprikladno u raznim društvenim situacijama. U ovom članku istražujemo Sensible Agent, revolucionarni okvir koji omogućuje agentima proširene stvarnosti da proaktivno reagiraju na potrebe korisnika, koristeći kontekst u stvarnom vremenu, uključujući pogled, dostupnost ruku i okolnu buku.
Razvoj proaktivnih AR agenata
Koncept proaktivnih agenata proširene stvarnosti prvi je put predstavljen u Googleovom projektu Astra, koji je pokazao njihov potencijal za pružanje pametne pomoći koja predviđa potrebe korisnika. Međutim, taj koncept je bio ograničen na izričite verbalne naredbe. Sensible Agent, razvijen od strane Ruofei Du i Geonsun Lee, nastoji riješiti ovaj problem uz pomoć okvira za neprimjetnu interakciju s proaktivnim agentima. Objavljen na UIST 2025, Sensible Agent koristi multimodalno osjetljivo kontekstualno praćenje, subtilne geste, pogled i minimalne vizualne signale za pružanje kontekstualno prikladne pomoći.
Sensible Agent okvir
Sensible Agent sastoji se od dva povezana modula: (1) razumijevanje konteksta i (2) generiranje odgovora. Prvi modul analizira signale iz okoline, uključujući pokrete glave, položaj ruku i razinu buke, kako bi identificirao trenutne potrebe korisnika. Drugi modul zatim generira prikladne akcije, poput prikaza informacija, predlaganja rješenja ili automatskog upravljanja uređajima, bez potrebe za izričitim upitom.
Ovaj pristup otvara nove mogućnosti za integraciju umjetne inteligencije u svakodnevne aktivnosti, čineći tehnologiju prirodnijim i manje intruzivnim dijelom našeg života. Proaktivna pomoć može unaprijediti učinkovitost, smanjiti frustracije i pružiti personalizirano iskustvo koje se prilagođava svakom korisniku u stvarnom vremenu.