
Apple Vision Pro podle bývalého inženýra Applu zahrnoval hodně neurovědy, aby vyvinul některé své klíčové funkce, přičemž se spoléhal na různé triky, aby určil, co by se člověk mohl v rozhraní chystat.
Hlavní rozhraní náhlavní soupravy Vision Pro od společnosti Apple je založeno na navigaci pomocí sledování očí a gest, přičemž systém musí co nejrychleji určit, na co se uživatel konkrétně dívá. Na Twitteru vysílání v pondělí se zatáhne opona, aby se odhalily některé z prvních myšlenek, které byly součástí projektu.
Sterling Crispin strávil více než tři roky jako výzkumný pracovník v oblasti prototypování neurotechnologií ve skupině technologického vývoje společnosti Apple, což je nejdelší doba, kterou kdy „pracoval na jediném úsilí“. Zatímco tam pracoval na prvcích, které podporovaly základní vývoj náhlavní soupravy, včetně „zážitků všímavosti“ a dalšího „ambiciózního výzkumu Moonshot s neurotechnologií“.
Crispin to například přirovnal ke „čtení myšlenek“, jako je předpovídání toho, na co uživatel klikne, než to udělá.
Crispin, který je hrdý na to, že přispěl k původní vizi náhlavní soupravy, byl v malém týmu, který „pomohl zelenou tuto důležitou produktovou kategorii“, která, jak věří, by mohla mít „jednoho dne významný globální dopad“.
Zatímco většina jeho práce je stále pod NDA, Crispin mohl stále diskutovat o podrobnostech, které byly zveřejněny v patentech.
Duševní stavy
Crispinova práce zahrnovala zjišťování duševního stavu uživatelů na základě dat shromážděných „z jejich těla a mozku, když byli v pohlcujících zážitcích“.
Pomocí sledování očí, elektrické aktivity, srdečních tepů, svalové aktivity, krevního tlaku, vodivosti pokožky a dalších metrik by se modely AI mohly pokusit předvídat myšlenky uživatele. „Modely umělé inteligence se snaží předpovědět, zda se cítíte zvědaví, bloudíte, bojíte se, věnujete pozornost, pamatujete si minulou zkušenost nebo nějaký jiný kognitivní stav,“ píše Crispin.
Jedním z „nejlepších výsledků“ byla schopnost předpovědět, kdy se uživatel chystal na něco kliknout dříve, než to udělal.
„Váš žák reaguje dříve, než částečně kliknete, protože očekáváte, že se po kliknutí něco stane,“ vysvětluje Crispin. „Můžete tedy vytvořit biofeedback s mozkem uživatele sledováním chování jeho očí a přepracováním uživatelského rozhraní v reálném čase, abyste vytvořili více této předvídatelné reakce zornic.“
Přirovnává to k „hrubému počítačovému rozhraní mozku přes oči“, že by každý den převzal „invazivní operaci mozku“.
Ovlivňování uživatele
V dalším triku k určení stavu by uživatelé mohli nechat zobrazit vizuály nebo přehrávat zvuky způsobem, který nevnímají, a poté měřit reakci na tento podnět.
Jeden další patent vysvětloval, jak lze strojové učení a signály těla použít k předpovědi zaměření uživatele, pokud je uvolněný, nebo k určení, jak dobře se učí. Pomocí těchto informací a stavu by systém mohl přizpůsobit virtuální prostředí tak, aby se zlepšil požadovaný stav.
Crispin dodává, že existuje „tuna dalších věcí, se kterými jsem se zabýval“, které se neobjevily v patentech, a doufá, že se na silnici objeví další.
I když jsme obecně spokojeni s dopadem Vision Pro, stále existuje varování, že je „stále o krok vpřed na cestě k VR“ a že může trvat ještě deset let, než toto odvětví plně dožene.
Zdroj: appleinsider.com