HomePod budoucnosti může odpovídat na dotazy Siri pouze tehdy, když se na něj podíváte

Majitelé více zařízení v ekosystému Apple budou obeznámeni s jedním z méně známých problémů používání Siri, konkrétně s tím, aby fungovala na jednom zařízení a ne na druhém. Když jste v místnosti, která obsahuje iPhone, iPad a HomePod mini, může být těžké zjistit, které zařízení skutečně odpoví na dotaz, a nemusí to být nutně požadované zařízení.

Kromě toho se ne každý cítí dobře, když se výzva „Hey Siri“ vůbec používá, a proto Apple nedávno oznámil, že ji omezí pouze na „Siri“ nebo alespoň na určitých zařízeních.

I tak může chybné používání „Siri“ nebo „Hey Siri“ – a spouštěcí fráze jiných digitálních asistentů – v televizi a rádiu stále způsobovat dotazy, které si uživatelé nemusí přát.

Pak je tu také možnost, že uživatelé potřebují komunikovat se zařízeními, aniž by vůbec používali svůj hlas. Samozřejmě mohou nastat situace, kdy je třeba vydat příkaz na dálku, nebo kdy může být společensky nepříjemné mluvit se zařízením.

V nově uděleném patentu nazvaném „Ovládání zařízení pomocí informací o pohledu“ Apple navrhuje, aby bylo možné ovládat Siri vizuálně. Konkrétně navrhuje, aby zařízení mohla detekovat pohled uživatele a určit, zda tento uživatel chce, aby zařízení reagovalo.

Podání navrhuje systém, který využívá kamery a další senzory schopné určit polohu uživatele a cestu jeho pohledu, aby zjistil, na co se dívají. Tyto informace lze použít k automatickému nastavení sledovaného zařízení tak, aby přešlo do režimu přijímání instrukcí, kde aktivně naslouchá, v očekávání, že mu budou sděleny pokyny.

Pokud digitální asistent v tomto stavu interpretuje, co by mohl být příkaz, může jej provést, jako by bylo slovní spuštění vysloveno předem, čímž ušetří uživatele od kroku. To by stále umožňovalo fungování frází jako „Hey Siri“, zvláště když se uživatel na zařízení nedívá.

Použití pohledu jako barometru pro to, zda chce uživatel sdělit digitálnímu asistentovi příkaz, je užitečné i jinými způsoby. Například pohled detekovaný při pohledu na zařízení může potvrdit, že uživatel aktivně zamýšlí, že zařízení bude následovat příkazy.

V praxi by to mohlo znamenat rozdíl mezi tím, zda zařízení interpretuje fragment věty, jako je „play Elvise“, jako příkaz nebo jako součást konverzace, kterou by jinak mělo ignorovat.

Majitelům více zařízení by detekce pohledu mohla umožnit, aby byl pokyn proveden do jednoho zařízení a nikoli do jiných, které by bylo možné určit pohledem na něj.

Podání zmiňuje, že prostý pohled na zařízení se nemusí nutně registrovat jako záměr, aby naslouchalo pokynu, protože je třeba splnit sadu „aktivačních kritérií“. To by mohlo spočívat pouze v nepřetržitém pohledu po určitou dobu, jako je sekunda, aby se eliminovaly drobné pohledy nebo falešné pozitivní výsledky od osoby, která otočila hlavu.

Důležitý je také úhel polohy hlavy. Pokud je například zařízení umístěno na nočním stolku a uživatel leží v posteli a spí, zařízení by mohlo potenciálně počítat uživatele obráceného k zařízení jako pohled v závislosti na tom, jak lžou, ale mohlo by to jako takové ignorovat, aby si uvědomil, hlava je na boku místo svislé.

V reakci na to může zařízení poskytnout uživateli řadu indikátorů, že asistent byl aktivován pohledem, jako je hluk nebo světelný vzor z vestavěných LED nebo displeje.

Vzhledem k možnosti zaregistrovat pohled uživatele by bylo také možné, aby systém detekoval, zda se uživatel dívá na objekt, se kterým chce interagovat, spíše než na zařízení držící virtuálního asistenta. Uživatel by se například mohl dívat na jednu z více lamp v místnosti a zařízení by mohlo využít kontext pohledu uživatele k určení, kterou lampu chce uživatel zapnout příkazem.

Blízká zařízení by mohla detekovat pohled uživatele na jiné ovladatelné předměty v místnosti.

Patent byl původně podán 28. srpna 2019 a jeho vynálezci jsou uvedeni jako Sean B. Kelly, Felipe Bacim De Araujo E Silva a Karlin Y. Bark.

Apple každý týden podává četné patentové přihlášky, ale i když existence patentu naznačuje oblasti zájmu pro jeho výzkum a vývoj, nezaručuje, že patent bude použit v budoucím produktu nebo službě.

Možnost ovládat zařízení na dálku se několikrát objevila v dřívějších patentových přihláškách. Například patent z roku 2015 na „Odhad pozice ruky a prstu založený na učení“ navrhl použití optického 3D mapovacího systému pro gesta rukou, který by mohl být svou koncepcí podobný hardwaru Kinect společnosti Microsoft.

Další žádost z roku 2018 pro „Multi media computing nebo zábavní systém pro reakci na přítomnost a aktivitu uživatele“ navrhuje zavedení trojrozměrných dat senzorů pro vytvoření hloubkové mapy místnosti, která by mohla být použita pro rozpoznávání gest v celé místnosti. .

Detekce pohledu byla také rozsáhle prozkoumána, naposledy v souvislosti s náhlavní soupravou Apple Vision Pro.