Siri ajunge în aplicații terțe cu iOS 27.3

Cum „vede” Siri interfața aplicațiilor?

Apple a lansat marți o actualizare majoră pentru asistentul său vocal, odată cu rularea iOS 27.3 pe dispozitivele compatibile. Noul release permite ca AI-ul generativ al Siri să interacționeze direct cu orice aplicație terță, folosind date contextuale, comenzi în limbaj natural și conștientizarea ecranului pentru a îndeplini cererile utilizatorilor. Dezvoltatorii pot acum integra aceste capacități în „toate aplicațiile”, deschizând calea către o experiență mai fluidă, condusă prin voce pe i Phone și iPad.

Această îmbunătățire se bazează pe trecerea recentă a Siri către tehnologia modelelor de limbaj mari, permițând asistentului să înțeleagă comenzi nuanțate și să acționeze în interiorul interfeței aplicațiilor. Folosind contextul personal al utilizatorului — cum ar fi evenimente din calendar, locație și activitate recentă — Siri poate, de exemplu, redacta un mesaj într-o aplicație de mesagerie, rezerva o cursă într-un serviciu de transport sau ajusta setările unui controler de casă inteligentă, fără navigare manuală. Apple susține că funcția e concepută să respecte confidențialitatea, procesând datele pe dispozitiv ori de câte ori e posibil și cerând permisiune explicită pentru fiecare integrare de aplicație.

Echipa de inginerie a explicat că AI-ul folosește acum conștientizarea ecranului, ceea ce înseamnă că Siri poate „vedea” elementele interfeței unei aplicații în timp real. Această cogniție vizuală permite asistentului să localizeze butoane, câmpuri și meniuri, apoi să simuleze apăsări sau intrări vocale pentru a finaliza sarcini. Feedback-ul timpuriu al dezvoltatorilor sugerează că funcția reduce frecarea pentru utilizatorii care preferă interacțiunea fără mâini, mai ales în scenarii precum gătit, conducere sau multitasking. „Am vrut ca Siri să treacă dincolo de interogări simple și să devină un adevărat asistent care poate acționa în aplicațiile pe care oamenii le folosesc zilnic”, a declarat un purtător de cuvânt senior al Apple.

Accesul mai larg pune în pericol confidențialitatea?

Rularea necesită ca dezvoltatorii să adopteze extensiile SiriKit noi ale Apple, care oferă API-uri pentru partajul de context și detecția elementelor UI. Apple a publicat ghiduri care subliniază securitatea, încurajând dezvoltatorii să ceară doar datele minime necesare pentru fiecare funcție. Adoptatorii timpuriu, inclusiv aplicații populare de productivitate și călătorii, au trimis deja actualizări pentru a sprijini AI-ul, promițând fluxuri mai fluide și comenzi vocale mai bogate.

Accesul mai larg ridică întrebări despre modul în care datele personale sunt tratate când Siri acționează în mediul terțelor părți. Apple asigură că toată procesarea are loc local pe dispozitiv ori de câte ori e fezabil, iar orice date trimise pe serverele Apple sunt anonimizate și criptate. Totuși, avocații pentru confidențialitate îndeamnă utilizatorii să verifice cu atenție permisiunile aplicațiilor, notând că capacitatea asistentului de a citi conținutul ecranului ar putea expune informații sensibile dacă e folosită greșit. Politica de confidențialitate a Apple include acum o secțiune dedicată interacțiunilor cu AI-ul, care detaliază controalele utilizatorului pentru a activa sau dezactiva capacitățile aplicației Siri oricând.

Pe măsură ce funcția se maturizează, analiștii prevăd o schimbare în modul în care utilizatorii mobili interacționează cu dispozitivele lor, posibil reducând dependența de intrarea prin atingere și încurajând dezvoltatorii să proiecteze experiențe cu prioritate pe voce. Dacă adoptarea se dovedește mare, Siri ar putea deveni un strat unificator în ecosistemul iOS, rivalizând cu concurenții care oferă deja integrare profundă cu AI-ul.

Întrebări frecvente

Cum activez Siri să funcționeze în alte aplicații? Deschide Setări, mergi la Siri & Search și activează „Permiteți Siri să acceseze aplicațiile”. Aplicațiile individuale pot, de asemenea, să vă ceară permisiune la prima utilizare.

Va funcționa această funcție pe modele mai vechi de i Phone? iOS 27.3 sprijină dispozitivele care pot rula iOS 16 sau ulterior, dar capacitățile complete de cogniție vizuală necesită hardware-ul cel mai nou pentru performanță optimă.

Sunt datele mele în siguranță când Siri interacționează cu aplicații terțe? Apple procesează majoritatea interacțiunilor pe dispozitiv și criptează orice date trimise pe serverele sale. Utilizatorii pot revoca permisiunile oricând pentru a opri accesul Siri la aplicații specifice.