Apple extinde accesibilitatea pe iPhone, Mac și nu numai cu ajutorul AI: de la citirea articolelor complicate la înțelegerea imaginilor și clipurilor fără subtitrare

Apple transformă accesibilitatea pentru persoanele cu dizabilități într-unul dintre cele mai concrete terenuri de aplicare pentru inteligența artificială din ecosistemul său. Într-un anunț publicat astăzi, compania a prezentat o serie de funcții noi care vor fi disponibile în curând pe iPhone, iPad, Mac, Apple TV și Apple Vision Pro. Cel mai important de reținut este că miza este mai mare decât adăugarea unor instrumente izolate. Apple încearcă să folosească Apple Intelligence pentru a face dispozitivele mai ușor de înțeles, de controlat și de adaptat pentru utilizatori cu nevoi foarte diferite, de la persoane nevăzătoare sau cu vedere redusă până la cei cu dificultăți de mobilitate, dislexie ori hipoacuzie.

Noile funcții arată și cum Apple încearcă să diferențieze propria abordare AI. În loc să vorbească doar despre generare de imagini, rezumate sau asistenți conversaționali, compania pune accent pe situații în care inteligența artificială poate elimina bariere reale. VoiceOver va descrie mai detaliat imaginile de pe ecran, Magnifier va putea răspunde la întrebări despre ceea ce vede camera iPhone-ului, Voice Control va accepta comenzi în limbaj natural, iar Accessibility Reader va înțelege mai bine articole complexe, tabele și documente cu structură dificilă. În paralel, Apple pregătește subtitrări generate direct pe dispozitiv pentru clipurile care nu au captions și o funcție spectaculoasă prin care utilizatorii Apple Vision Pro vor putea controla anumite scaune rulante electrice cu privirea.

Accesibility Reader pe Mac – cum îți transformă un document / foto: Apple

Apple Intelligence intră în funcțiile care ajută utilizatorul să vadă, să citească și să navigheze

Una dintre cele mai importante direcții ale noului pachet de accesibilitate vizează persoanele nevăzătoare sau cu vedere redusă. VoiceOver, funcția care citește elementele de pe ecran, primește Image Explorer, un sistem bazat pe Apple Intelligence capabil să ofere descrieri mai detaliate ale imaginilor din sistem. Nu este vorba doar despre fotografii din galerie, ci și despre documente scanate, chitanțe, facturi sau alte materiale vizuale care până acum puteau fi greu de interpretat. Ideea este ca un utilizator să înțeleagă mai bine conținutul unei imagini fără să depindă de descrieri manuale ori de ajutorul altcuiva.

Apple extinde aceeași logică și în zona Live Recognition. Pe iPhone-urile compatibile, utilizatorul va putea apăsa Action button și va putea întreba în mod natural ce apare în cadrul camerei. Mai mult, sistemul va accepta întrebări de follow-up, astfel încât răspunsul să nu fie doar o descriere generică, ci o conversație orientată spre informația căutată. Magnifier, aplicația dedicată persoanelor cu vedere redusă, primește la rândul ei această capacitate de explorare asistată. Utilizatorul va putea cere informații despre scenă, dar și controla aplicația vocal, cu comenzi simple precum mărirea zoomului sau activarea lanternei.

Apple te ajută să înțelegi mai ușor ce este în fața telefonului / foto: Apple

Schimbarea devine și mai interesantă în Voice Control. Până acum, controlul integral al unui iPhone sau iPad prin voce presupunea uneori memorarea unor etichete exacte, cifre ori denumiri de butoane. Cu Apple Intelligence, compania spune că utilizatorii vor putea descrie elementele de pe ecran în limbaj natural. În loc să rețină o comandă rigidă, cineva va putea spune, de exemplu, „apasă ghidul despre cele mai bune restaurante” sau „deschide folderul mov”. Această abordare poate deveni extrem de utilă în aplicații complexe sau în interfețe unde elementele nu sunt etichetate impecabil pentru accesibilitate. Apple a precizat însă că Voice Control alimentat de Apple Intelligence va fi disponibil inițial doar în limba engleză în SUA, Canada, Regatul Unit și Australia.

Accessibility Reader, instrumentul gândit pentru o experiență de lectură mai confortabilă, primește și el o extindere substanțială. Apple spune că va putea procesa materiale mai complicate, inclusiv articole științifice, documente cu mai multe coloane, imagini și tabele. Pe lângă personalizarea deja specifică pentru font, culoare și spațiere, utilizatorul va primi rezumate la cerere și traducere integrată care păstrează formatarea aleasă. Pentru persoanele cu dislexie, vedere redusă sau oboseală cognitivă, această combinație poate transforma lectura unor materiale dense dintr-o sarcină obositoare într-o experiență mult mai accesibilă.

Conținutul video este mai accesibil pe Apple TV cu text ajustabil / foto: Apple

Subtitrări generate local, Vision Pro pentru mobilitate și o accesibilitate care trece dincolo de ecran

O altă noutate importantă este apariția subtitrărilor generate automat pentru clipurile video care nu au deja captions. Apple spune că transcrierea vorbirii se va face pe dispozitiv, în mod privat, și că funcția va putea fi folosită pentru clipuri înregistrate pe iPhone, materiale primite de la prieteni sau conținut video redat online. Subtitrările vor apărea pe iPhone, iPad, Mac, Apple TV și Apple Vision Pro, iar aspectul lor va putea fi personalizat din meniul de redare sau din Settings. Pentru utilizatorii surzi sau cu deficiențe de auz, diferența poate fi semnificativă mai ales în cazul conținutului informal, care de multe ori nu este însoțit de transcrieri. Disponibilitatea inițială va fi însă limitată la limba engleză în SUA și Canada.

Vezi și:

Apple Intelligence integrează inteligența artificială în activitățile tale tale zilnice pentru eficiență sporită și experiențe noi

Asistentul virtual de pe iPhone și iPad devine mai capabil și mai personal – ce trebuie să știi despre Siri AI

Cea mai spectaculoasă funcție anunțată de Apple ține de Apple Vision Pro și de controlul unor scaune rulante electrice cu ajutorul privirii. Compania va folosi sistemul de eye tracking al căștii pentru a permite utilizatorilor să controleze sisteme alternative de deplasare compatibile, o funcție gândită mai ales pentru persoanele care nu pot utiliza un joystick clasic. Primele implementări vor funcționa în SUA cu soluții Tolt și LUCI, prin conexiuni Bluetooth sau prin cablu, acesta din urmă necesitând Apple Vision Pro Developer Strap. Apple subliniază că funcția este destinată utilizării în medii controlate, nu ca înlocuitor universal pentru toate scenariile de mobilitate.

Acesta este genul de anunț care arată cât de puternică poate deveni combinarea dintre hardware avansat și accesibilitate. Vision Pro nu mai este prezentat doar ca un dispozitiv pentru productivitate spațială, entertainment sau experiențe imersive, ci și ca o platformă capabilă să ofere forme noi de independență. Pentru o persoană cu mobilitate sever limitată, posibilitatea de a controla un scaun rulant cu ochii poate avea un impact mult mai profund decât orice demonstrație clasică de realitate mixtă.

Apple a inclus și o serie de actualizări mai mici, dar relevante. Vehicle Motion Cues ajunge pe visionOS pentru a reduce răul de mișcare atunci când Vision Pro este folosit într-un vehicul aflat în mers. Căștile vor primi și gesturi faciale pentru activarea unor acțiuni, plus o nouă metodă de selectare a elementelor cu privirea prin Dwell Control. tvOS va permite mărirea textului de pe ecran, Made for iPhone hearing aids vor avea conectare și trecere între dispozitive mai fiabile, iar Name Recognition va putea avertiza utilizatorii surzi sau hipoacuzici atunci când cineva le rostește numele, în peste 50 de limbi.

Hikawa Grip și Stand pentru iPhone / foto: Apple

Pe lângă software, Apple a anunțat și disponibilitatea globală extinsă pentru Hikawa Grip & Stand for iPhone, un accesoriu MagSafe adaptiv conceput pentru persoane cu dificultăți de prindere, forță sau mobilitate. Produsul nu este listat pentru România în comunicarea actuală, însă faptul că Apple promovează un astfel de accesoriu în propriul magazin online arată că tratează accesibilitatea nu doar ca pe o opțiune din Settings, ci și ca pe o problemă de design fizic al interacțiunii cu dispozitivele.

Privite împreună, aceste noutăți fac din accesibilitate una dintre cele mai convingătoare utilizări ale Apple Intelligence anunțate până acum. Nu toate funcțiile vor fi disponibile din prima în toate limbile sau regiunile, iar unele dintre ele rămân dependente de hardware premium precum Apple Vision Pro. Chiar și așa, direcția este clară: Apple folosește AI nu doar pentru a face produsele mai inteligente, ci pentru a le face mai utilizabile de către oameni care, istoric, au avut cel mai mult de câștigat dintr-o tehnologie mai atent proiectată.

Frâne care trag într-o parte: etrier, furtun sau diferență de aderență, pași simpli de verificare