- Posibilitatea de a interacționa cu orice text sau imagine de pe ecran pentru a rezuma, traduce sau edita fără a schimba aplicațiile.
- Necesită hardware specific Copilot+ cu o unitate NPU de 40 TOPS pentru a procesa inteligența artificială local și privat.
- Îți permite să extragi tabele complexe direct în Excel și să efectuezi căutări vizuale avansate cu Bing.
Sunt sigur că ți s-a întâmplat și ție: navighezi pe web sau lucrezi la un document și dintr-o dată dai peste o informație, o imagine sau un text într-o altă limbă pe care trebuie să-l procesezi imediat. Soluția obișnuită este să treci prin bătaia de cap a copierii, deschiderii unei alte aplicații, lipirii și căutării - un proces care perturbă fluxul oricui. Ei bine, Microsoft și-a propus să elimine acest inconvenient cu Click to Do , un instrument bazat pe inteligență artificială care transformă, practic, ecranul tău într-o pânză interactivă unde totul este instantaneu acționabil.
Această funcționalitate nu este doar un simplu utilitar de căutare; este un strat inteligent construit peste Windows 11 care, datorită puterii dispozitivelor Copilot+ , analizează ceea ce vedeți în timp real. Cea mai puternică caracteristică a sa este utilizarea modelelor locale, cum ar fi Phi Silica , ceea ce înseamnă că o mare parte din magie se întâmplă direct pe computerul dvs., fără ca datele dvs. să fie neapărat transferate în cloud. Acest lucru vă oferă control complet asupra confidențialității dvs. în timp ce vă creșteți productivitatea.
Ce este mai exact Click to Do și cum funcționează?
În esență, este o suprapunere interactivă care vă permite să legați acțiuni specifice de conținut vizual (fie text, fie imagini). În loc să comute între programe, utilizatorul selectează pur și simplu un element, iar sistemul sugerează comenzi rapide inteligente, bazate pe context . Pentru a activa această funcție, utilizatorii țin de obicei apăsată tasta Windows și fac clic, ceea ce afișează o interfață atractivă din punct de vedere vizual care „îngheață” ecranul, astfel încât să puteți alege ce să procesați.
Din punct de vedere tehnic, dezvoltatorii pot integra această bijuterie în propriile aplicații folosind schema URI ms-clicktodo:// . Aceasta permite unei aplicații să lanseze programatic stratul Click to Do, facilitând accesul fără probleme al utilizatorului final la capacitățile de inteligență artificială. Este important de reținut că analiza ecranului este locală, iar conținutul este partajat numai dacă utilizatorul alege să efectueze o acțiune care necesită o conexiune externă.
Defalcarea tuturor acțiunilor disponibile
Ca să te asiguri că nu ratezi nimic, hai să vedem ce poți face de fapt cu acest instrument, deoarece lista este destul de lungă și variată:
- Gestionare avansată a textului: Dacă selectați un fragment scurt, îl puteți copia sau căuta pe web. Dar dacă textul este mai lung (mai mult de 10 cuvinte), modelul Phi Silica intră în joc pentru a vă oferi rezumate automateCreați liste cu marcatori sau rescrieți conținutul schimbând tonul într-unul mai formal, informal sau rafinat.
- Manipularea imaginii: Când marcați o fotografie sau un obiect, puteți face mai mult decât să îl salvați ca JPG sau să îl copiați. De asemenea, puteți utiliza Căutare vizuală Bing pentru a găsi lucruri similare, a elimina obiecte deranjante din fundal, a estompa mediul pentru a evidenția subiectul sau a elimina complet fundalul fără a deschide Photoshop.
- Extragerea datelor structurate: Una dintre cele mai utile funcții este Recunoașterea structurii tabelelor (TSR). Click to Do detectează tabelele de pe ecran și le convertește în date structurate pe care le puteți copia ca HTML sau le puteți trimite direct în Microsoft Excel pentru analiză, economisind ore întregi de transcriere manuală.
- Scurtături pentru comunicare directă: Dacă sistemul detectează un e-mail, vă oferă opțiuni pentru a compune un mesaj sau programați instantaneu o întâlnire Teams, integrându-vă cu aplicațiile de mesagerie implicite.
- Conversii rapide: Când plasați cursorul peste măsurători (cum ar fi „10 km”), apare o fereastră mică cu conversia în alte unități (cum ar fi mile sau picioarele), evitându-vă să deschideți browserul pentru o simplă întrebare de matematică.
- Sinergie cu Copilot: Pentru orice alegeți, există opțiunea de a Întreabă-l pe CopilotAceasta deschide asistentul cu conținutul deja încărcat, astfel încât să puteți solicita traduceri complexe, descrieri detaliate sau analize aprofundate.
Cazuri de utilizare în lumea reală: Cum ne ajută în viața de zi cu zi?
Acest instrument nu este doar o jucărie; are aplicații foarte concrete în diverse sectoare. De exemplu, în administrația publică , un funcționar poate rezuma o propunere legală de 20 de pagini în câteva secunde. În educație, un profesor poate simplifica un text complex, astfel încât elevii săi să îl înțeleagă mai bine, folosind opțiunea de rescriere a tonurilor.
În lumea afacerilor, un analist poate transfera un tabel de prețuri direct dintr-un PDF în Excel, fără greșeli de scriere. Chiar și în jurnalism, un paragraf în franceză poate fi tradus instantaneu în timp ce se cercetează o știre internațională. Iar pentru cei care lucrează în marketing, posibilitatea de a curăța rapid fundalurile imaginilor de produs economisește enorm timp.
Cerințe și limitări tehnice importante
Nu toată lumea poate folosi Click to Do, deoarece necesită hardware foarte specific. Un PC compatibil Copilot+ sau un PC cloud este esențial, ceea ce înseamnă o unitate de procesare neuronală (NPU) de cel puțin 40 TOPS , 16 GB de RAM și un procesor cu 8 nuclee logice. Fără această putere, modelele locale nu ar putea răspunde instantaneu.
În ceea ce privește limitările, sistemul excelează cel mai mult în limba engleză , deși acceptă deja spaniolă și franceză. De asemenea, se poate confrunta cu imagini de calitate foarte scăzută sau tabele cu design haotic (celule îmbinate sau structuri neregulate). În plus, este important de înțeles că nu păstrează stilul vizual (culorile sau fonturile) la extragerea tabelelor, ci doar structura datelor.
Confidențialitate, securitate și control al sistemului
Microsoft a pus mare accent pe procesarea locală prin intermediul NPU pentru a asigura confidențialitatea utilizatorilor . Datele nu călătoresc în cloud decât dacă utilizați în mod explicit funcții web precum Bing sau Copilot. Pentru a adăuga un alt nivel de securitate, există filtre de moderare pentru a împiedica inteligența artificială să genereze conținut neadecvat și controale specifice pentru conturile copiilor.
Pentru cei mai sceptici sau care au nevoie de un mediu ultra-sigur (cum ar fi în companiile cu date confidențiale), există modalități de a dezactiva această funcție. Instrumente precum optimizerDuck vă permit să dezactivați Click to Do, Recall și Copilot dintr-o singură mișcare. Dacă preferați metoda manuală, puteți modifica Registrul Windows, în special prin crearea cheii DisableClickToDo cu valoarea 1 în căile WindowsAI Policies.
Acest strat inovator de inteligență artificială redefinește modul în care interacționați cu Windows, eliminând fricțiunea dintre vizualizarea datelor și acționarea asupra acestora, utilizând hardware puternic și modele locale care prioritizează viteza și confidențialitatea. De la extragerea tabelelor în Excel până la editarea rapidă a imaginilor și rescrierea textului, Click to Do transformă ecranul într-un instrument dinamic, cu condiția să aveți NPU-ul necesar și să înțelegeți limitările sale lingvistice și de formatare.
Scriitor pasionat despre lumea octeților și a tehnologiei în general. Îmi place să îmi împărtășesc cunoștințele prin scriere și asta voi face în acest blog, să vă arăt toate cele mai interesante lucruri despre gadgeturi, software, hardware, tendințe tehnologice și multe altele. Scopul meu este să vă ajut să navigați în lumea digitală într-un mod simplu și distractiv.