Kuidas kasutada Hey Copiloti: hääl, nägemine, failid ja koosolekud

Arvutiga rääkimine pole enam ulme: käsuga „Hey Copilot” saad kutsuda Microsofti assistendi ja talle oma häälega asju esitada. Windows 11, alates avamisest apps alates dokumendi kokkuvõtte tegemisest kuni kõrvaklappide ühendamise selgitamiseni – kõik see klaviatuuri puudutamata, muutes suhtluse sujuvaks kiirem ja loomulikum kui kirjutamine.

Lisaks äratussõnale täiustab kogemust Copilot Vision, mis "näeb" teie ekraanil olevat, kui te seda lubate, ning praktilised funktsioonid nagu failiotsing, ekraanipildid ja seadme kontekst; kõik koos selgete privaatsuskontrollidega ja ajaloo ja hääle haldamise valikud.

Mis on "Hey Copilot" ja mida selle kasutamiseks vaja on?

"Hey Copilot" (mõnes menüüs kuvatakse see kujul "Hola Copilot") on käed-vabad aktiveerimise sõna mis äratab Windows 11-s Copiloti ja avab kuulamisrežiimi, et assistendiga häälvestlust pidada.

Selle toimimiseks on vaja kolme asja: Windows 11, millele on installitud Copiloti rakendus, et sisse logida oma Microsofti kontoga ajaloo ja laiendatud funktsioonide avamiseks, ning töötavat mikrofoni (sisseehitatud või välist), kuna ilma helisisendita hääletuvastus pole võimalik.

Häälkäskluste kasutamiseks ei ole vaja arvutit, millel on märge Copilot+ PC; need seadmed pakuvad paremat kogemust tänu riistvara NPU-ga, aga iga Windows 11-ga arvuti saab kasutada Copilot Voice'i, samas kui tagasikutsumise funktsioon on saadaval ainult Copilot+ arvutile ja See töötab lokaalselt ja on krüpteeritud..

On veel üks kasulik nüanss: Copilot Voice'i kasutamine ei ole päringute arvuga piiratud, kuigi teenuse tellijad Microsoft 365 (Isiklik, Pere või Premium) saavad tippnõudluse perioodidel eelisjuurdepääsu ja süsteem toetab lai valik keeli.

Häälkäskluse aktiveerimine samm-sammult

Vaikimisi on „Hey Copilot” tuvastamine keelatud, seega peate selle rakenduses endas käsitsi lubama. Avage Copilot tegumiribalt või menüüst Start, maksimeerige selle aken, et näha kõiki menüüsid, ja minge jaotisse Konto ja sätted, kust leiate hääle jaotise koos lülitiga selle aktiveerimiseks. Vestluse alustamiseks kuulake lugu "Hey Copilot".

Kui olete hääle sisse lülitanud, saate valida ka assistendi häälvastuste jaoks eelistatud hääle, nii et lisaks teie mõistmisele vastab see teile kõige mugavamal toonil, kuna heliväljund on konfigureeritav ja saab vastavalt oma soovile kohandada.

Kui teil on menüü leidmisega probleeme, avage Copiloti rakenduse vasakpoolne külgriba (ikoon assistendi logo kõrval) ja puudutage oma profiiliikooni, et hüpata konto ja seadete juurde; pärast kuulamise aktiveerimist naaske majaikooniga põhiekraanile ja proovige öelda „Hei, Copilot“, et kontrollida tervituse ja kuulamisrežiim.

Riistvaramärkus: lauaarvuti puhul vajate tõenäoliselt välist mikrofoni (kas lauaarvuti mikrofoni või peakomplekti sisseehitatud mikrofoni), sülearvuti puhul aga piisab tavaliselt integreeritud mikrofonist. Veenduge, et see pole arvuti füüsilise nupu ega otseteega vaigistatud, kuna Copilot peab teid "kuulma", et... sisene kuulamisrežiimi.

Copilotiga rääkimise viisid: häälega äratamine, pikalt vajutamine ja mikrofon

Lisaks käsklusele „Hey Copilot” saate Copilot Voice'i käivitada süsteemi otseteede abil: vajutage ja hoidke Copiloti klahvi 1–2 sekundit all või avage häälpaneel Windowsi ja C klahvikombinatsiooniga, mis esitab lühikese tervituse ja võimaldab teil assistendiga käed-vabad olles rääkida – ideaalne, kui kavatsete dikteeri mitu taotlust järjest.

Kui eelistate seda teha ühe klõpsuga, puudutage Copiloti rakenduses mikrofoniikooni ja kuulamine algab; käitumine on sama mis äratussõna puhul, sealhulgas ujuv kast, mis ei varja täisekraani, ja juhtnupud seansi vaigistamiseks või lõpetamiseks koos liidesega. puhas ja otsekohene.

Lõpetamiseks võite öelda „Tühista” või „Lõpeta vestlus”, sulgeda vestluse paneelil oleva X-iga või lihtsalt mõneks sekundiks rääkimise katkestada, kuna häälseansid katkevad automaatselt, kui tegevust pole või ajalimiit on täis. ajapiirang.

Kui soovite üksikasju konfigureerida, minge menüüsse Seaded > Konto > Copiloti kiirklahvid, et valida, kas klahv avab täisrakenduse või kompaktsema vaate, ja lubage samal paneelil režiim „Vajutage ja hoidke all”, et kasutada režiimi Vajutage rääkimiseks millal iganes see sulle mugavam on.

Mida saab Copilot teha, kui see sind kuulab?

Kui kuulamisrežiim on avatud, saate toiminguid ja vastuseid taotleda loomulikus keeles: avada rakendusi, luua meili mustandit, selgitada süsteemisätet või küsida teie ees oleva dokumendi kokkuvõtet – kõik see toimub vestluse teel ja eelisega, et teil on käed-vabad muude ülesannete jaoks.

Kui kasutate nägemist koos häälega, laienevad võimalused: lubades Copilotil näha aktiivset akent või kogu töölauda, ​​saab assistent aru visuaalsest kontekstist ja teie... samm-sammult juhend ja soovitab täiustusi või otseteid, näiteks Exceli tabeli ümberkorraldamist või lõigu ümberkirjutamist sõna stiiliga ametlikum või kokkuvõtlikum.

Samuti saate seda kombineerida kohalike failide (sh teie seadmes OneDrive'iga sünkroonitud failide) otsimise ja lugemisega, et leida, avada ja vaadata levinud tüüpi sisu (nt .docx, .xlsx, .pptx, .txt, .pdf ja .json), muutes Copiloti... Universaalne otsingumootor arvutis.

Kiire näide: „Leia minu toidukorra ettevalmistusfail” avab midagi sellist nagu mealprep.docx või mealprep_plan.xlsx; „Eelmise nädala failid” loetleb sel perioodil loodud failid; ja „Failid” pDF minu seadmes" filtreerib tüübi järgi, austades alati teie määratud õigusi Failidele juurdepääsu seaded.

Kaaspiloodi nägemine ja tagasikutsumine: mis need on ja kuidas need erinevad

Copilot Vision töötab ainult seansi ajal ja ainult selle sisu puhul, mida te sel hetkel jagate (Edge'i vahekaart, Windowsi rakendus või isegi mobiilirakenduse kaamera); see ei salvesta ekraanipilte ega heli pärast suhtlust, välja arvatud vestluse transkriptsioon, mis jääb teie ajalukku ja mida... Saate selle igal ajal kustutada..

Mälestused on seevastu Copilot+ arvutitele ainuomane funktsioon: see teeb seadme tasandil ekraanist krüpteeritud hetktõmmiseid ja salvestab need lokaalselt, kus neid ka analüüsitakse; selle idee on olla privaatne "fotomälu", millele saate hiljem juurde pääseda, millel on spetsiaalsed privaatsuskontrollid ja ilma neid pilte pilve üles laadimata.

Võti on lihtne: Nägemine aitab sul näha seda, mida sa sel hetkel näed ja jagada otsustad; Mälestused loob kohaliku kirje, mida saab otsida ühilduvatest seadmetest, olles kõik sinu kontrolli all; mõlemad funktsioonid on ühendatud häälega, et saaksid küsida selgitusi, kokkuvõtteid või toiminguid vastavalt oma sisule. ekraanil või teie ajaloos.

Kui te ei soovi, et Vision midagi näeks, siis lihtsalt ärge jagage oma ekraani ega sulgege see seanss; kui te ei soovi mälestusi, siis ärge seda lubage ega vaadake oma süsteemis privaatsusseadeid üle, sest Microsoft eraldab need mõisted selgelt, et saaksite otsustada. millal ja kuidas nad sekkuvad.

Leidke ja mõistke oma faile arvutis

Windowsi Copilot saab kasutada failiotsingu ja faili lugemise õigusi, et aidata teil dokumente leida ja avada ning vastata ka nende sisu kohta käivatele küsimustele: assistent saab lugeda PDF-, Wordi- või TXT-faili ja öelda teile olulist teavet, tsiteerida osi või teisendada selle failiks. betoonist ülesannete nimekiri.

Nende funktsioonide sisse- või väljalülitamiseks minge menüüsse Seaded > Konto > Failide otsing ja lugemine; teie kontroll on detailne ja saate seda piirata, kui eelistate, et assistent näeks ainult failinimesid, mitte sisu, rõhutades sellega, et teie määrate tooni. piisav juurdepääsutase.

Kui töötate OneDrive'iga, mis on sünkroonitud teie enda arvutiga, on kogemus sujuv: see toimib nii, nagu oleks kõik lokaalne, nii et saate leida vajaliku ilma teede või kaustade pärast muretsemata, kuna Copilot saab päringust aru ja tagastab tulemused. filtreeritud asjakohasuse järgi.

Koos Visioniga muutub otsing veelgi otsesemaks: kui teil on aruanne avatud, saate küsida „võtke kokku, mis selles dokumendis otsustati” ja assistent seab selle konteksti vastavalt ekraanil nähtule, säästes teid lehekülghaaval kerimisest. pikad dokumendid.

Ekraanipildid ja seadme kontekst

Kui teil on vaja Copilotilt küsida millegi kohta, mis teie ekraanil kuvatakse, kasutage jäädvustamisvalikut: Copiloti koostajas puudutage + ja seejärel valikut „Tehke ekraanipilt”, et valida ala või kogu ekraan; seejärel sõnastage oma küsimus ja saatke see assistendile vastamiseks. konkreetne fragment.

Samuti on oluline „seadme kontekst”: võite küsida „Kuidas ma sidun Bluetooth-kõrvaklappe seadmega?”. minu arvuti„?” ja Copilot vastab teie Windowsi versioonile kohandatud sammudega, vältides üldiseid juhiseid, mis teie süsteemile ei sobi, mis on eriti kasulik siis, kui Menüüd muutuvad.

See jäädvustamise ja konteksti kombinatsioon lahendab kahtlused lennult: olgu tegemist rakenduse vea tõlgendamise, kuvatavate arvude võrdlemise või redigeeritava lõigu ümberkirjutamise taotlemisega, Copilot mõistab jagatud ruumi ja pakub teile samm-sammult abi. kõrvale kaldumata sellest, mida teed.

Pea meeles, et Vision ei salvesta neid jäädvustusi pärast seansi lõppu; alles jääb vaid transkriptsioon sinu ajalukku, mille saad igal ajal kustutada, teades, et jagatud pilt või heli ei lähe kaotsi. Nad hoiavad Copiloti.

Windowsi otseteed ja "Push to Speak"

Copiloti klahv ja Windows + C on kiireimad viisid rakenduse või kompaktse vaate avamiseks; menüüs Seaded > Konto > Copiloti kiirklahvid saate otsustada, kas kiirklahv avab kogu rakenduse või kerge akna, mis on ideaalne kiirete päringute tegemiseks ja Copiloti käepärast hoidmiseks. ilma töölauale tungimata.

Režiim „Push to Talk” (vajuta ja hoia all) aktiveeritakse samas jaotises ja käivitab Copilot Voice'i, kui hoiad vastavat klahvi 1–2 sekundit all; klahvi vabastamine lõpetab kuulamisseansi, mis on väga praktiline, kui soovid mikrofoni detailset juhtimist ja rakenduse sekkumise vältimist. ole kõige suhtes tähelepanelik aeg.

Kui te ei soovi otseteid kasutada, saate alati kasutada rakenduses olevat mikrofoniikooni; näete helitervitust ja kuulamisnäidikut, samuti võimalust vaigistada ja vaigistus tühistada teise klõpsuga, mis on kõige otsesem viis hääle ja heli vahel vahetamiseks. klaviatuuri sisend.

Lisaboonusena sisaldab Windowsi Copiloti rakendus funktsioone, mida mujalt ei leia: lisaks äratussõnale ja Visionile saate failiotsingu, ekraanipildid ja seadme konteksti; samal ajal pole teatud kogemused, näiteks Copilot Shopping või Copilot Podcast, Windowsi rakenduses saadaval ja neid hoitakse teistes rakendustes. Kaaspiloodi pinnad.

Mis siis, kui te ei saa rääkida? Nägemine ka tekstiga

On olukordi, kus rääkimine on ebapraktiline (vaikne koosolek või lärmakas kohvik), seega toob Microsoft Visioni lähenemisviisi ka tekstisuhtlusele: saate oma päringu sisestada ja saada kasu ekraanil kuvatava analüüsist – see on täiustus, mis esmakordselt ilmneb... Windowsi siseringi programm.

Samal ajal pea meeles, et saad nende vahel sujuvalt vahetada: trükkimine, kui rääkimine pole mugav, ja „Hey Copilot” või mikrofoni kasutamine, kui see on produktiivsem, sest assistent mõistab mõlemat režiimi ja hoiab ajaloo ühtsena, et saaksid hiljem otsitava hõlpsalt üles leida. millega olete juba konsulteerinud.

See multimodaalne lähenemisviis ongi see, mida Microsoft edendab: hääl, tekst ja visuaal, kui annate loa, nii et Copilot on kasulik igas kontekstis ega takerdu ühe suhtlusvormi külge, mis on turul edu saavutamiseks võtmetähtsusega. Windowsi töölaud.

Microsofti enda jagatud huvitava faktina kipuvad häälkasutajad suhtlema kaks korda rohkem kui need, kes kirjutavad, mis on loogiline, sest rääkimine on tavaliselt kiirem kui kirjutamine ja assistent saab teid kuulates mitu toimingut omavahel aheldada. vähem hõõrdumist.

Copilot Microsoft Teamsi koosolekutel

Tööl abistab Copilot Teamsi koosolekutel: see võtab kokku ideed, märgib, kes mida ütles, pakub välja tegevusi ja vastab küsimustele reaalajas nii koosoleku ajal kui ka pärast seda, alati vastavalt transkriptsioonipoliitikale ja korraldaja seatud sätetele. otsustas lubada.

Kui korraldate koosolekut, saate valida järgmiste tingimuste kohaselt: „Koosoleku ajal ja pärast koosolekut” (nõuab transkriptsiooni; kui peatate transkriptsiooni, peatub ka Copilot), „Ainult koosoleku ajal” (kasutab ajutist kõnesünteesi, kui keegi transkriptsiooni ei aktiveeri) või „Väljas” (Copiloti pole, salvestust pole ja transkriptsiooni pole), kõik vastavalt teie valitud sätetele. konfidentsiaalsusmärgised.

Kui olete koosoleku juhtelementide kaudu sisse lülitatud, käivitage Copilot ja esitage küsimusi: milliseid küsimusi tuleks edasiliikumiseks esitada, kus on kellegi argumendis lünki või kuidas luua plusside ja miinustega tabel; võite paluda tal ka ideid loetleda, tsiteerides transkripti ja vesteldes, nupuga rohkem soovitusi.

Kui logite sisse hilja (näiteks 5 minutit hiljem), näete külgribal teadet kokkuvõttega tutvumiseks; ja kui olete töölauarakenduses, saate Copiloti uues aknas avada, et töötada paralleelselt, ilma vestlust silmist kaotamata – see on väga praktiline järgmistel juhtudel: tõeline multitegumtöötlus.

Pikki või tabelipõhiseid vastuseid saab eksportida Wordi või Excelisse, välja arvatud juhul, kui koosolekul on seda keelav konfidentsiaalsussilt või kui korraldaja on vestluse kopeerimise ja edastamise keelanud. subtiitrid Otseülekanded või transkriptsioonid; pärast koosolekut pääsete Copilotile ligi koosoleku vestluse või kokkuvõtte vahekaardi kaudu, kui see on olemas. ärakiri on saadaval.

Muuda häält, mida sa kuuled

Copiloti esmakordsel installimisel palutakse teil valida hääl; hiljem saate seda igal ajal muuta: veebis (copilot.com) profiiliikooni ja hääle jaotise kaudu, Windowsis või macOS-is menüüs Seaded > Hääl ja mobiilis rakenduse menüüs, puudutades hääle seadeid, et ka hääle sätteid muuta. taasesituse kiirus.

See on kasulik, kui veedad assistendiga palju tunde: selge ja meeldiva hääle leidmine vähendab väsimust ning muudab dikteerimisseansid sujuvamaks, eriti kui teed mitut asja korraga või kasutad Copiloti tuge teiste ülesannete täitmisel. toimingud ekraanil.

Privaatsus ja teie hääleandmete kasutamine

Häälandmeid kasutatakse Copilot Voice'i teenuse osutamiseks ja saate kontrollida, kas vestlusi kasutatakse mudeli treenimiseks; genereeritud transkriptsioone hallatakse nagu ülejäänud teie Copiloti vestluste ajalugu ja teil on võimalus kustuta see ajalugu millal iganes soovid.

Visioni puhul pääseb assistent ligi ainult sisule, mida te selles seansis jagate, ega salvesta ekraanipilte ega heli; mälestuste puhul, kui otsustate selle Copilot+ arvutis lubada, salvestatakse hetktõmmised krüpteeritult ja analüüsitakse lokaalselt, kinnitades, et pakutav „mälu” on privaatne, teie kontrolli all ja seadmega piiratud.

Kui te ei soovi teatud keskkondades häält kasutada, keelake ajutiselt funktsioon „Hey Copilot” ja kasutage klõpsuga rääkimiseks või tekstisisestust; eesmärk on anda teile kontroll selle üle, millal ja kuidas süsteem teid kuulab, pakkudes kiireid valikuid vestluse peatamiseks, vaigistamiseks või lõpetamiseks. täielik ja kohene.

Iga hääleseansi lõpus saab Copilot tagasisidet küsida; mõne sekundi kulutamine selle saatmiseks aitab parandada äratundmise täpsust ja vastuse kvaliteeti, mis on eriti märgatav järgmistes olukordades: aktsendid ja lärmakas keskkond.

Uued funktsioonid silmapiiril: tekstipõhine visioon, Copiloti toimingud ja palju muud

Microsoft lisab Windows 11-sse Microsoft Store'i kaudu lainetena uusi funktsioone: lisaks Text Visioni tulekule valmistab see ette Copilot Actionsi, mis toimib otse teie failidega (fotode korraldamine, teksti eraldamine PDF-failidest või koosoleku ajastamine e-kirja kohal hiirega liikudes), mööndusega, et keerukates liidestes võib olla vale.

Teise uue funktsioonina mainiti Manust, mis teisendab dokumendid Explorerist paremklõpsuga veebisaitideks, ja võimalust Filmoraga videoid monteerida ilma töövoogudest lahkumata; need on näited sellest, kuidas Copilot soovib integreeruda igapäevaste ülesannetega ja julgustada Windows 10 kasutajaid sellele süsteemile üle minema, just nagu see süsteem... kaotab ametliku toetuse.

Visioniga on mõte selge: assistent "näeb", mida sa vaatad, et sind kontekstiga aidata; sina valid, mida jagada, ja kui sa ei soovi rääkida, saad ka kirjutada, lastes Copilotil olla sinu kaaspiloot töölaual nii hääle kui ka teksti abil. tekst ja vaade.

Microsoft nõuab siiski, et kõik toimiks selgesõnalise autoriseerimisega ja et saate selle igal ajal välja lülitada; kahtlused on normaalsed, kuid aktiveerimisvalikud, kohalike mälestuste haldus ja ajaloo kontroll pakuvad... rahu ja läbipaistvus.

Kiired näpunäited ja lahendused levinud probleemidele

Kui „Hey Copilot” ei vasta, kontrollige, kas rakendus on ajakohane, kas aken oli hääle konfigureerimisel maksimeeritud ja kas mikrofon pole riistvara poolt vaigistatud. Lauaarvutis veenduge, et olete nii Windowsis kui ka Copilotis valinud õige sisendseadme, sest mõnikord valib süsteem erineva seadme. mikrofon, mida sa ei kasuta.

Kui taustamüra on palju, proovige mikrofonile lähemale liikuda või kasutada peakomplekti; hääletuvastus on küll tugev, kuid nagu iga dikteerimissüsteem, paraneb see puhta heli vastuvõtmisel, mille tulemuseks on vähem kordusi ja otsesemad vastused. esimesel katsel täpne.

Kui häälevalikut ei kuvata, kontrollige oma piirkondlikke ja keelesätteid ning veenduge, et olete Copiloti sisse logitud; sisselogimine avab sellised funktsioonid nagu ajalugu, piltide genereerimine ja pikemad vestlused, sh hääle interaktsioon.

Ja kui kiirklahv ei ava oodatud kohta, minge menüüsse Seaded > Konto > Copiloti kiirklahvid ja valige, kas soovite täisrakendust või väiksemat kiirvaadet, mis sobib ideaalselt kontrollimiseks ilma kogu ekraani hõivamata. tööekraan.

Lõpuks, kui soovite täielikku kogemust, ühendage hääl, nägemine, failiotsing ja seadme kontekst: funktsiooniga „Hey Copilot” saate assistendi igal ajal aktiveerida, paluda tal näha oma ekraanil olevat, leida dokumendi ja sulgeda selle nupuga „Cancel” ilma midagi puudutamata – mugav viis aja ja ... säästmiseks. vähendage ebavajalikke klikke.

Kui „Hey Copilot” on lubatud, Copilot Vision (kui te selle lubate), juurdepääs teie failidele teatud lubade alusel ja integratsioon Teamsi koosolekutega, saab Microsofti abilisest mitmekülgne kaaslane igapäevaseks kasutamiseks Windowsis: kiire rääkimisel, abivalmis kirjutamisel, austab teie privaatsusseadeid ja on alati käepärast otseteede või lihtsa häälkäsklusega, mis ausalt öeldes muudab teie arvuti justkui... veidi targem.