- Copilot A visão chega a Android e permite que você interaja com o ambiente usando a câmera do celular.
- O novo recurso integra análise visual em tempo real e leitura de conteúdo na tela.
- O Copilot Vision faz parte de um conjunto de oito grandes atualizações do assistente da Microsoft.
- Disponível no aplicativo Copilot para Android e iOS, com funções expandidas em Windows.
A Microsoft introduziu um novo recurso visual em seu assistente Inteligencia artificial Copilot, chamado Copilot Vision, que agora pode ser usado em dispositivos Android. Esse recurso permite que o assistente interprete o que o usuário vê pela câmera ou o que aparece na tela do celular, ampliando assim o possibilidades de interação com a tecnologia de uma forma mais natural e intuitiva.
Com esta implementação, a Copilot se alinha à tendência de assistentes digitais que vão além do teclado., introduzindo recursos multimodais que permitem a interpretação de imagens, vídeos e conteúdo visual ao vivo. Esta característica não só marca um passo importante para a IA Microsoft mobile, mas também compete diretamente com propostas semelhantes de empresas como Google, particularmente com seu sistema Gemini Ao vivo. Para saber mais sobre isso, você pode consultar o artigo em Jules, a IA do Google.
O que é o Copilot Vision e como ele funciona?
Copilot Vision é um recurso que permite ao assistente da Microsoft observar através da câmera do telefone ou interpretar o que é exibido na tela, para fornecer assistência contextual em tempo real. Da análise de imagens armazenadas à interpretação de vídeos ao vivo, o Copilot agora pode interagir com o ambiente visual do usuário de uma forma mais direta.
Por exemplo, o usuário pode focar sua câmera em uma planta e o Copilot poderá identificar sua espécie e oferecer recomendações sobre seus cuidados.. Também é possível apontar um cômodo da casa e receber sugestões de decoração, o que transforma o assistente em um ferramenta útil para múltiplas atividades diárias. Isso é complementado pelas melhorias do Copilot na personalização de sugestões, conforme detalhado em Personalize sugestões com o GitHub Copilot.
Em dispositivos com sistema operacional Android, o recurso está disponível por meio do aplicativo oficial Copilot, embora o acesso total esteja — por enquanto — limitado aos assinantes do Copilot Pro em certos países. Mesmo assim, a tecnologia já foi progressivamente ativada em diversos dispositivos e sua implementação deve continuar. o escopo é expandido cedo.
Uma experiência visual também no Windows
Além dos dispositivos móveis, o Copilot Vision também foi integrado ao Windows como parte do novo aplicativo nativo Copilot.. Esta versão do assistente pode ler o que aparece na tela enquanto o usuário trabalha com diferentes aplicativos ou documentos.
A funcionalidade detecta janelas ativas, interpreta conteúdo da web ou documentos abertos e permite que você interaja com eles diretamente.. Portanto, quer você esteja editando uma apresentação ou navegando em uma página da web complexa, o Copilot pode ajudá-lo a entender gráficos, reorganizar conteúdo ou até mesmo executar tarefas sem precisar alterar janela. Os recursos de análise do Copilot são semelhantes aos do novo Copilot Vision que revoluciona a navegação na web.
Para acessar rapidamente esta função em computadores, basta pressionar a combinação de teclas Alt + Espaço.. Além disso, a opção de interação de voz, com a mesma combinação de teclas pressionada por dois segundos.
Visão do Copiloto e a Competição: IA Visual em Tempo Real
A chegada do Copilot Vision no Android coincide com o lançamento de recursos semelhantes em assistentes de outras grandes empresas de tecnologia.. O Google, por exemplo, revelou recentemente o Gemini Live, que também permite análise em tempo real do que é visto pela câmera do dispositivo.
Ambas as propostas apostam numa experiência multimodal em móvel, mas a Microsoft se diferencia em sua abordagem com integração direta ao Windows e um ecossistema consolidado em torno do Copilot. A estratégia busca fazer do assistente um eixo central de produtividade, organização e assistência diária, conforme mencionado na análise de a mudança iminente na forma como buscamos informações.
Da navegação no conteúdo da web à ajuda com tarefas visuais diárias, O Copilot Vision visa cobrir uma ampla gama de utilizações, eliminando barreiras entre mundo digital e físico.
Outros recursos do Copilot foram aprimorados com a atualização
A atualização que apresenta o Copilot Vision faz parte de um conjunto mais amplo de melhorias que a Microsoft adicionou recentemente ao seu assistente de IA.. No total, o Copilot recebeu oito recursos principais que expandem sua utilidade diária:
- Memória: permite que o Copilot se lembre de preferências, hábitos ou datas importantes, sempre com a opção de personalizar o nível de privacidade.
- Ação: A IA pode executar tarefas para você, como comprar ingressos, fazer reservas ou enviar presentes.
- PÁGINAS: uma ferramenta para criar espaços de trabalho organizados e visuais onde você pode expressar ideias ou gerenciar projetos.
- Podcasts: gera conteúdo de áudio com base em interesses ou tópicos selecionados pelo usuário.
- Pesquisa Profunda: permite realizar pesquisas complexas, analisando documentos e fontes online.
- Shopping : ajuda você a comparar produtos, rastrear preços e identificar ofertas automaticamente.
- Pesquisar : Uma experiência de pesquisa aprimorada no Bing com respostas generativas e referências claras.
Essas ferramentas posicionam o Copilot como uma plataforma de assistência versátil., além de uma mera conversa de voz ou texto. Com a Visão como complemento visual, o ecossistema se completa com uma interface mais rica e conectada com o ambiente real. Para se aprofundar nas capacidades do Copilot, convido você a ler o artigo sobre Agentes de IA e copiloto de segurança da Microsoft.
Privacidade, controle e disponibilidade
A Microsoft destacou a importância da privacidade nesses novos recursos., garantindo que os usuários tenham controle total sobre quais informações são armazenadas ou lembradas. Por meio de um painel de configurações, você pode habilitar, limitar ou desabilitar recursos como Memória, bem como gerenciar permissões de acesso à câmera e ao conteúdo visual.
No caso do Copilot Vision, o acesso à câmera não é constante., mas só é ativado quando o usuário permite explicitamente. Dessa forma, a empresa pretende evitar mal-entendidos com outras funções como o Recall - em fase beta -, que ela não realiza capturas automáticas para uso posterior.
O Copilot Vision está disponível inicialmente para usuários de Android e iOS que usam o aplicativo móvel Copilot.. No Windows, o recurso deve ser instalado manualmente ou aguardar a implementação gradual no canal Insider. A Microsoft confirmou que irá habilitá-lo por regiões, níveis de assinatura e plataformas.
Com a integração da visão computacional e da leitura de tela, o Copilot dá mais um passo em sua transformação em um assistente digital verdadeiramente abrangente.. Seu potencial não se limita a responder perguntas ou executar comandos simples, mas começa a interpretar o mundo como o usuário o faz.
Desde identificar objetos do cotidiano, auxiliar em projetos acadêmicos ou acompanhar tarefas profissionais, a proposta busca aproximar a IA de contextos de uso mais pessoais e funcionais.. Tudo isso com controles de privacidade claros, opções de personalização e uma implementação alinhada ao ecossistema da Microsoft.
A chegada do Copilot Vision no Android não apenas adiciona outra ferramenta visual ao abrigo da IA cotidiana: ela redefine como interagimos com nossos dispositivos e o mundo físico, incorporando uma perspectiva tecnológica que interpreta, auxilia e aprende em tempo real.
Escritor apaixonado pelo mundo dos bytes e da tecnologia em geral. Adoro compartilhar meu conhecimento por meio da escrita, e é isso que farei neste blog, mostrar a vocês tudo o que há de mais interessante sobre gadgets, software, hardware, tendências tecnológicas e muito mais. Meu objetivo é ajudá-lo a navegar no mundo digital de uma forma simples e divertida.