Observação
Descrições avançadas de imagem estão disponíveis com o Narrador do Windows e em visualização por meio do Programa Windows Insider com Ação com um Clique.
O que são descrições avançadas de imagens?
Descrições avançadas de imagem fornecem descrições detalhadas do conteúdo visual, como imagens, gráficos, gráficos, diagramas, botões não rotulados e muito mais. Descrições avançadas de imagem permitem que usuários cegos ou com baixa visão entendam o conteúdo visual por meio de contexto detalhado. Esse recurso está disponível atualmente em Copilot+ PCs com Snapdragon no Programa Windows Insider. Outros dispositivos Windows continuarão a usar a experiência padrão de descrição de imagem, que depende exclusivamente de serviços online.
Como funcionam as descrições de imagens avançadas?
O recurso de descrições avançadas de imagens usa modelos de IA para fornecer descrições textuais detalhadas de imagens, gráficos e gráficos.
Por exemplo, a descrição gerada de uma imagem de um berçário seria:
A imagem mostra um grande arranjo organizado de pequenas plantas de folhas verdes que provavelmente são brotos ou mudas dispostas em um padrão de grade denso. Cada planta está contida em um pequeno recipiente preto raso, sugerindo um viveiro ou uma configuração de plantio. As plantas são uniformemente espaçadas, criando uma aparência uniforme e ordenada que pode simbolizar a organização do crescimento ou uma coleção. Os recipientes pretos contrastam fortemente com os brotos verdes, destacando o foco nas plantas.
Para gerar descrições de imagem avançadas no Narrador:
Quando o Narrador estiver ativado, você poderá pressionar a tecla+Ctrl+D do Narrador para obter uma descrição da imagem ou do item em que você está focado.
Observação
Para saber mais sobre como usar o Narrador, vá para Guia completo do Narrador.
Para gerar descrições de imagem ricas em Ação com um Clique:
Para entrar na Ação com um Clique, use a tecla+ Windows,clique com o mouse ou pressione a tecla+Windows Q e selecione a ação Descrever imagem quando focalizada em uma imagem ou item. Você também pode inserir a Ação com um clique deslizando para a direita em PCs habilitados para toque ou no menu da Ferramenta de Captura , se ela estiver instalada.
Observação
Para saber mais sobre Ação com um Clique, acesse Ação com um Clique: faça mais com o que está na sua tela.
Para que as descrições avançadas de imagens podem ser usadas?
Descrições avançadas de imagem são projetadas para fornecer descrições de texto de conteúdo visual para pessoas cegas ou com baixa visão. As descrições destinam-se a melhorar sua compreensão de imagens, gráficos e grafos e dar suporte à acessibilidade. Você pode regenerar a descrição da imagem e copiá-la para referência futura.
Como o recurso de descrições de imagens avançadas foi avaliado? Quais métricas são usadas para medir o desempenho?
Para garantir a qualidade das descrições geradas, foi criado um conjunto de dados incluindo vários tipos de imagens. Essas imagens incluíam fotografias naturais, tabelas, gráficos, capturas de tela e interfaces de usuário de aplicativos. As descrições geradas foram avaliadas quanto à precisão, integridade, relevância e utilidade. Vários métodos de avaliação, incluindo julgamentos de especialistas humanos e pontuação assistida por LLM, foram usados para encontrar áreas para melhorar a qualidade das descrições geradas.
Quais são as limitações das descrições de imagens avançadas e como os usuários podem minimizar o impacto dessas limitações ao usar o sistema?
A Microsoft está comprometida em criar IA responsável por design. Nosso trabalho é guiado por um conjunto fundamental de princípios: imparcialidade, confiabilidade e segurança, privacidade e segurança, inclusão, transparência e responsabilidade.
Esse recurso pode fornecer descrição de imagem imprecisa, dados em tabelas ou gráficos ou inferências emocionais. Isso pode levar a suposições incorretas sobre uma imagem ou a intenção do conteúdo visual com base na descrição gerada. Continuamos a trabalhar nos modelos utilizados, para melhorar a qualidade das descrições de imagem fornecidas. Você pode enviar comentários usando qualquer um dos métodos discutidos em Como fazer comentários sobre descrições de imagem no Narrador?
Este recurso não deve ser usado para:
- Gere descrições para imagens médicas ou relacionadas à saúde que possam ser mal interpretadas como aconselhamento médico. Descrições incorretas podem levar a informações incorretas e decisões potencialmente prejudiciais por parte dos usuários.
- Gere descrições para imagens em documentos jurídicos ou financeiros em que a precisão é fundamental. A má interpretação de tais imagens pode levar a disputas legais ou perdas financeiras
- Gere descrições para imagens que contenham símbolos culturais ou religiosos sem o contexto adequado. A má interpretação pode levar à insensibilidade cultural ou ofensa.
- Gere descrições para imagens contendo mapas, bandeiras ou globos. A má interpretação dessas imagens pode levar à desinformação e ao envolvimento em assuntos internacionais.
Quais fatores operacionais e configurações permitem o uso eficaz e responsável de descrições de imagens avançadas?
Para gerar descrições de imagem avançadas no Narrador:
Para obter uma descrição da imagem quando o Narrador estiver ativado, pressione atecla+ Ctrl +D do Narrador enquanto foca no conteúdo visual. Para desativar as descrições de imagens no Narrador, vá para Configurações>Narrador>de Acessibilidade>Obtenha descrições de imagens, títulos de páginas e links populares e selecione a botão de alternância.
Observação
Para saber mais sobre como usar o Narrador, vá para Guia completo do Narrador.
Para gerar descrições de imagem ricas em Ação com um Clique:
Use a tecla+ Windowsdo mouse clique ou pressione a tecla+Windows Q para inserir Clique em Fazer, selecione ou foque em uma imagem e, em seguida, selecione a ação Descrever imagem para começar a gerar a descrição da imagem.
Observação
Para saber mais sobre Ação com um Clique, acesse Ação com um Clique: faça mais com o que está na sua tela.
Como fazer para fornecer comentários sobre descrições de imagens avançadas geradas?
Pode haver imprecisões nas descrições fornecidas por esse recurso. Para melhorar a qualidade das descrições, você pode fornecer comentários ao:
- Selecionar o ícone de polegar para cima ou para baixo em uma descrição de imagem na interface do usuário do Narrador.
- Respondendo a solicitações ocasionais do Windows solicitando que você avalie ou forneça comentários por escrito sobre o produto ou serviços que você usa.
- Abra o Hub de Feedback para encontrar comentários semelhantes para votar a favor ou fornecer novos comentários preenchendo o formulário.
O compromisso da Microsoft com a IA responsável e com a privacidade
A Microsoft vem trabalhando para avançar a IA com responsabilidade desde 2017, quando definimos pela primeira vez nossos princípios de IA e, posteriormente, operacionalizamos nossa abordagem por meio de nosso Padrão de IA Responsável. Privacidade e segurança são princípios fundamentais ao desenvolver e implantar sistemas de IA. Trabalhamos para ajudar nossos clientes a usar nossos produtos de IA com responsabilidade, compartilhando nossos aprendizados e criando parcerias baseadas em confiança. Para saber mais sobre nossos esforços de IA responsável, os princípios que nos guiam e as ferramentas e funcionalidades que criamos para garantir que desenvolvamos a tecnologia de IA com responsabilidade, consulte IA responsável.
O recurso de descrições avançadas de imagens foi projetado para melhorar a acessibilidade para usuários cegos e com baixa visão e não se destina a um público mais amplo. Os modelos de IA para esse recurso usam indicações contextuais em toda a imagem, incluindo pessoas ou entidades em segundo plano, que é como os modelos ainda podem associar a imagem a um indivíduo ou descrever emoções. Descrições avançadas de imagem permitem inferências emocionais, mas não usam dados biométricos. Qualquer processamento que retorne resultados que identifiquem um indivíduo ou inferam a emoção de um indivíduo não é o resultado do processamento da face, como reconhecimento facial, geração e comparação de modelos faciais. Por exemplo, se uma imagem contiver a foto de um atleta famoso vestindo o uniforme do time com seu número específico, os modelos ainda poderão retornar um resultado que identifique o indivíduo com base nesses indícios contextuais.
Esse recurso não deve ser usado para inferir ou deduzir as emoções de pessoas físicas no local de trabalho ou em instituições de ensino (por exemplo, funcionários ou estudantes). Descrições avançadas de imagens podem fornecer descrições de texto detalhadas relacionadas às emoções percebidas das pessoas em imagens. Os processos subjacentes à emoção humana são complexos e há diferenças culturais, geográficas e de indivíduo que influenciam como podemos perceber, experimentar e expressar emoções. As respostas relacionadas às emoções das pessoas em imagens são baseadas em como elas aparecem e podem não indicar com precisão o estado interno de pessoas individuais.
Para esclarecer sobre como cada recurso de IA funciona, é importante entender suas funcionalidades e limitações. Você deve entender as escolhas disponíveis em um recurso de IA e a responsabilidade associada a essas escolhas.
A Ação com um clique sugere ações que você pode pegar, e você pode escolher os aplicativos que serão o provedor (se aplicável) para essas ações. Depois de escolher a ação e o provedor para a ação, os resultados dessa ação serão responsabilidade do provedor. Por exemplo, na Ação com um clique você pode escolher a ação Remover segundo plano com Paint, o que significa que você escolheu Paint como o provedor para a ação. Depois de selecionar a ação no menu de contexto da Ação com um clique, ele abrirá o aplicativo Paint e a imagem selecionada será processada pelo Paint.
Os modelos de Ação com um Clique passaram por avaliações de imparcialidade, juntamente com avaliações abrangentes de IA responsável, segurança e privacidade, para garantir que a tecnologia seja efetiva e equitativa, enquanto adere às melhores práticas de IA Responsável da Microsoft.
Para obter mais informações sobre privacidade para Recall, consulte Privacidade e controle sobre sua experiência de Recall.
Publicado em: 11 de fevereiro de 2025
Última atualização: 23 de junho de 2025