A Microsoft lança o aplicativo Seeing AI para auxiliar pessoas com baixa visão

Na quinta-feira, durante o Ability Summit, a Microsoft anunciou que o Seeing AI agora está disponível em mais 14 idiomas (totalizando 33 idiomas) e que serão lançados os modelos de IA generativa mais recentes, incluindo descrições mais detalhadas de imagens e a possibilidade de conversar por fotos e documentos. O aplicativo inovador utiliza as tecnologias de IA do Azure para capacitar pessoas com baixa visão, oferecendo assistência aprimorada para o dia a dia.

Introdução ao aplicativo Seeing AI

O aplicativo Seeing AI integra a tecnologia de ponta do Azure GPT-4 Turbo com recursos de IA de visão, garantindo respostas rápidas e precisas em qualquer smartphone equipado com essas funcionalidades. Projetado para atender a diversas necessidades, o aplicativo oferece uma ampla gama de recursos.

O aplicativo permite que os usuários ouçam textos lidos em voz alta, facilitando a compreensão do conteúdo escrito. Textos mais curtos podem ser lidos instantaneamente no modo de câmera ao vivo, enquanto trechos mais longos são capturados, convertidos em texto e, posteriormente, lidos em voz alta.

Recursos versáteis

Leitor de código de barras: os usuários podem escanear os códigos UPC dos produtos para obter informações relevantes.

Descrição da cena: O aplicativo fornece informações descritivas sobre o ambiente ao redor do usuário, com foco nos objetos mais próximos.

dentde pessoas: Através da tecnologia de reconhecimento facial, o aplicativo descreve os indivíduos edentsuas expressões emocionais.

Reconhecimento de Moedas: Os usuários podemdentfacilmente diversas notas de 17 países diferentes.

dentde cores: O aplicativo reconhece as cores capturadas em fotos ao vivo, auxiliando os usuários a distinguir elementos visuais.

Conversão de escrita à mão: as anotações manuscritas são convertidas em texto de forma integrada para melhor acessibilidade.

Detecção de Brilho: Um tom com variação de altura dependendo do brilho auxilia os usuários a perceberem o ambiente ao seu redor.

Embora o aplicativo apresente uma precisão impressionante em muitos cenários, é essencial reconhecer suas limitações. O aplicativo pode ter dificuldades com itens mais complexos, como classificadores de moedas, apesar de identificardentobjetos comuns, como lâminas de barbear. Da mesma forma, embora o reconhecimento de texto em recibos e embalagens seja geralmente confiável, o aplicativo pode falhar ao se deparar com textosmaticou científicos.

Implicações e perspectivas

O aplicativo Seeing AI representa um avanço significativo na acessibilidade digital, demonstrando o compromisso da Microsoft em usar a IA para o bem social. Ao aproveitar o poder das tecnologias de IA do Azure, o aplicativo permite que pessoas com baixa visão naveguem em seus arredores com maisdent.

Os avanços em IA e aprendizado de máquina oferecem perspectivas promissoras para aprimorar ainda mais os recursos do aplicativo e solucionar suas limitações atuais. O refinamento e a iteração contínuos serão cruciais para garantir que o Seeing AI permaneça na vanguarda das soluções de acessibilidade digital, atendendo às necessidades em constante evolução de seus usuários.