Pesquisadores da Universidade de Cingapura apresentam o mais recente protótipo de headset AiSee, que permite que os cegos vejam o mundo por meio de descrições de voz com IA
Pesquisadores do Augmented Human Lab da Universidade Nacional de Cingapura demonstraram o mais recente protótipo de fone de ouvido AiSee para cegos. Originalmente um projeto da Universidade de Auckland em 2018, o fone de ouvido com tecnologia de IA utiliza uma câmera para identificar objetos e, em seguida, fornece uma descrição por voz para usuários com deficiências visuais.
Os cegos e as pessoas com baixa visão geralmente têm o problema de descobrir o que está à sua frente. Distinguir entre latas de sopa se torna um desafio devido à sensação idêntica dos rótulos e das latas. As pesquisas de imagens em smartphones podem ajudar, mas esse método requer um smartphone, conexão de dados e uma mão livre.
O AiSee funciona com um simples toque em um botão do ouvido esquerdo. Uma câmera de 13 megapixels captura imagens de objetos para identificação pelo sistema alimentado por IA, que então fala as descrições dos objetos para o usuário por meio de alto-falantes de condução óssea que podem ser ouvidos mesmo em espaços externos barulhentos. Esses alto-falantes também não bloqueiam sons ambientes importantes. Uma bateria recarregável de 1200 mA alimenta o fone de ouvido.
O AiSee continua em desenvolvimento para aprimorar ainda mais o dispositivo. Enquanto isso, os leitores que estão envelhecendo com presbiopia podem experimentar um bom par de lentes de aumento ajustáveis (como estas da Amazon) para ajudá-los com seus pontos de cruz.
Fonte(s)
05 de fevereiro de 2024
Pesquisadores da NUS desenvolvem "olho" alimentado por IA para que pessoas com deficiência visual "vejam" objetos
Assoc Prof Suranga Nanayakkara (à esquerda) com o estudante da NUS Mark Myres (à direita), que testou o AiSee como um usuário com deficiência visual.
Fazer compras é uma atividade comum para muitos de nós, mas para pessoas com deficiência visual, identificar itens de supermercado pode ser assustador. Uma equipe de pesquisadores da Escola de Computação da Universidade Nacional de Cingapura https://www.comp.nus.edu.sg/ (NUS Computing) de Cingapura apresentou o AiSee, um dispositivo de assistência vestível e acessível que ajuda as pessoas com deficiência visual a "ver" os objetos ao seu redor com a ajuda da inteligência artificial (IA).
As pessoas com deficiência visual enfrentam obstáculos diários, principalmente com a identificação de objetos, que é crucial para a tomada de decisões simples e complexas. Embora os avanços na IA tenham melhorado drasticamente os recursos de reconhecimento visual, a aplicação dessas tecnologias avançadas no mundo real continua sendo desafiadora e propensa a erros.
O AiSee, que foi desenvolvido pela primeira vez em 2018 e atualizado progressivamente em um período de cinco anos, tem como objetivo superar essas limitações, aproveitando as tecnologias de IA de última geração.
"Com o AiSee, nosso objetivo é capacitar os usuários com uma interação mais natural. Seguindo um processo de design centrado no ser humano, encontramos motivos para questionar a abordagem típica de usar óculos aumentados com uma câmera. As pessoas com deficiência visual podem relutar em usar óculos para evitar a estigmatização. Portanto, estamos propondo um hardware alternativo que incorpora um discreto fone de ouvido de condução óssea", disse o pesquisador principal do Projeto AiSee, o professor associado Suranga Nanayakkara, do Departamento de Sistemas de Informação e Análise da NUS Computing.
O usuário só precisa segurar um objeto e ativar a câmera embutida para capturar uma imagem do objeto. Com a ajuda da IA, o AiSee identificará o objeto e também fornecerá mais informações quando questionado pelo usuário.
Como o AiSee funciona?
O AiSee é composto por três componentes principais:
(1) O olho: Software de computador do mecanismo de visão
O AiSee incorpora uma microcâmera que captura o campo de visão do usuário. Isso forma o componente de software do AiSee, também chamado de "computador com mecanismo de visão". O software é capaz de extrair recursos como texto, logotipos e rótulos da imagem capturada para processamento.
(2) O cérebro: Unidade de processamento de imagens com tecnologia de IA e sistema interativo de perguntas e respostas
Depois que o usuário tira uma foto do objeto de interesse, o AiSee utiliza algoritmos sofisticados de IA baseados em nuvem para processar e analisar as imagens capturadas e identificar o objeto. O usuário também pode fazer uma série de perguntas para saber mais sobre o objeto.
O AiSee emprega tecnologia avançada de reconhecimento e processamento de texto para fala e de fala para texto para identificar objetos e compreender as perguntas do usuário. Alimentado por um modelo de linguagem amplo, o AiSee se destaca em trocas interativas de perguntas e respostas, permitindo que o sistema compreenda com precisão e responda às perguntas do usuário de maneira rápida e informativa.
Em comparação com a maioria dos dispositivos de assistência vestíveis que exigem o emparelhamento do smartphone, o AiSee opera como um sistema autônomo que pode funcionar de forma independente, sem a necessidade de dispositivos adicionais.
(3) O alto-falante: Sistema de som por condução óssea
O fone de ouvido do AiSee utiliza a tecnologia de condução óssea, que permite a transmissão do som através dos ossos do crânio. Isso garante que os indivíduos com deficiência visual possam receber informações auditivas de forma eficaz e, ao mesmo tempo, ter acesso a sons externos, como conversas ou ruídos de trânsito. Isso é particularmente vital para pessoas com deficiência visual, pois os sons ambientais fornecem informações essenciais para a tomada de decisões, especialmente em situações que envolvem considerações de segurança.
"Atualmente, as pessoas com deficiência visual em Cingapura não têm acesso à tecnologia de IA assistiva com esse nível de sofisticação. Portanto, acreditamos que o AiSee tem o potencial de capacitar pessoas com deficiência visual a realizar de forma independente tarefas que atualmente exigem assistência. Nosso próximo passo é tornar o AiSee econômico e acessível para as massas. Para isso, estamos fazendo outros aprimoramentos, incluindo um design mais ergonômico e uma unidade de processamento mais rápida", explicou o professor assistente Nanayakkara.
O estudante da NUS Mark Myres, que ajudou a testar o AiSee como um usuário com deficiência visual, comentou: "Na maioria das vezes, os dispositivos de assistência parecem muito direcionados a pessoas totalmente cegas ou com deficiência visual. Acho que o AiSee é um bom equilíbrio. Tanto as pessoas com deficiência visual quanto as cegas podem se beneficiar muito com ele."
Testes com usuários e aprimoramentos adicionais
O professor Nanayakkara e sua equipe estão atualmente em discussões com a SG Enable, em Cingapura, para realizar testes com pessoas com deficiência visual. Os resultados ajudarão a refinar e aprimorar os recursos e o desempenho do AiSee. Além disso, a B.P. De Silva Holdings Pte Ltd fez uma generosa doação de S$ 150.000 para apoiar o projeto.
A decisão da BPH de contribuir para o desenvolvimento do AiSee está enraizada em seu compromisso com a responsabilidade social corporativa e em um desejo genuíno de causar um impacto positivo na sociedade com uma missão mais ampla de promover a inclusão e a acessibilidade. Seu esforço filantrópico também reflete sua crença no poder transformador da tecnologia para enfrentar os desafios da sociedade e criar um mundo mais equitativo e inclusivo.
Ku Geok Boon, CEO da SG Enable, disse: "As soluções inovadoras possibilitadas pelas tecnologias assistivas podem mudar a vida das pessoas com deficiência, seja para ajudá-las a viver de forma mais independente ou para reduzir as barreiras ao emprego. Como agência focal e facilitadora do setor para deficiências e inclusão em Cingapura, a SG Enable tem o prazer de trabalhar com parceiros como a NUS e a B.P. De Silva Holdings Pte Ltd para aproveitar a tecnologia para capacitar pessoas com deficiências"
Além desse projeto, a SG Enable também busca colaborar com a NUS para explorar como a IA, a interface homem-computador e a tecnologia assistiva podem dar às pessoas com deficiência mais opções tecnológicas.
