A gigante tecnológica Microsoft desenvolveu uma nova tecnologia baseada em Inteligência Artificial que ajuda crianças e jovens cegos a compreender melhor o seu ambiente social imediato, a interagir com os seus pares e a ganhar confiança mais facilmente.
Para as crianças que nasceram cegas, a interacção social pode ser particularmente desafiante, pois têm dificuldade em direccionar a voz para a pessoa com quem estão a falar. Como resultado, têm dificuldade em envolver-se e fazer amizade com os seus pares, o que pode ser frustrante para a criança e para a sua rede de apoio de familiares e professores que querem ajudar.
Chamado PeopleLens, o projeto ajuda crianças cegas a fazer amigos; e para professores e pais, é uma forma de estas crianças e jovens desenvolverem competência e confiança na interação social.
PeopleLense é um dispositivo usado na cabeça que lê em voz alta em áudio espacializado os nomes de indivíduos conhecidos quando o aluno olha para eles. Isso significa que o som vem da direção da pessoa, ajudando o aluno a compreender a posição relativa e a distância de seus colegas.
O PeopleLens ajuda os alunos a construir um mapa de pessoas, um mapa mental das pessoas ao seu redor, necessário para sinalizar com eficácia a intenção comunicativa, – Cecily Morrison, gerente principal de pesquisa do Laboratório de Pesquisa da Microsoft em Cambridge, junto com outros autores, escreveu em uma postagem no blog.
“A tecnologia, por sua vez, indica aos colegas do aluno quando eles foram vistos e podem interagir – um substituto para o contato visual que geralmente inicia a interação entre as pessoas”, acrescentou Morrison.
PeopleLens é um sofisticado sistema de protótipo de IA que funciona em óculos de realidade aumentada conectados a um telefone. O sistema pode reconhecer apenas os rostos que foram registrados no sistema. Para se cadastrar, as pessoas devem tirar diversas fotos de si mesmas com o telefone acoplado ao PeopleLens.
O sistema então recebe imagens e as processa com algoritmos de visão computacional para localizar, identificar, rastrear e capturar continuamente as direções do olhar das pessoas nas proximidades.
Além disso, o sistema também emprega uma série de sons para ajudar o usuário a posicionar as pessoas no espaço circundante: um impacto percussivo indica quando o olhar cruza com uma pessoa a até 10 metros de distância. O bump é seguido do nome da pessoa se a pessoa estiver cadastrada no sistema, estiver dentro 4 metros do usuário, e ambos os ouvidos da pessoa podem ser detectados.
As funções do sistema PeopleLens incluem recursos de experiência como reconhecimento de uma pessoa na frente do usuário, notificações de atenção da direção de quem olha para o usuário, a capacidade de seguir alguém e um guia de orientação para ajudar os usuários a encontrar pessoas e rostos. .
Embora o PeopleLens ainda não esteja disponível comercialmente, a Microsoft está recrutando alunos no Reino Unido com idades 5 a 11 que contam com o apoio de um professor para explorar a tecnologia como parte de um estudo de pesquisa em vários estágios. Para o estudo, liderado pela Universidade de Bristol, os alunos serão convidados a usar o PeopleLens por um período de três meses, começando em setembro de 2022.
