Graduado da UKZN desenvolve sistema de inteligência artificial para traduzir língua de sinais sul-africana em fala
Leia mais
IOL
iol.co.za

Graduado da UKZN desenvolve sistema de inteligência artificial para traduzir língua de sinais sul-africana em fala

Um graduado da Universidade KwaZulu-Natal (UKZN) criou um sistema baseado em inteligência artificial capaz de traduzir a língua de sinais sul-africana (SASL) para áudio em tempo real.

O objetivo deste desenvolvimento é ajudar pessoas com deficiência auditiva a superar barreiras de comunicação. Akhil Hansraj criou o Sistema de Tradução SASL-para-Fala como parte do seu projeto de conclusão de curso para obter um bacharelado em engenharia na área de engenharia da computação.

Este sistema, baseado em visão computacional, utiliza um modelo de IA desenvolvido especificamente juntamente com uma estrutura de aprendizado de máquina estabelecida para rastrear marcos corporais e reconhecer sinais em tempo real. O sistema foi treinado em um conjunto de dados especializado relacionado ao SASL e consegue identificar letras e palavras individuais antes de converter os sinais interpretados em fala por meio de um modelo de síntese de voz.

Superando Dificuldades

Segundo o orientador acadêmico de Hansraj, Dr. Sulaiman Patel, este projeto foi um dos primeiros projetos de tecnologia assistiva no departamento de Engenharia Elétrica, Eletrônica e Computacional (EECE) na UKZN focado especificamente no dialeto da língua de sinais sul-africana.

O SASL foi recentemente reconhecido como o décimo primeiro idioma oficial da África do Sul, enquanto muitos sistemas internacionais de tradução de língua de sinais se concentram na Língua de Sinais Americana. Para Hansraj, este projeto teve uma motivação pessoal profunda, pois ambos os seus pais nasceram com deficiência auditiva e enfrentaram problemas de comunicação em situações cotidianas.

Hansraj observou: «Meus pais enfrentam barreiras de comunicação em situações cotidianas, como bancos, instituições governamentais e escritórios municipais. Eu e minha irmã frequentemente precisávamos acompanhá-los para falar em nome deles».

Ele enfatizou que uma versão totalmente pronta da tecnologia permitiria que as pessoas se comunicassem de forma mais independente. «Um sistema pronto para produção permitiria que essas pessoas se comunicassem de forma mais fácil e eficaz, sem a necessidade de a outra parte aprender SASL», acrescentou ele.

Apesar de ser uma conquista notável, o caminho de Hansraj até a formatura não foi fácil. Patel relatou que no segundo semestre de 2025, Hansraj enfrentou problemas de saúde mental e precisou de uma extensão para a entrega do primeiro projeto. Com o apoio de Patel, incluindo encaminhamento a um conselheiro estudantil e verificações regulares do estado, Hansraj conseguiu retomar o ritmo de trabalho no projeto. Seus esforços acabaram lhe rendendo elogios altos do EECE pelo projeto de conclusão de curso.

Hansraj também compartilhou que mais gostava dos módulos de design durante os estudos, pois eles permitiam aplicar conhecimentos teóricos na prática em projetos significativos. Ele também citou os módulos «Comunicação de Dados em Rede» e «Engenharia da Internet», ministrados pelo Professor Tahmid Qazi, como seus favoritos.

Enfrentando dificuldades financeiras e tendo um módulo final em 2026, Hansraj recebeu uma recomendação de Qazi para uma entrevista em uma empresa local. Ele encontrou um emprego e conciliou-o com os estudos.

Planos Futuros para o Desenvolvimento da Tecnologia

Após obter o bacharelado em engenharia, Hansraj pretende continuar trabalhando em seu projeto de tradução de língua de sinais. Seu foco principal será melhorar a capacidade do sistema de reconhecer palavras e gerar fala mais coerente e fluida.

A longo prazo, ele planeja construir uma carreira em software, tecnologias de rede ou inteligência artificial e aprendizado de máquina. Hansraj agradeceu aos seus pais, tio, irmã, Patel, amigo Amil Maharaj, e colega de quarto, namorada e colegas da universidade pelo apoio durante toda a jornada. Além dos estudos, ele gosta de jogos, acompanha desenvolvimentos tecnológicos e trabalha em seus próprios projetos de programação. Ele também agradece à UKZN pelos aprendizados e pela oportunidade de conhecer a vida universitária.

Histórias semelhantes

Inovadores do Quênia usam robótica para garantir o acesso à educação em língua de sinais
Leia mais
cgtn.com

Inovadores do Quênia usam robótica para garantir o acesso à educação em língua de sinais

Uma jovem equipe de inovadores no Quênia está aplicando robótica para superar um dos obstáculos enfrentados por alunos com deficiência auditiva: o acesso ao aprendizado em língua de sinais.

Embora esta tecnologia ainda esteja em fase de desenvolvimento, seus criadores acreditam que ela poderá tornar os assuntos técnicos mais acessíveis para estudantes com perda auditiva no futuro.

Em uma sala de aula em Nairóbi, a comunicação ocorre em grande parte através de gestos. No entanto, para estudantes surdos, dominar disciplinas complexas representa um desafio especial, especialmente quando o vocabulário necessário para explicar matemática, ciência ou tecnologia não está presente nos sinais que eles conhecem.

Eva Avino, professora na escola secundária para surdos Kasarani Treeside Secondary School for the Deaf, observou: «Eu leciono física, e na maioria das vezes entendemos que os conceitos que ensinamos e a maneira como posso expressar o conceito se tornam um problema em algum momento devido aos sinais e ao vocabulário necessários para expressar esse conceito».

É exatamente este problema que a startup queniana ZeroBionic tenta resolver. Em seu laboratório em Nairóbi, engenheiros estão ensinando máquinas a se comunicar em língua de sinais.

Para a cofundadora Nora Kimati, a ideia começou com algo muito mais simples. Kimati relatou: «Começamos apenas com braços robóticos básicos. Como a língua de sinais é totalmente baseada nas mãos, decidimos começar pelas mãos e ver como sairia. Depois, recebemos feedback de que muito na língua de sinais depende dela».

Ela continuou: «Por exemplo, fazer isso significa mais de cinco coisas diferentes em uma determinada língua de sinais, dependendo das suas expressões faciais. Foi então que decidimos construir um humanoide completo, incluindo o rosto, incluindo os olhos, tudo para capturar todos os sinais não verbais que estão presentes atualmente».

No entanto, ensinar uma máquina a fazer sinais exige mais do que apenas hardware; são necessários dados. Quando a ZeroBionic começou a procurar conjuntos de dados de línguas de sinais africanas, a equipe relatou que havia muito pouco material para trabalhar.

No laboratório, cada movimento é registrado, gravado e convertido em dados que podem treinar o sistema. A ZeroBionic afirma que o objetivo atual é tornar a tecnologia mais inteligente, precisa e útil no mundo real. Para os estudantes que acompanham o desenvolvimento dessa tecnologia, ela simboliza algo mais do que apenas uma máquina.

Popular