Hypee · 16/11/2026 16:04
Cientistas concebem AI que lê lábios em silêncio absoluto e bate recorde de precisão
Os pesquisadores do Instituto Avançado de Ciencia e Tecnologia da Coreia (KAIST) desenvolveram uma inteligência artificial que consegue identificar palavras apartir dos movimentos dos lábios em vídeos sem audio. Batizado de DLLM-VSR, o sistema atingiu um novo recorde de precisão em testes de leitura labial por AI. A tecnologia ainda está em etapa de desenvolvimento e nao chegou ao público ou ao setor.
O principal desafio desse tipo de ferramenta é diferenciar palavras que produzem movimentos labiais mt similares. É o caso das consoantes “p”, “b” e “m”, que podem ter aparências quase idênticas ao longo da declaração. Pra lidar com essa limitação, o DLLM-VSR utiliza um modelo de linguagem baseado em difusão (DLLM), que adota uma abordagem diferente das IAs tradicionais.
Os sistemas convencionais interpretam as palavras em sequência, da esquerda pra a direita, o que pode influenciar o que vem depois. O DLLM-VSR continua outro caminho: identifica primeiro os termos a respeito de os quais tem maior confiança e usa essas palavras como referência pra preencher as lacunas com informacoes das partes anteriores e posteriores da frase. O sistema igualmente estima diferentes comprimentos possiveis pra a frase com base na duracao do vídeo, provoca uma transcrição pra cada opcao e escolhe a edição mais plausível.
Nos testes, o DLLM-VSR registrou uma taxa de bug de palavras (WER) de 19,4% no benchmark LRS3, com treinamento baseado em 433 horas de vídeos rotulados. O resultado representa o melhor desempenho registrado entre os métodos treinados com o msm conjunto de dados. A métrica contabiliza palavras admitidas incorretamente, omitidas ou acrescentadas ao longo da transcrição, mas nao representa a porcentagem de entrevistas completas compreendidas corretamente.
AI pode ser útil pra aprimorar a acessibilidade A leitura labial automatizada pode abrir caminho pra novos features de acessibilidade destinados a pessoas surdas ou com deficiência auditiva. Com a tecnologia, aparelhos poderiam converter entrevistas em texto apartir de capturas, msm quando nao há gravação de audio. A ferramenta igualmente pode ser útil em cenarios industriais e situações cotidianas com mt ruído, como restaurantes barulhentos ou locais com música alta, nos quais a comunicação por voz fica prejudicada.
O DLLM-VSR ainda precisa de ajustes antes de chegar ao setor, principalmente pra reduzir o consumo de processamento e funcionar em tempo real, sem conexao com a internet, em robôs e aparelhos ves
Continue lendo
Hypee · 16/11/2026
Cinco paises da Europa concebem planos pra centro de deportação em Ruanda
Cinco paises europeus mostraram nesta segunda-feira (16) planos pra mandar solicitantes de asilo que tiveram seus pedidos negados a um centro de depor...
Hypee · 16/11/2026
Confinamento deve manter receita recorde acima dos gastos no início de 2027
A atividade de confinamento de bovinos deve finalizar 2026 com receita em niveis recordes e manter resultados acima dos gastos totais de produção no i...
Hypee · 16/11/2026
Indicada ao Grammy 2027, Ella Langley aumenta recorde na Billboard Hot 100 com “Choosin’ Texas”