Por algum tempo, o Google ofereceu a capacidade de traduzir texto por meio de câmeras de smartphones via Google Translate e Google Lens, com a Apple trazendo tecnologia semelhante para iPhones via Live Text.

Segure nossas cervejas, dizem os pesquisadores de IA do Facebook, que agora desenvolveram tecnologia de visão por computador que pode lidar com tradução de texto em tempo real e um pouco em realidade aumentada.

Esta semana, Praveen Krishnan, pesquisador de pós-doutorado do Facebook, e Tal Hassner, cientista pesquisador, publicaram pesquisas detalhando um modelo de IA não supervisionado chamado TextStyleBrush que pode visualizar uma única palavra digitada ou manuscrita por meio de uma câmera de smartphone, emular seu tipo de letra e, em seguida, substituir virtualmente o texto original com outra palavra na visão da câmera.

Imagem via Facebook

"Funciona de forma semelhante à forma como as ferramentas de pincel de estilo funcionam em processadores de texto, mas para a estética de texto em imagens. Ultrapassa a precisão de ponta em testes automatizados e estudos de usuário para qualquer tipo de texto", escreveram os pesquisadores em uma postagem no blog. "Ao contrário das abordagens anteriores, que definem parâmetros específicos, como fonte ou supervisão do estilo de destino, adotamos uma abordagem de treinamento mais holística e separamos o conteúdo de uma imagem de texto de todos os aspectos de sua aparência de toda a caixa de palavras. A representação da aparência geral pode então ser aplicado como transferência única sem retreinamento nas novas amostras de estilo de origem. "

Enquanto os aplicativos atuais para realidade aumentada móvel, particularmente quando comparados aos recursos implementados pelo Google e Apple, o Facebook também tem como objetivo integrar o TextStyleBruch em seus próximos óculos inteligentes.

Além disso, o TextStyleBrush pode usar seu recurso de reconhecimento de fonte para replicar amostras de fonte ou caligrafia e aplicá-las a blocos inteiros de texto. Em um exemplo, o sistema substitui uma nota digitada hipotética da "fada dos dentes" para uma criança, captura uma amostra de caligrafia e processa a nota que aparece no estilo de caligrafia em papel de folha solta. Pode ser o melhor amigo de um falsificador!

Imagem via Facebook

Reconhecendo como esse poder pode cair em mãos erradas, o Facebook optou por disponibilizar o código do modelo como código aberto.

No geral, o que este desenvolvimento indica é que um mundo de smartglasses AR não será apenas ditado por filtros que transformam os rostos e paisagens do que vemos através de nossos smartglasses, mas também teremos a opção (boa e ruim) de manipular a própria informações que vemos por meio dessas leneses de uso futuro.


Fonte Adicione ao Google Notícias