A NVIDIA Broadcast foi ensinada a imitar o olhar do usuário para a câmera quando ele olha para o outro lado – usando IA e deepfake
O software de streaming NVIDIA Broadcast recebeu um recurso interessante. O aplicativo pode imitar o olhar do usuário na lente da câmera, mesmo que ele esteja olhando em uma direção completamente diferente. O recurso de contato visual com IA substitui a imagem dos olhos por sua imitação com um “olhar” direcionado diretamente para a câmera. É verdade que nem sempre funciona corretamente.
Fonte da imagem: NVIDIA
Segundo os desenvolvedores, a função Eye Contact simplifica a gravação de vídeo e dispensa o usuário de olhar exatamente para a lente da câmera. Assim, você pode se comunicar com interlocutores remotos, lendo informações estranhas ou digitando texto simultaneamente no teclado. A NVIDIA afirma que os olhos “simulados” serão exatamente da mesma cor dos reais, além disso, há suporte para desligar a função se o usuário olhar muito longe.
No vídeo de demonstração, você pode avaliar a qualidade da função: à esquerda está um vídeo da câmera sem conteúdo editado, à direita está o vídeo da câmera adjacente após o processamento da NVIDIA Transmissão. É fácil ver que o contato visual ainda não é uma solução completamente ideal – às vezes os olhos se movem aleatoriamente e a íris se expande ou se estreita. Se desejar, você pode ver outras deficiências. Porém, para um interlocutor que não olha atentamente para a tela, a diferença não será tão perceptível.
Nos últimos anos, a NVIDIA tem investido ativamente em tecnologias de aprendizado de máquina e sistemas de inteligência artificial baseados em redes neurais. A função Eye Contact é uma confirmação clara disso.
Além do Eye Contact, outros recursos e capacidades foram implementados no NVIDIA Broadcast. Entre eles: novos efeitos como vinhetas, além de ferramentas para desfocar, substituir ou remover o fundo do vídeo. Para trabalhar com a solução de software, você deve ter uma placa de vídeo NVIDIA GeForce RTX em seu computador.
Se você notar um erro, selecione-o com o mouse e pressione CTRL + ENTER.