Conjunto de ferramentas de código aberto pode gerar avatares de ‘gêmeos digitais’

BU, 24/11/2023 

Por Bianca González 

FaceChain, um programa que gera sósias de “gêmeos digitais” de um determinado usuário, foi introduzido com casos de uso potenciais em saúde, varejo e pesquisa de IA. O software é um conjunto de ferramentas de aprendizado profundo que usa biometria facial e IA generativa, para criar retratos personalizados, preservando características únicas de identidade dos indivíduos, e é explicado pelo autodenominado entusiasta de IoT, IA e ML Devendra Bogati em uma postagem do Medium.

Desenvolvido por uma equipe do Alibaba Group, o conjunto de ferramentas é uma estrutura personalizada de geração de retratos de componentes conectáveis. O conjunto de ferramentas injeta modelos faciais no processo de geração de retratos, o que melhora a marcação de etiquetas, o processamento de dados e o pós-processamento, distinguindo FaceChain de DreamBooth e InstantBooth.

O software é treinado pegando imagens enviadas pelo usuário e convertendo-as em imagens de treinamento de alta qualidade, por meio de uma série de modelos faciais. Em seguida, ele usa modelos de atributos de face e anotação de texto em conjunto com métodos de pós-processamento de tags para gerar rótulos para imagens de treinamento. As imagens e os dados do rótulo ajustam o modelo Stable Diffusion para obter o modelo LoRA facial.

Para gerar imagens, o software funde os pesos do modelo LoRA facial obtido no treinamento online e o modelo LoRA de estilo treinado offline no modelo de Stable Diffusion Em seguida, ele usa a geração de texto para imagem com base nas entradas de tags e usa uma série de modelos de refinamento de face. Finalmente, o reconhecimento facial determina a semelhança entre as imagens geradas e o modelo original antes de entregar a imagem com maior similaridade como saída.

O conjunto de ferramentas poderia ser usado para criar avatares realistas em jogos, avatares digitais para mídias sociais e campanhas de marketing, treinamento médico, testes virtuais para varejo e pesquisa de IA.

FaceChain é de código aberto sob a licença Apache-2.0 e está disponível no GitHub. O repositório possui um guia de instalação que cobre uma variedade de métodos.

Artigos recomendados: DT e Metaverso

Fonte:https://www.biometricupdate.com/202311/open-source-toolchain-can-generate-digital-twin-avatar