Utilizando DeepFaceLab sobre meta humanos fotorrealistas.
Proceso:
1- Modelado o Fotogrametria del modelo/actor original.
2- Generar animacion con Character Studio 4, Unreal Metahuman o cualquier programa que genere modelos virtuales fotorrealistas.
3- Ingresar imagenes / videos de referencia en Deepfacelab y generar iteraciones (puede tardar días de aprendizaje)
4- Combinar Deepfacelab con Modelos virtuales
Los resultados si bien son aceptables pueden mejorar, intenté realizar el mismo proceso con personajes más antiguos pero la falta de imagenes de referencias (deepfacelab utiliza miles de fotos para generar un modelo) o de buena calidad de las caras es un gran limitante hasta ahora.
Proceso:
1- Modelado o Fotogrametria del modelo/actor original.
2- Generar animacion con Character Studio 4, Unreal Metahuman o cualquier programa que genere modelos virtuales fotorrealistas.
3- Ingresar imagenes / videos de referencia en Deepfacelab y generar iteraciones (puede tardar días de aprendizaje)
4- Combinar Deepfacelab con Modelos virtuales
Los resultados si bien son aceptables pueden mejorar, intenté realizar el mismo proceso con personajes más antiguos pero la falta de imagenes de referencias (deepfacelab utiliza miles de fotos para generar un modelo) o de buena calidad de las caras es un gran limitante hasta ahora.
Vray Skin render
Vray Skin render
Vray Skin render
Modelado en Zbrush
Modelado en Zbrush
Textura alternativa
Aca podemos ver los limitantes de los deepfakes actuales
