MimicTalk

MimicTalk es una tecnología de generación de rostros parlantes en 3D personalizada basada en campos de radiancia neuronal. Puede imitar la apariencia estática y el estilo de habla dinámico de una identidad específica en cuestión de minutos. Entre sus principales ventajas se encuentran la alta eficiencia, la generación de vídeo de alta calidad y la imitación precisa del estilo de habla del personaje objetivo. La tecnología usa un modelo genérico de generación facial en 3D como base y emplea un proceso de adaptación híbrido estático y dinámico para aprender la apariencia y la dinámica facial personalizadas. Además, introduce un modelo de movimiento de audio a movimiento contextualizado, conocido como ICS-A2M, para generar movimientos faciales alineados con la forma de hablar del personaje. Actualmente está disponible de forma gratuita para la comunidad de investigación y desarrollo.

- Generar modelos faciales 3D parlantes personalizados.

- Imitar la apariencia y el estilo de habla de una identidad concreta.

- Producir vídeo de alta calidad y expresivo.

- Adaptar un modelo genérico a distintos personajes.

- Aplicar el resultado a proyectos de animación o realidad virtual.

- Investigadores que trabajan en síntesis facial y animación.

- Estudios de cine y videojuegos que necesitan expresiones realistas.

- Equipos que desarrollan avatares para realidad virtual.

- Centros educativos que preparan materiales interactivos.

Se trata de una tecnología de investigación: el proceso exige instalar dependencias, preparar datos de la identidad objetivo y entrenar modelos, lo que requiere conocimientos técnicos y un equipo con capacidad suficiente. Los resultados pueden ser inestables y el rendimiento varía según la calidad de los datos. Por último, es una herramienta capaz de imitar la apariencia y la voz de una persona concreta: usarla sin el consentimiento de esa persona puede infringir normas de plataformas o la legislación, y las consecuencias legales o de otro tipo las asume quien la utiliza.