Parti, el nuevo modelo de Google que genera imágenes fotorrealistas a partir de textos

Google ha presentado Pathways Autoregressive Text-to-Image model (Parti), un modelo autorregresivo que genera imágenes fotorrealistas a partir de textos gracias a modelos avanzados de lenguaje.

La tecnológica presentó a finales de mayo IMAGEN, un modelo basado en Inteligencia Artificial (IA) capaz de crear imágenes de gran realismo a partir de breves descripciones de texto. Ahora es el turno de Parti, que Google introduce en su propio sitio web.

IMAGEN y Parti son “complementarios”, según la compañía de Mountain View. Cada uno explora “dos familias diferentes de modelos generativos: de difusión y autorregresivos, respectivamente”.

LEE TAMBIÉN: ¿Google, Facebook o Yahoo? Estas son las webs más populares desde 1993 | VIDEO

La materia prima de Parti son las secuencias de tokens de imágenes, en lugar de tokens de texto formulados en otro lenguaje. Utiliza el ‘tokenizador’ de imágenes ViT-VQGAN, que entrena para codificar las imágenes en forma de secuencias de tokens.

Los investigadores han probado en el proceso de codificación y decodificación con cuatro escalados distintos de parámetros: 350 millones, 750 millones, 3.000 millones y 20.000 millones. A mayor número de parámetros, mayor fidelidad al texto.

Finalmente, ViT-VQGAN reconstruye la imagen al ‘destokenizar’ las secuencias de tokens como si de piezas de puzle se trataran.

LEE TAMBIÉN: Estos son los consejos que debes tomar en cuenta para evitar que la batería de tu smartphone se dañe

UN ABANICO DE MÁS DE 1.600 INDICACIONES EN INGLÉS

Los creadores de Parti destacan que este tipo de herramientas son “más interesantes” cuando permite “crear escenas nunca vistas”. A este propósito ayuda que Parti sea capaz de gestionar indicaciones “largas y complejas” que le exigen reflejar, entre otros, su “preciso conocimiento del mundo”, además de componer imágenes que incluyen la interacción de varios objetos y participantes y la capacidad de adherirse a un formato y estilo específico.

Para cumplir estos objetivos, los investigadores han creado PartiPromts (P2), un abanico de más de 1.600 indicaciones en inglés que puede ser utilizado para medir las capacidades de Parti.

Las indicaciones que P2 proporciona pueden ser tanto simples como complejas. Esto permite a los expertos medir el progreso de su herramienta con descripciones de hasta 67 palabras.