Facebook ha desarrollado un nuevo tipo de mecanismo basado en Inteligencia Artificial (IA) que sea capaz de, solo con una palabra escrita a mano, imitar el estilo caligráfico de una persona o del texto que aparece en una fotografía del medio ambiente.
Las imágenes generadas por IA han avanzado a una velocidad vertiginosa, capaz de reconstruir sintéticamente escenas históricas o cambiar una foto para que se parezca al estilo de Van Gogh o Renoir.
TextStyleBrush, como se conoce al sistema, es el primer algoritmo de IA de autocontrol capaz de sustituir texto de ambas imágenes del mundo real como en la escritura a mano, usando solo una palabra como muestra, como lo destaca Facebook a través de una declaración.
«Para entrenar la IA directamente con imágenes del mundo real, Adoptamos un enfoque diferente que es de naturaleza auto-supervisada en términos de estilos de aprendizaje y segmentación.. No asumimos ninguna forma de supervisión disponible sobre cómo se renderizan los estilos o la disponibilidad de etiquetas de texto segmentadas ”, explican de la empresa.
El sistema puede reconocer fuentes y traducir el texto a otro idioma. Facebook.
El sistema desarrollado por la firma estadounidense funciona de manera similar a las herramientas de procesamiento de texto, pero también se aplica a la caligrafía y la estética del texto.
“Es un proyecto de investigación de IA que puedes copiar el estilo del texto en una foto usando solo una palabra. Con este modelo de IA, puede editar y reemplazar texto en imágenes «, dicen.
A diferencia de los mecanismos anteriores, que definen parámetros muy específicos, TextStyleBrush emplea un enfoque diferente que desvincula el contenido de texto de todos los aspectos de apariencia.
Sistema flexible
“Si bien la mayoría de los sistemas de inteligencia artificial pueden hacer esto para tareas especializadas bien definidas, cree un sistema que sea lo suficientemente flexible como para comprender los matices de ambos textos en escenas del mundo real como la escritura a mano es un desafío de inteligencia artificial mucho más difícil”, Indican.
TextStyleBrush muestra los resultados de la transferencia de estilo a nivel de palabra.
Lo que implica que es capaz de interpretar estilos de texto ilimitados no solo para diferentes fuentes y caligrafía, sino también para transformaciones, como rotaciones, texto curvo y las deformaciones que se producen entre el papel y el lápiz al escribir a mano, el desorden de fondo y el ruido de la imagen.
Debido a estas complejidades, no es posible segmentar claramente el texto de su fondo, ni es razonable crear ejemplos anotados para cada posible apariencia del alfabeto completo, así como los dígitos.
La tecnología de Facebook se ha publicado con el objetivo de Facilitar la investigación de texto alterado utilizando técnicas de manipulación profunda o deepfake, de la misma forma que actualmente se están estudiando los contenidos en los que se modifica la apariencia de los rostros de las personas.
“Si los investigadores y profesionales de la IA podemos adelantarnos a los adversarios en la construcción de esta tecnología, podemos aprender a detectar mejor este nuevo estilo de deepfakes y construir sistemas robustos para combatirlos ”, señala en el blog de Facebook.
Aunque es un proyecto de investigación, Algún día podría desbloquear un nuevo potencial para la autoexpresión creativa, como subtítulos y mensajes personalizados.
Otra posible aplicación de la tecnología es el desarrollo de nuevos sistemas de traductores a través de la cámara del móvil en los que no solo se traduce el texto sino que también se mantiene el estilo de escritura, también apto para realidad aumentada (AR).
SL
Fuente: Clarin.com