El proyecto Tate Britain utiliza IA para emparejar fotos contemporáneas con pinturas |Tate Gran Bretaña |El guardián

2023-02-28 14:09:26 By : Mr. Alan Wu

El sistema ganador del premio IK combina imágenes del ciclo de noticias 24/7 con obras de arte centenarias y las presenta en líneaSentados contra un fondo rojo intenso, mirando fijamente los espejos de mano, dos eunucos con saris brillantes inspeccionan su apariencia antes de las celebraciones de Raksha Bandhan en el distrito rojo de Mumbai.La fotografía de la agencia de noticias Reuters es una escena contemporánea deslumbrante, pero un nuevo proyecto de Tate Britain tiene como objetivo inspirar reflexiones más profundas con imágenes de su propia colección de pinturas.Lanzado el viernes, Recognition es el ganador del premio IK de 2016, un premio anual, este año respaldado por Microsoft, para un proyecto que adopta la tecnología digital para explorar y exhibir la colección de arte británico de Tate.Este año, el reto era hacerlo con inteligencia artificial.El equipo detrás del proyecto ganador, del centro de investigación de comunicación con sede en Italia Fabrica, dice que su inspiración provino de un enigma intrigante: ¿cómo se puede aplicar el pensamiento racional a un tema como el arte?Su respuesta es provocativa.El reconocimiento combina impresionantes fotografías del ciclo de noticias 24/7 con obras de arte centenarias y las presenta en línea.“El equipo ha creado y entrenado un 'cerebro' hasta el punto en que simula ciertos atributos humanos y lo libera en línea, y está creando una galería”, dijo Tony Guillan, el productor del premio IK en Tate Britain.Después de escanear unas 30.000 obras de arte digitalizadas de la galería, el sistema combina la fotografía evocadora de los dos eunucos con una escena suave de las pinceladas de Sir Peter Lely, el pintor principal de Carlos II.Dos mujeres, con la espalda recta y una ligera sonrisa, están sentadas, una sostiene un instrumento de cuerda y la otra apoya la mano en los elaborados pliegues de su vestido de satén.Es una suntuosa obra del siglo XVII, rica en detalles.Pero presentada junto a la fotografía contemporánea, la comparación puede provocar nuevas preguntas artísticas, por ejemplo, sobre la identidad de género y la noción de glamour.“Sin saberlo, [el sistema] ha creado un significado subjetivo”, dijo Guillan.“Haciendo la pregunta '¿cómo funcionan y piensan las computadoras?'le haces exactamente la misma pregunta a los humanos.Guillan dijo que esperaba que el proyecto fomentara la discusión sobre cómo representamos escenas e individuos.“Las noticias siempre se presentan como esta mimética ventana de vidrio al mundo, pero, por supuesto, el fotoperiodismo es a menudo una forma de arte;es un modo de comunicación, al igual que el arte y la pintura”, dijo.Con £15,000 en premios y £90,000 para producir su visión, el equipo de cuatro miembros de Fabrica ha pasado meses desarrollando el proyecto, que aprovecha una forma floreciente de inteligencia artificial conocida como aprendizaje automático.Estará disponible en su totalidad en línea y habrá una pequeña exposición en la Tate Britain.“Las computadoras son muy buenas para las operaciones matemáticas”, dijo Andrea Vedaldi, profesora asociada de ciencias de la ingeniería en la Universidad de Oxford, que no participó en el proyecto.“Cuando las cosas empiezan a ser muy difíciles es cuando realmente no sabes cómo expresar, en términos matemáticos, qué es lo que quieres hacer.Por ejemplo, si quieres reconocer a un perro en una imagen... no es muy fácil dar con las ecuaciones de un perro”.El aprendizaje automático adopta un enfoque diferente: muestra a un sistema suficientes imágenes de diferentes caninos en diferentes poses, dice la teoría, y el sistema descubrirá qué es un perro.“Este proceso de pasar de lo específico al concepto abstracto, esto es lo que es realmente desafiante”, dijo Vedaldi.Si bien el progreso en el aprendizaje automático ha sido espectacular en los últimos años, dijo, la creación de sistemas que realmente "entiendan" las imágenes todavía es un trabajo en progreso.Es un desafío con el que los científicos e ingenieros como Vedaldi continúan lidiando, desarrollando y explorando sistemas poderosos, incluidas nuevas herramientas basadas en una rama del aprendizaje automático llamada aprendizaje profundo.El reconocimiento adopta cuatro enfoques diferentes para hacer coincidir las imágenes, según la tecnología desarrollada por Microsoft y un equipo de especialistas en IA de la empresa francesa Jolibrain.“Puede buscar objetos, como tazas y platillos, puede buscar caras, puede buscar la composición dentro de una imagen (leer líneas y colores) y puede observar el contexto adjunto a una imagen, por lo que los metadatos, los títulos y cosas así”, dijo Isaac Vallentin de Fabrica.Ahora capacitado, el sistema pasará tres meses analizando continuamente nuevas fotografías de Reuters, comparándolas con miles de pinturas, esculturas y otras obras digitalizadas.Cuando se pueden encontrar una o más coincidencias, la mejor, según lo seleccionado por la tecnología, se ingresa en una galería en línea en la que se pueden realizar búsquedas.Los visitantes del sitio web también podrán explorar los detalles de cómo el sistema hizo cada coincidencia, incluida la fuerza de la semejanza entre cada uno de los cuatro enfoques, junto con las características particulares que ha reconocido, como la edad y el sexo de una cara.“Estamos tratando de representar de manera realmente honesta cómo el software en sí mismo está llegando a sus conclusiones”, dijo Vallentin, y agregó que el sistema también podría crear una oración para explicar, en un grado limitado, cada coincidencia.La pequeña pantalla de tres secciones en Tate Britain ofrecerá más información, y los visitantes podrán comparar los partidos que harían con los generados por la máquina.Luego se analizarán los resultados.“Solo queremos tomar estos dos conjuntos de datos al final y encontrar las conexiones, las similitudes”, dijo Vallentin.“Es realmente un experimento para nosotros”.El equipo también espera que el proyecto muestre el lado positivo de la inteligencia artificial, una tecnología sobre la que expertos, incluido el físico Stephen Hawking, han expresado su preocupación por la seguridad.“La tecnología es una herramienta de empoderamiento”, dijo Vallentin.“Puedes crear cosas realmente significativas y cosas realmente útiles, y cosas hermosas con la tecnología”.