Les chercheurs ont construit un algorithme capable de capturer les émotions évoquées par les images et les peintures.
« Cette capacité sera essentielle pour rendre l’IA non seulement plus intelligente, mais aussi plus humaine, pour ainsi dire », dit-il. Panos Achlioptas, Doctorante en informatique à l'université de Stanford
Experts de l'intelligence artificielle ils sont maintenant devenus très doués dans la création d’ordinateurs capables de « voir » le monde qui les entoure. Des algorithmes qui permettent de reconnaître des objets, des animaux et des activités dans divers domaines. L’IA est en passe de devenir la technologie fondamentale des voitures, des avions et des systèmes de sécurité autonomes du futur.
Aujourd’hui, une équipe de chercheurs s’efforce d’apprendre aux ordinateurs à reconnaître non seulement ce que sont les objets d’une image ou d’un tableau, mais aussi ce que ces images et ces tableaux font ressentir aux gens.
Je parle d'algorithmes d'intelligence émotionnelle artificielle.
ArtEmis, la connaissance de l'art à travers la peinture
Pour y parvenir, Achlioptas et son équipe ont collecté un nouvel ensemble de données, appelé ArtEmis, qui a été récemment publié dans un prépresse d'arXiv.
L'ensemble de données est basé sur les 81.000 XNUMX peintures WikiArt. Consiste en 440.000 réponses écrites de plus de 6.500 humains qui indiquent comment les peintures les font ressentir et incluent des explications sur les raisons pour lesquelles ils ont choisi cette émotion particulière.
En utilisant ces réponses, Achlioptas et l'équipe, dirigée par le professeur d'ingénierie de Stanford Léonidas Guibas, ils ont formé des locuteurs neuronaux.
Ce sont des intelligences artificielles qui répondent par des mots écrits : dans ce cas, elles génèrent des réponses émotionnelles à l'art visuel et les définissent.
Pourquoi l'art ?
Les chercheurs ont choisi d'utiliser spécifiquement l'art, car le but d'un artiste est de susciter des émotions chez le spectateur. ArtEmis travaille indépendamment du sujet, des natures mortes aux portraits humains ou à la peinture abstraite.
Le travail est une nouvelle approche de la vision par ordinateur, note Guibas.
Le travail classique d’acquisition de vision par ordinateur portait sur le contenu littéral. « Il y a trois chiens sur la photo » ou « quelqu'un boit du café dans une tasse ». Au lieu de cela, nous avions besoin de descriptions définissant le contenu émotionnel d’une image.
Léonidas Guibas
8 catégories émotionnelles
L'algorithme classe les images et les peintures dans l'une des huit catégories émotionnelles (de l'étonnement à l'amusement, de la peur à la tristesse), puis explique dans le texte écrit ce qui, dans ces images, justifie la lecture émotionnelle.
L'intelligence artificielle fait son travail. Ils peuvent lui « montrer » une image qu'elle ne connaissait pas, et en réponse, elle dit ce qu'un être humain pourrait ressentir en la voyant.
Étonnamment, disent les chercheurs, les légendes reflètent avec précision le contenu abstrait de l’image d’une manière qui dépasse largement les capacités des algorithmes de vision par ordinateur existants.
Pas seulement: l'algorithme ne capture pas seulement la vaste expérience émotionnelle d'une image complète. Il permet de décrypter différentes émotions au sein des tableaux.
ArtEmis va encore plus loin: il prend également en compte la subjectivité et la variabilité de la réponse humaine.
Tous les gens ne voient pas et ne ressentent pas la même chose lorsqu'ils regardent des peintures. Quelqu'un peut se sentir heureux de voir la Joconde, quelqu'un d'autre triste. ArtEmis peut distinguer ces différences.
Un outil pour les artistes
À court terme, les chercheurs prévoient qu'ArtEmis pourrait devenir un outil permettant aux artistes d'évaluer leurs œuvres pendant la création et de garantir que leur travail a l'impact souhaité.
Cela pourrait fournir des conseils et une inspiration pour guider le travail de l’artiste. Un graphiste travaillant sur un nouveau logo peut utiliser ArtEmis pour cibler son effet émotionnel.
Ce n'est que le début. Des peintures aux personnes.
Plus tard, après de nouvelles recherches et améliorations, des algorithmes basés sur les émotions pourraient être perfectionnés. Des intelligences artificielles qui aideront à apporter une prise de conscience émotionnelle aux applications telles que les chatbots et les avatars de conversation.
«Je vois ArtEmis apporter des connaissances de la psychologie humaine à l'intelligence artificielle», déclare Achlioptas.
