{"id":1346,"date":"2025-06-20T10:42:37","date_gmt":"2025-06-20T08:42:37","guid":{"rendered":"https:\/\/icar.cnrs.fr\/aaa\/?p=1346"},"modified":"2025-06-22T09:17:34","modified_gmt":"2025-06-22T07:17:34","slug":"recherche-de-peintures-basee-sur-la-relation-regard-objet","status":"publish","type":"post","link":"https:\/\/icar.cnrs.fr\/aaa\/recherche-de-peintures-basee-sur-la-relation-regard-objet\/","title":{"rendered":"Recherche de peintures bas\u00e9e sur la relation regard-objet"},"content":{"rendered":"

Nous avons d\u00e9velopp\u00e9 un axe de recherche visant \u00e0 \u00e9tablir des liens iconographiques entre les objets pr\u00e9sents dans une sc\u00e8ne. Ces liens peuvent concerner des actions (comme regarder ou tenir un objet), des relations spatiales (un objet pos\u00e9 sur un autre), ou encore des interactions implicites entre \u00e9l\u00e9ments. Parmi ces objets, le visage occupe une place centrale, car il constitue souvent une source pr\u00e9cieuse d\u2019information dans l\u2019analyse d\u2019une \u0153uvre.<\/p>\n

De la m\u00eame mani\u00e8re que l\u2019on peut rapprocher deux \u0153uvres \u00e0 partir de cooccurrences d\u2019objets, il est possible d\u2019effectuer une mise en relation en se basant sur la pose des personnages, en particulier celle du visage. C\u2019est pourquoi nous avons port\u00e9 notre attention sur cet \u00e9l\u00e9ment sp\u00e9cifique, en le d\u00e9tectant puis en estimant sa pose.<\/p>\n

\"\"Figure 1 Pipeline pour l’analyse iconographique bas\u00e9e sur la direction du regard<\/em><\/p>\n

 <\/p>\n

Cependant, la seule pose du visage ne permet pas d\u2019inf\u00e9rer avec pr\u00e9cision la direction du regard, information pourtant essentielle pour \u00e9tablir des liens entre le visage et les autres objets pr\u00e9sents dans l\u2019\u0153uvre. Pour pallier cette limite, nous avons int\u00e9gr\u00e9 un estimateur du point d\u2019int\u00e9r\u00eat visuel en 2D. Celui-ci fournit non seulement un vecteur directionnel du regard en 2D, mais aussi une classification binaire indiquant si le regard se porte \u00e0 l\u2019int\u00e9rieur ou \u00e0 l\u2019ext\u00e9rieur de la sc\u00e8ne (in\/out).<\/p>\n

En combinant ces donn\u00e9es avec une estimation de la profondeur, nous avons pu g\u00e9n\u00e9rer une carte du champ de vision. La profondeur permet ici d\u2019ajouter une dimension perspective, essentielle pour distinguer les plans (arri\u00e8re-plan, premier plan) et affiner l\u2019analyse spatiale.<\/p>\n

Enfin, nous avons d\u00e9tect\u00e9 les objets pr\u00e9sents dans ce champ de vision, puis mod\u00e9lis\u00e9 ces informations sous forme vectorielle afin de permettre une recherche par similarit\u00e9, fond\u00e9e sur les objets effectivement regard\u00e9s dans les \u0153uvres.<\/p>\n

\"\"Figure 2 Comparaison entre recherche iconographique classique et recherche bas\u00e9e sur l’analyse du regard<\/em><\/p>\n

A gauche\u00a0: l\u2019image requ\u00eate dont le personnage regarde un crucifix dans la partie sup\u00e9rieur droite de la sc\u00e8ne, accompagn\u00e9e de sa carte du champ de vue mettant en \u00e9vidence les objets situ\u00e9s dans sa ligne de regard<\/p>\n

Premi\u00e8re ligne\u00a0: R\u00e9sultats de la recherche fond\u00e9e sur l\u2019analyse du regard Lgaze. En dessous, les cartes de champ de vue associ\u00e9es.<\/p>\n

Deuxi\u00e8me ligne\u00a0:\u00a0 R\u00e9sultats issus de la recherche visuelle classique. Et en dessous, les cartes du champ de vue associ\u00e9es.<\/p>\n

 <\/p>\n

Pour illustrer l\u2019int\u00e9r\u00eat de l\u2019analyse du regard dans la recherche iconographique, nous avons compar\u00e9 deux types de requ\u00eates visuelles \u00e0 partir d\u2019une m\u00eame image source repr\u00e9sentant Marie-Madeleine contemplant un crucifix situ\u00e9 dans la partie sup\u00e9rieure droite du tableau. Son champ de vision englobe \u00e9galement un livre et un cr\u00e2ne, deux \u00e9l\u00e9ments souvent associ\u00e9s \u00e0 la th\u00e9matique de la vanit\u00e9.<\/p>\n

En revanche, dans la seconde recherche, bas\u00e9e sur l\u2019analyse fine de la direction du regard, qu\u2019on nommera ici Lgaze, les r\u00e9sultats mettent en avant des \u0153uvres, parfois tr\u00e8s diff\u00e9rentes stylistiquement, repr\u00e9sentant aussi bien des femmes que des hommes, mais toutes unies par un m\u00eame motif : une figure regardant un crucifix. Cette approche permet ainsi de faire \u00e9merger une coh\u00e9rence th\u00e9matique et iconographique plus profonde, au-del\u00e0 des similarit\u00e9s visuelles de surface.<\/p>\n

Dans une premi\u00e8re recherche, fond\u00e9e uniquement sur des similarit\u00e9s visuelles globales (cooccurrence d\u2019objets, couleurs, composition), qu\u2019on nommera ici Lvisual, les \u0153uvres retrouv\u00e9es repr\u00e9sentent majoritairement des figures f\u00e9minines partageant certains attributs iconographiques avec la sc\u00e8ne d\u2019origine. Toutefois, ces personnages pr\u00e9sentent g\u00e9n\u00e9ralement un regard \u00e9vasif, dirig\u00e9 hors de la sc\u00e8ne, sans interaction explicite avec les objets pr\u00e9sents.<\/p>\n

\"\"Figure 3 Combinaison de la similarit\u00e9 visuelle et de l’analyse du regard avec Lgaze_visual et Lvisual_gaze<\/em><\/p>\n

 <\/p>\n

Afin d\u2019affiner davantage la recherche iconographique et d\u2019augmenter la pertinence des r\u00e9sultats, nous proposons de combiner les deux approches pr\u00e9c\u00e9dentes : la similarit\u00e9 visuelle classique et l\u2019analyse du regard. Cette fusion permet de tirer parti \u00e0 la fois des cooccurrences d\u2019objets et de la dynamique attentionnelle des figures repr\u00e9sent\u00e9es, en s\u00e9lectionnant des \u0153uvres partageant non seulement des \u00e9l\u00e9ments iconographiques, mais \u00e9galement une intention visuelle commune.
\nNous illustrons cette approche hybride avec un exemple concret, \u00e0 partir de la m\u00eame image requ\u00eate de Marie-Madeleine. Les r\u00e9sultats ainsi obtenus montrent des sc\u00e8nes o\u00f9 les personnages regardent un objet central similaire (le crucifix), tout en maintenant une forte coh\u00e9rence visuelle avec l\u2019\u0153uvre d\u2019origine (pr\u00e9sence d\u2019objets comme le cr\u00e2ne ou le livre, posture, ambiance) \u2013 illustr\u00e9s avec Lgaze_visual et Lvisual_gaze. Cette combinaison permet de filtrer les faux positifs et d\u2019enrichir l\u2019interpr\u00e9tation s\u00e9mantique des rapprochements iconographiques.<\/p>\n

Ces travaux ont \u00e9t\u00e9 publi\u00e9s pour la conf\u00e9rence VISAPP 2025.<\/p>\n

 <\/p>\n","protected":false},"excerpt":{"rendered":"

Nous avons d\u00e9velopp\u00e9 un axe de recherche visant \u00e0 \u00e9tablir des liens iconographiques entre les objets pr\u00e9sents dans une sc\u00e8ne. Ces liens peuvent concerner des actions (comme regarder ou tenir…<\/p>\n","protected":false},"author":52,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"inline_featured_image":false,"footnotes":""},"categories":[6,5],"tags":[],"class_list":["post-1346","post","type-post","status-publish","format-standard","hentry","category-methodes-et-terrains","category-production-scientifiques"],"_links":{"self":[{"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/posts\/1346","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/users\/52"}],"replies":[{"embeddable":true,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/comments?post=1346"}],"version-history":[{"count":4,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/posts\/1346\/revisions"}],"predecessor-version":[{"id":1361,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/posts\/1346\/revisions\/1361"}],"wp:attachment":[{"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/media?parent=1346"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/categories?post=1346"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/icar.cnrs.fr\/aaa\/wp-json\/wp\/v2\/tags?post=1346"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}