Snoop : moteur de recherche d’objets visuels

Description

La technologie Snoop, développée conjointement par l’INA et l’Inria depuis 2003, permet de créer, d’enrichir, et d’exploiter à large échelle des bases de connaissances riches et précises à partir d’un corpus d’images ou de vidéos. Son interface mise à disposition au lab se présente sous la forme d’un moteur de recherche iconographique, permettant d’effectuer une requête dans un corpus audiovisuel à partir d’une image et d’afficher les images similaires (contenant le même objet, décor, personne…). L’usager peut, via une annotation manuelle des résultats, affiner le modèle pour obtenir rapidement une classification précise et sensible des images contenant l’objet qui l’intéresse. L’algorithme au coeur de la technologie Snoop, qui sert de base à plusieurs moteurs de recherche comme par exemple Pl@ntnet, se distingue par une capacité de détection d’objets de très petite taille (1% ou moins de la taille d’une image).

Exemples de travaux de recherche

• Crossing Borders Archives (CROBORA)
• Beatriz Tadeo-Fuica, Cinéma & IA : Incorporer une intelligence artificielle pour (ré)écrire l’histoire du cinéma ? Une exploration de méthodes et d’analyses possibles
• Anaïs Linares, L’audiovisuel comme champ d’investigation de la diffusion d’usages normalisés des interfaces numériques
• Peppe Cavallari, L’imaginaire télé publicitaire de la culture mobile : vers une technologie du care ?

Publications liées au développement de l’outil/à citer

Les chercheurs utilisant cet outil peuvent citer les travaux suivants :

• Olivier Buisson, Jean-Christophe Lombardo, Alexis Joly : Snoop (https://hal.archives-ouvertes.fr/hal-02096036)

---

---