Extraction et comparaison d'information saillante : Pose favorable et image 2D révélatrice d'un objet 3D
Résumé
The objective of this paper is to quantify the information relative to a 3D object contained in a 2D image, by estimating, on the one hand, the interest of its pose and, on the other hand, the interest of the 2D observed representation. The goal is to extract, from these two different and complementary modalities, the essential information belonging to the object in the image. This information is computed by matching salient elements between the 2D image and the3D mesh. For this detection step, we use a detector between2D and 3D, based on the curvilinear saliency, that ensures the best possible repeatability for salient elements in different modalities. We are thus able to identify the pose that best highlights the 3D object based on the detected points of interest. Using a similar approach, we also quantify if the 2D image that contains this object highlights it. In particular, given a set of poses and images, we are able to order these poses and images according to their saliency : the interest of the pose and the relevance of the 2D image.
L’objectif de ce papier est d’introduire une approche permettant de quantifier l’information d’un objet 3D présente dans une image 2D, en distinguant, d’une part, l’intérêt de sa pose et, d’autre part, l’intérêt de l’image 2D que nous observons. L’objectif est d’extraire, à partir de ces deux modalités différentes et complémentaires, l’information essentielle appartenant à l’objet dans l’image. Cette information s’obtient par extraction d’éléments saillants à partir de l’image 2D et du maillage 3D. Pour cette étape de détection, nous avons choisi d’utiliser un détecteur qui nous assure la meilleure répétabilité possible entre 2D et 3D. Ce détecteur s’appuie sur la saillance curviligne. Nous proposons alors de déterminer la pose mettant le plus en valeur l’objet 3D s’appuyant sur les points d’intérêt détectés.
Nous introduisons également une méthode qui nous permet de déterminer si l’image 2D qui contient cet objet est révélatrice de cet objet. Plus précisément, connaissant un en- semble de poses et un ensemble d’images, nous sommes en capacité de proposer un classement de ces poses et de ces images en fonction de l’information saillante contenue
Origine | Fichiers produits par l'(les) auteur(s) |
---|