{"id":23687,"date":"2025-05-09T16:15:36","date_gmt":"2025-05-09T14:15:36","guid":{"rendered":"https:\/\/rebub.u-bordeaux.fr\/?page_id=23687"},"modified":"2025-08-22T10:06:11","modified_gmt":"2025-08-22T08:06:11","slug":"dedup-primo-ve","status":"publish","type":"page","link":"http:\/\/rebub.u-bordeaux.fr\/index.php\/babord\/configuration-administration\/signalement\/dedup-primo-ve\/","title":{"rendered":"D\u00e9tection des doublons (Dedup)(Primo VE)"},"content":{"rendered":"
<\/span><\/div>
Table des mati\u00e8res[ Show ]<\/a><\/span><\/span>
  1. Articulation du Dedup et du FRBR<\/a><\/li>
  2. Flux de Traitement Dedup\/FRBR<\/a>
    1. 1. Calcul des cl\u00e9s :<\/a><\/li>
    2. 2. Recherche des cl\u00e9s existantes :<\/a><\/li>
    3. 3. Stockage de l’identifiant de Groupe :<\/a><\/li><\/ol>
    4. Transitivit\u00e9 du Dedup<\/a><\/li>
    5. Calcul des cl\u00e9s<\/a>
      1. Type de Cl\u00e9<\/a><\/li>
      2. Construction des champs d\u00e9di\u00e9s : mapping des champs Alma en cl\u00e9s Dedup<\/a>
        1. Champs pr\u00e9d\u00e9finis<\/a><\/li>
        2. Champs locaux<\/a><\/li><\/ol>
        3. Cr\u00e9ation des clefs<\/a>
          1. Concat\u00e9nation des Champs<\/a><\/li>
          2. M\u00e9thodes de Normalisation<\/a><\/li>
          3. Champs Optionnels<\/a><\/li>
          4. D\u00e9finitions des cl\u00e9s Dedup<\/a>
            1. Clefs pr\u00e9d\u00e9finnies <\/a><\/li>
            2. Clefs adapt\u00e9es ou cr\u00e9ees localement<\/a><\/li><\/ol>
            3. Affichage des notices<\/a><\/li>
            4. Recalculer les clefs de Dedup<\/a><\/li><\/ol><\/li><\/li><\/li><\/li><\/li><\/div><\/div><\/div>

              Table des mati\u00e8res[ Show ]<\/a><\/span><\/span>
              1. Articulation du Dedup et du FRBR<\/a><\/li>
              2. Flux de Traitement Dedup\/FRBR<\/a>
                1. 1. Calcul des cl\u00e9s :<\/a><\/li>
                2. 2. Recherche des cl\u00e9s existantes :<\/a><\/li>
                3. 3. Stockage de l’identifiant de Groupe :<\/a><\/li><\/ol>
                4. Transitivit\u00e9 du Dedup<\/a><\/li>
                5. Calcul des cl\u00e9s<\/a>
                  1. Type de Cl\u00e9<\/a><\/li>
                  2. Construction des champs d\u00e9di\u00e9s : mapping des champs Alma en cl\u00e9s Dedup<\/a>
                    1. Champs pr\u00e9d\u00e9finis<\/a><\/li>
                    2. Champs locaux<\/a><\/li><\/ol>
                    3. Cr\u00e9ation des clefs<\/a>
                      1. Concat\u00e9nation des Champs<\/a><\/li>
                      2. M\u00e9thodes de Normalisation<\/a><\/li>
                      3. Champs Optionnels<\/a><\/li>
                      4. D\u00e9finitions des cl\u00e9s Dedup<\/a>
                        1. Clefs pr\u00e9d\u00e9finnies <\/a><\/li>
                        2. Clefs adapt\u00e9es ou cr\u00e9ees localement<\/a><\/li><\/ol>
                        3. Affichage des notices<\/a><\/li>
                        4. Recalculer les clefs de Dedup<\/a><\/li><\/ol><\/li><\/li><\/li><\/li><\/li><\/div><\/div><\/p>\n

                          Le processus de d\u00e9tection des doublons repose sur la cr\u00e9ation d’un vecteur de d\u00e9duplication pour chaque notice Alma. Ce vecteur inclut une ou plusieurs clefs qui sont construites \u00e0 partir des m\u00e9tadonn\u00e9es bibliographiques.<\/p>\n\n\n\n

                          Les notices marqu\u00e9es comme doublons sont alors affich\u00e9es comme un seul enregistrement dans les r\u00e9sultats de recherche. Les m\u00e9tadonn\u00e9es sont extraites de la premi\u00e8re notice dans la liste des r\u00e9sultats.<\/p>\n\n\n\n

                          Articulation du Dedup et du FRBR<\/h1>\n\n\n\n

                          Les processus Dedup et FRBR sont similaires, mais utilisent diff\u00e9rentes cl\u00e9s. Le syst\u00e8me recherche d’abord les doublons, puis les groupes FRBR. Ainsi, des notices fusionn\u00e9es peuvent \u00eatre \u00e9galement \u00ab\u00a0FRBRis\u00e9\u00a0\u00bb.<\/p>\n\n\n\n

                          Flux de Traitement Dedup\/FRBR<\/h1>\n\n\n\n

                          1. Calcul des cl\u00e9s :<\/strong><\/h2>\n\n\n\n

                          Le syst\u00e8me extrait des champs de la notice Alma (comme l’auteur, le titre, l’ISBN, etc.) et cr\u00e9e des cl\u00e9s en combinant et normalisant ces donn\u00e9es. Ces cl\u00e9s sont utilis\u00e9es pour identifier les enregistrements similaires.<\/p>\n\n\n\n

                          2. Recherche des cl\u00e9s existantes :<\/strong><\/h2>\n\n\n\n

                          Le syst\u00e8me compare les cl\u00e9s nouvellement calcul\u00e9es avec celles d\u00e9j\u00e0 pr\u00e9sentes dans la base de donn\u00e9es. Si une correspondance est trouv\u00e9e, cela signifie que la notice en cours de traitement pourrait avoir un doublon. Le syst\u00e8me associe donc \u00e0 la clef nouvellement cr\u00e9\u00e9e l\u2019identifiant du groupe d\u00e9j\u00e0 pr\u00e9sent dans Alma.<\/p>\n\n\n\n

                          En cas de correspondances multiples, le syst\u00e8me s\u00e9lectionne l’identifiant de groupe associ\u00e9 \u00e0 la cl\u00e9 de priorit\u00e9 la plus \u00e9lev\u00e9e. On ne connait malheureusement pas le niveau de prorit\u00e9 affect\u00e9 \u00e0 chaque clef.<\/p>\n\n\n\n

                          Si plusieurs cl\u00e9s ont la m\u00eame priorit\u00e9, l’identifiant de groupe est choisi de mani\u00e8re al\u00e9atoire.<\/p>\n\n\n\n

                          En l’absence de cl\u00e9 existante, le syst\u00e8me utilise la cl\u00e9 de priorit\u00e9 la plus \u00e9lev\u00e9e pour cr\u00e9er un nouvel identifiant de groupe et l’associ\u00e9 \u00e0 la notice.<\/p>\n\n\n\n

                          3. Stockage de l’identifiant de Groupe :<\/strong><\/h2>\n\n\n\n

                          Une fois l’identifiant de groupe s\u00e9lectionn\u00e9, il est stock\u00e9 pour toutes les cl\u00e9s calcul\u00e9es \u00e0 l’\u00e9tape 1. <\/p>\n\n\n\n

                          Transitivit\u00e9 du Dedup<\/h1>\n\n\n\n

                          Le processus de fusion n’est pas enti\u00e8rement transitif, ce qui signifie que si une notice A correspond \u00e0 une notice B, et que la notice B correspond \u00e0 une notice C, A ne correspondra pas n\u00e9cessairement \u00e0 C. Cela peut se produire en raison de la mani\u00e8re dont les cl\u00e9s sont calcul\u00e9es et prioris\u00e9es. En effet, l\u2019ordre dans lequel les enregistrements sont trait\u00e9s peut influencer les groupements.<\/p>\n\n\n\n

                          Voici un exemple :<\/p>\n\n\n\n

                            \n
                          1. Ajout de la noticeB :<\/strong>\n