Saa 2011-snac anila

510 views

Published on

SNAC presentation from SAA shortened and translated to French by Anila Angjeli for presentation to AFNOR.

0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
510
On SlideShare
0
From Embeds
0
Number of Embeds
1
Actions
Shares
0
Downloads
3
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide
  • Remember that we will solicit public evaluation and suggestions on drafts of the public interface, starting in the fall.
  • Saa 2011-snac anila

    1. 1. EAC-CPF et les Réseaux Sociaux<br />Présentation au congrès de la SAA<br />Chicago, aôut 2011 <br />Daniel Pitti (Institute for Advanced Technology in the Humanities, University of Virginia)<br />Ray Larson - (School of Information, University of California, Berkeley)<br />Adrian Turner et Brian Tingle -(CAD - California Digital Library, University of California)<br />Version abrégée de la version d’origine, avec traduction en français des explications textuelles.<br />Présentée aux groupes d’experts AFNOR sur l’EAD et l’EAC, par Anila Angjeli<br />La version complète, présentée au congrès de la SAA est accessible à l’adresse:<br />http://www.slideshare.net/tinglebrian/saa-2011-snac<br />
    2. 2. Financement et durée<br />Subventionné par : National Endowment for the Humanities<br />Axe: préservation et accès, recherche et développement <br />Durée : deux ans (mai 2010-avril 2012)<br />Equipe du projet<br />Daniel Pitti(chef de projet) et Worthy Martin <br />(IATH - Institute for Advanced Technology in the Humanities, University of Virginia)<br />Ray Larson <br />(School of Information, University of California, Berkeley)<br />Adrian Turner et Brian Tingle <br />(CAD - California Digital Library, University of California)<br />
    3. 3. Objectifs<br />Situation actuelle:<br />Les instruments de recherche confondent souvent la description des documents d’archives et celle des producteurs de ces documents <br />Le projet vise à:<br />Utiliser les technologies avancées dans un processus continu de transformation de la description archivistique <br />En facilitant la séparation de la description des “personnes” (au sens large du terme) de la description des documents d’archives<br />En utilisant EAC-CPF: standard international de contrôle d’autorité<br />But:<br />donner un élan à l’économie et à l’efficacité de la description archivistique pour une meilleure accès et compréhension de la part des utilisateurs des archives, des bibliothèques et des musées <br />
    4. 4. SNAC et les documents d’archives: principes<br />Les documents d’archives :<br />émanent de personnes, qui vivent et agissent individuellement, en groupes organisés, en familles <br />donnent de l’information sur la vie et l’œuvre des personnes<br />Les personnes:<br />Evoluent dans des contextes socio-professionnels et en relations avec d’autres personnes<br />Les documents d’archives<br />nous informent sur ces relations<br />Les documents d’archives produits par une même entité <br />sont réunis en fonds ou collections et c’est l’ensemble qui est décrit<br />On y trouve de l’information détaillée sur les producteurs<br />Mais aussi on y fait référence à plusieurs autres “personnes”<br />Les descriptions archivistiques<br />documentent les relations complexes entre les personnes et les documents d’archives <br />
    5. 5. Les donnéesexploitées<br />Instruments de recherche en EAD<br />Library of Congress (1 159)<br />Online Archive of California (~15 400 )<br />Northwest Digital Archive (5 160)<br />Virginia Heritage (8 390)<br />Notices d’autorité<br />Library of Congress: NACO/LCNAF (3,8M noms de personnes; 900K noms de collectivités)<br />Getty Vocabulary Program: Union List of Artist Names (293K noms de personnes et de collectivités)<br />Virtual International Authority File (5M+ noms de personnes)<br />
    6. 6. Méthodes et traitements<br />Extraction (génération) de notices EAC-CPF à partir des descriptions existantes en EAD<br />Extraction des noms de producteurs et de tous les autres noms CPF référencés dans les instances EAD<br />“Matcher” les notices EAC-CPF les unes avec les autres et avec les notices d’autorité existantes (ULAN, VIAF, LCNAF); fusionner les notices correspondant à la même entité<br />Enrichir et améliorer les notices EAC-CPF en normalisant les points d’accès, en ajoutant des formes alternatives de noms, des titres (VIAF), des données historiques (ULAN)<br />Créer un prototype pour un système d’accès <br />Aux données historiques et relatifs aux réseaux socio-professionnels<br />Liens avec les ressources des archives, des bibliothèques, et des musées<br />
    7. 7. Situation des données source en EAD<br />EncodedArchival Description<br />Description de producteurs de documents d’archives confondus avec des noms associés aux contenus des documents d’archives <br />Description détaillée des producteurs de documents d’archives<br />Qualité très variable<br />Dans le nombre des noms identifiés et encodés<br />Dans la forme des noms (directe, inversée, utilisation des majuscules, ponctuation, etc.)<br />Dans la catégorisation des noms (personnes, collectivités, familles)<br />De nombreux noms apparaissent mais ne sont pas identifiés en tant que tels<br />Dans la majorité se trouvent dans la description des biographies/histoires et dans la description des correspondances<br />L’extraction a initialement visé les « fruits murs » (« lowhanging fruit »), c.a.d. les noms balisés en tant que tels<br />Les autres noms qui ne sont pas identifiés en tant que tels seront progressivement traités<br />
    8. 8. Source: J. Robert Oppenheimer Papers (LoC)<br /><origination> <br /> <persname source="lcnaf">Oppenheimer, J. Robert, 1904-1967</persname> <br /></origination><br /><controlaccess> <persname source="lcnaf" encodinganalog="100" role="creator">Oppenheimer, J. <br /> Robert, 1904-1967</persname> <persname source="lcnaf" encodinganalog="600" role="subject">Bethe, Hans<br /> Albrecht, 1906- --Correspondence</persname> <!-- […] --> <persname source="lcnaf" encodinganalog="600" role="subject">Born, Max,<br /> 1882-1970 --Correspondence</persname> <persname source="lcnaf" encodinganalog="600" role="subject">Boyd, Julian P.<br /> (Julian Parks), 1903- --Correspondence</persname> <persname source="lcnaf" encodinganalog="600" role="subject">Bush, Vannevar,<br /> 1890-1974 --Correspondence</persname> <persname source="lcnaf" encodinganalog="600" role="subject">Casals, Pablo,<br /> 1876-1973 --Correspondence</persname> <!-- […] --> <corpname source="lcnaf" encodinganalog="610" role="subject">Institute for<br /> Advanced Study (Princeton, N.J.)</corpname> <corpname source="lcnaf" encodinganalog="610" role="subject">Los Alamos<br /> Scientific Laboratory</corpname> <!-- […] --></controlaccess><br />
    9. 9. Source: Leonard Bernstein Collection (LoC)<br /> <br /><c02><br /> <did><br /> <container type="box">1</container> <br /> <unittitle>Aaltonen, Erkki<unitdate era="ce" calendar="gregorian">1981</unitdate><br /> </unittitle><br /> <physdesc><br /> <extent>1</extent> <br /> </physdesc><br /> </did><br /></c02><br /><c02><br /> <did><br /> <unittitle>Abbado, Claudio <unitdate era="ce" calendar="gregorian">1963-90</unitdate> <br /> </unittitle><br /> <physdesc><br /> <extent>5</extent> <br /> </physdesc><br /> </did><br /></c02><br />[…]<br />
    10. 10. <bioghist> <br /> <head>Biographical Sketch</head> <br /> <p>José Marcos Mugarrieta, prior to his term as Mexican consul in San Francisco 1857-1863, served in the Mexican army from 1837. He saw action in numerous battles and campaigns – Jamaica, under General Canalizoin 1841; Campeche, 1842-1843; Merida, 1843; Veracruz, 1845; Mexico City, 1846; Angostura and Cerro-gordo, 1847; Guanajuato, 1848, and Sierra-Gorda under Bustamante, 1848-1849; and Matamoros, 1849-1850. […] </p> <br /> <p>In April 1857 Mugarrieta received an appointment from the Comonfort government for the consulship in San Francisco. He did not actually begin his new duties until September 1, 1859, due to illness and to the political situation in Mexico. […]</p> <br /></bioghist><br />
    11. 11. <bioghist><br /> <head>Chronology</head><br /> <chronlist><br /> <chronitem><br /> <date>1900</date><br /> <event>Born on Jan. 20 in Hastings, Minnesota.</event><br /> </chronitem><br /> <chronitem><br /> <date>1922</date><br /> <event>Received baccalaureate from Princeton University, major in philosophy.<br /> </event><br /> </chronitem><br /> […] <br /> <chronitem><br /> <date>1965</date><br /> <event>Died on April 4.</event><br /> </chronitem><br /> </chronlist><br /> </bioghist><br />
    12. 12. Standard utilisé: EAC-CPF<br /><identity><br /> <entityType>person</entityType><br /> <nameEntryscriptCode="Latn" xml:lang="eng"><br /> <part>Oppenheimer, J. Robert, 1904-1967.</part><br /> <authorizedForm>AACR2</authorizedForm><br /> </nameEntry><br /> <nameEntrylocalType="VIAF:MainHeading"><br /> <part>Oppenheimer, J. Robert (Julius Robert), 1904-1967</part><br /> <alternativeForm>VIAF</alternativeForm><br /> </nameEntry><br /> <nameEntrylocalType="VIAF:MainHeading"><br /> <part>Oppenheimer, Julius Robert, 1904-1967</part><br /> <alternativeForm>VIAF</alternativeForm><br /> </nameEntry><br /> <nameEntrylocalType="VIAF:x400"><br /> <part>Oppenheimer, Robert</part><br /> <alternativeForm>VIAF</alternativeForm><br /> </nameEntry><br /> <nameEntrylocalType="VIAF:x400"><br /> <part>Ou-pẽn-hai-mo, 1904-1967</part><br /> <alternativeForm>VIAF</alternativeForm><br /> </nameEntry><br /></identity><br />
    13. 13. <existDates><br /> <dateRange><br /> <fromDatestandardDate=“1904-04-22”>1904, Apr. 22</fromDate><br /> <toDatestandardDate=“1967-02-18”>1967, Feb. 18</toDate><br /> </dateRange><br /></existDates><br /><!-- ... --><br /><localDescriptionlocalType="subject"><br /> <term>Science--Societies, etc.</term><br /></localDescription><br /><localDescriptionlocalType="VIAF:nationality"><br /> <placeEntrycountryCode="US"/><br /></localDescription><br /><localDescriptionlocalType="VIAF:gender"><br /> <term>Male</term><br /></localDescription><br /><languageUsed><br /> <language languageCode="eng"/><br /></languageUsed><br /><occupation><br /> <term>Physicists.</term><br /></occupation><br /><!-- ... --><br />
    14. 14. <chronList><br /> <chronItem><br /> <date>1904, Apr. 22</date><br /> <placeEntry>New York, N.Y.</placeEntry><br /> <event>Born, New York, N.Y.</event><br /> </chronItem> <!-- ... --><br /> <chronItem><br /> <date>1943-1945</date><br /> <placeEntry>Los Alamos, N. Mex.</placeEntry><br /> <event>Director, Los Alamos Scientific Laboratory, Los Alamos, N. Mex.</event><br /> </chronItem> <!-- ... --><br /> <chronItem><br /> <date>1954</date><br /> <event>(1) Denied security clearance […] (2) Published Science and the<br /> Common Understanding […]<br /> </event><br /> </chronItem> <!-- ... --><br /> <chronItem><br /> <date>1967, Feb. 18</date><br /> <placeEntry>Princeton, N.J.</placeEntry><br /> <event>Died, Princeton, N.J.</event><br /> </chronItem><br /></chronList><br />
    15. 15. <cpfRelationxmlns:xlink="http://www.w3.org/1999/xlink" <br />xlink:type="simple"<br />xlink:role="http://RDVocab.info/uri/schema/FRBRentitiesRDA/Person" <br />xlink:arcrole="correspondedWith"><br /> <relationEntry>Bush, Vannevar, 1890-1974.</relationEntry><br /> <descriptiveNote><br /> <p>recordId: DLC.ms998007.r007</p><br /> </descriptiveNote><br /></cpfRelation><br />
    16. 16. <resourceRelationxmlns:xlink="http://www.w3.org/1999/xlink" xlink:arcrole="creatorOf"xlink:role="archivalRecords” xlink:type="simple” <br />xlink:href="http://hdl.loc.gov/loc.mss/eadmss.ms998007"> <relationEntry>J. Robert Oppenheimer Papers, 1799-1980 (bulk 1947-1967)</relationEntry> <objectXMLWrap> <did xmlns="urn:isbn:1-931666-22-9” ><br /> <unittitle>Papers <unitdate normal="1799/1980” era="ce” calendar="gregorian">1799-1980<br /> </unitdate><unitdate label="Bulk Dates" type="bulk" normal="1947/1967” era="ce” calendar="gregorian">(bulk 1947-1967)</unitdate></unittitle> <unitidcountrycode="US" repositorycode="US-DLC">MSS35188</unitid> <origination label="Creator"> <persname>Oppenheimer, J. Robert, 1904-1967</persname> </origination> <!-- ... --> <repository><corpname>Manuscript Division. Library of Congress</corpname><br /> </repository> <abstract>Physicist and director of the Institute for Advanced Study, Princeton, New Jersey. [...] Topics include theoretical physics, development of the atomic bomb, the relationship between government and science, nuclear energy, security, and national loyalty. </abstract> </did> </objectXMLWrap></resourceRelation><br />
    17. 17. Premières observations - Extraction<br />La profondeur de l’analyse et la qualité de description des entités CPF varie largement d’un instrument de recherche en EAD à l’autre<br />Dans LoC, de nombreux noms obéissent au contrôle d’autorité<br />Dans OAC et NWDA on trouve moins de noms et le niveau de contrôle est variable<br />
    18. 18. Etape suivante dans l’extraction<br />Affiner les procédures de l’extraction, en appliquant des outils de Traitement Automatisé de la Langue (TAL), ex:<br />Vérifier le type du nom : C, P ou F<br />Reformater les noms (normaliser les formes)<br />Identifier les chaînes de caractères qui sont potentiellement des noms mais ne sont pas identifiés en tant que tels<br />Utiliser l’information contextuelle pour de meilleurs résultats dans les “matching”, ex.: date/dates de correspondance, ou l’occupation du producteur des documents<br />
    19. 19. Au delà du projet<br />Créer une infrastructure pour un système national d’autorité pour les archives <br />IMLS vient d’annoncer la subvention d’un projet pour deux ans, octobre 2011- septembre 2013<br />Ateliers SAA sur l’EAC-CPF : 140 bourses d’étude<br />Planification d’un programme coopératif national portant sur les autorités dans les archives « National ArchivalAuthoritiesCooperative »<br />SNAC II: proposition pour étendre SNAC<br />Beaucoup plus de données<br />NARA, Smithsonian Institution, notices MARC WorldCat, encore plus d’instruments de recherche<br />Appel à contribution avec des données (instruments de recherche EAD et notices EAC-CPF) à la communauté internationale<br />
    20. 20. SNAC« matching » et fusion<br />Ray Larson<br />Université de Californie, Berkeley<br />School of Information<br />
    21. 21. Objectif de l’équipe de Berkeley<br />Combiner les ressources de données provenant de multiples archives et d’autres sources d’information<br />
    22. 22. Méthodes et traitements<br />Extraction (génération) de notices EAC-CPF à partir des descriptions existantes en EAD<br />Extraction des noms de producteurs et de tous les autres noms CPF référencés dans les instances EAD<br />“Matcher” les notices EAC-CPF les unes avec les autres et avec les notices d’autorité existantes (ULAN, VIAF, LCNAF); fusionner les notices correspondant à la même entité<br />Enrichir et améliorer les notices EAC-CPF en normalisant les points d’accès, en ajoutant des formes alternatives de noms, des titres (VIAF), des données historiques (ULAN)<br />Défis à relever: <br />Plusieurs personnes portant le même nom<br />Plusieurs noms pour une même personne<br />
    23. 23.
    24. 24.
    25. 25.
    26. 26. Connecter « matcher » les correspondances exactes<br />Les notices EAC-CPF fournissent les noms sans avoir besoin de « parser » les textes, etc.<br />Permettent d’utiliser des méthodes simples comme les correspondances exactes:<br />Postulat de départ: <br />les accès identiques désignent les mêmes personnes / collectivités / familles<br />les noms complets et les ID des notices sont entrés dans une base de donnée et les ID contenant les mêmes noms sont marquées pour être fusionnés<br />
    27. 27.
    28. 28. Recherche dans les fichiers d’autorité<br />Pour chaque nom une recherche dans VIAF est formulée en utilisant le système Cheshire (système de recherche SGML/XML avec des fonctionnalités de mise en correspondance probabilistique et booléenne)<br />Recherche des formes d’autorité et des variantes<br />Toute correspondance de nom est considérée comme une variante – candidate pour une mise en correspondance avec la forme d’autorité<br />Les notices d’autorité EAC-CPF qui correspondent avec la même notice d’autorité, sont marquées comme des candidates pour une mise en correspondance <br />
    29. 29.
    30. 30. Fusion des notices marquées<br />Pour tous les « matching » exacts et les autorités correspondantes<br />Utiliser les formes d’autorité du nom<br />Combiner les données de chaque « matching » dans une seule notice EAC-CPF<br />Conserver toutes les ID des notices sources et les autres informations recueillies<br />Enfin produire (sortir/générer) des notices EAC-CPF fusionnées<br />
    31. 31.
    32. 32.
    33. 33. Mais<br />Les « matching » exacts supposent que les archives suivent les pratiques de catalogage de la LoC dans leurs instruments de recherche<br />Cette supposition pose quelques problèmes<br />
    34. 34.
    35. 35.
    36. 36.
    37. 37.
    38. 38. Traiter les échecs<br />Où ça ne marche pas et pourquoi ?<br />Un échantillon de la base de données est en cours de constitution pour identifier les problèmes<br />Plusieurs problèmes constatés semblent pouvoir être résolus en utilisant:<br />des éléments contextuels dans les documents EAD<br />des « matching » plus sophistiqués pour les variantes phonétiques<br />tels que les n-grams et les schémas phonétiques tel que phonex<br />une normalisation additionnelle des noms avant fusion<br />pour l’ordre des noms, etc.<br />utilisation de méthodes avancées de « matching »<br />
    39. 39. Tester de nouvelles méthodes de fusion<br />Travail effectué en conjonction avec SNAC dans le cadre d’un projet de master appelé Biograph<br />Utilisation de SNAC et fusion avec FreeBase et IMDB <br />
    40. 40.
    41. 41.
    42. 42.
    43. 43.
    44. 44.
    45. 45.
    46. 46. Conclusion<br />In n’y aura pas une seule méthode de fusion mais <br />un ensemble d’approches par couches permettant d’aller des « matching » exacts, les plus simples, aux identifications fiables (on l’espère) de variantes de noms, lorsque l’information contextuelle le confirme (dates, etc.)<br />Après fusion, c’est la phase recherche et l’affichage<br />
    47. 47. Découvrir les réseaux sociaux et historiques<br />Demo du prototype<br />Brian Tingle<br />California Digital Library <br />
    48. 48. Demo<br />Les onglets<br />La recherche avancée<br />
    49. 49.
    50. 50.
    51. 51. Fonctionnalités<br />Proposition de correction d’orthographe (suggestion de requête)<br />Liste des variantes du nom (à la recherche, à l’affichage d’une notice)<br />Recherche / tri par facettes (occupation, etc.)<br />Biographie ou histoire<br />Les entités liées <br />
    52. 52.
    53. 53.
    54. 54.
    55. 55.
    56. 56.
    57. 57.
    58. 58. Pour plus d’information:<br />http://socialarchive.iath.virginia.edu/ (site web du projet)<br />http://socialarchive.iath.virginia.edu/xtf/search (prototype public)<br />

    ×