Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
Upcoming SlideShare
Data Management for Grown Ups
Next
Download to read offline and view in fullscreen.

Share

iRODS/Dataverse Project by Jonathan Crabtree

Download to read offline

Storage Systems: Integration with iRODS

  • Be the first to like this

iRODS/Dataverse Project by Jonathan Crabtree

  1. 1. IRODS/DATAVERSE   PROJECT     JUNE    2015 THE  ODUM  INSTITUTE  FOR  RESEARCH  IN  SOCIAL  SCIENCE   228  DAVIS  LIBRARY,  CB#  3355   UNIVERSITY  OF  NORTH  CAROLINA  AT  CHAPEL  HILL   CHAPEL  HILL,  NC    27599-­‐3355   www.odum.unc.edu   Jonathan  Crabtree   Assistant  Director  of  Compu2ng  and  Archival   Research  
  2. 2. Na#onal  Science  Founda#on  Coopera#ve  Agreement:  OCI-­‐0940841   Hao  Xu,  Akio  Sone,  Mike  Conway,  and  Jonathan  Crabtree     In  collaboraRon  with  the     IQSS  Dataverse  Team  
  3. 3. PROJECT  GOALS ¡  Expand  storage  opRons  for  Dataverse   ¡  CuraRon  workflow  integraRon   ¡  Connect  Dataverse  with  naRonal  architecture   ¡  Open  source  focused   ¡  Flexible  design  
  4. 4. BRINGING  GREAT  TOOLS  TOGETHER ¡  iRODS   ¡  Dataverse   ¡  Modeshape   ¡  Databook  Architecture   ¡  Apache  service  mix   ¡  iRODS  rule  integraRon   ¡  Indexing  engine  
  5. 5. THREE  PRIMARY  USE  CASES ¡  Publish  research  data  from  within  acRve  research  environment   ¡  Expand  Dataverse  storage  opRons     ¡  Connect  Odum  Archive  to  DFC’s  naRonal  architecture  
  6. 6. DATAVERSE/IRODS INTEGRATION 6
  7. 7. THREE  PRONGED  APPROACH ¡  Enable  automated    iRODS  rules  based  Dataverse  ingest   ¡  URlizes  Databook  and  AMQP  messaging   ¡  Dataverse  API   ¡  Prototype  operaRonal  using  Dataverse  3.x   ¡  Use  of  Modeshape  to  abstract  Dataverse  storage   ¡  Prototype  uses  Dataverse  3.x  and  iRODS  3.x   ¡  iRODS  rules  based  data  management   ¡  IniRal  rules  wri]en  for  subset  of  ISO  16363   ¡  Preliminary  tests  on  iRODS  3.x  
  8. 8. CHALLENGES ¡  MigraRon  to  Dataverse  4.x   ¡  MigraRon  to  iRODS  4.x   ¡  AuthenRcaRon  between  two  systems  
  9. 9. CURRENT  WORK  &  TIMELINE ¡  IQSS  team  has  now  programmed  a  draa  of  abstract  data  object  for  4.0.2   ¡  Akio  is  currently    tesRng  Modeshape  integraRon  with  Dataverse  4.0.2   ¡  iRODS  4.X  integraRon  with  Modeshape  tested     ¡  Prototype  expected  August  2015   ¡  TesRng  for  inclusion  in  Dataverse  Fall  2015  
  10. 10. NEXT  STEPS  AND  FEATURES  NEEDED ¡  SelecRon  of  iRODS  policies  from  within  Dataverse  GUI   ¡  Dynamic  query  of  Dataverse  metadata  from  within  iRODS   ¡  Enforce  DataTags  using  iRODS  rule  based  management   ¡  Dynamic  selecRon  of  storage  locaRons   ¡  Remote  storage  locaRon  and  linkages   ¡  Perform  compute  on  remote  data  storage  
  11. 11. LINKS ¡  https://github.com/DICE-UNC/dfc-dataverse-integration ¡  https://github.com/DICE-UNC/indexing-irods ¡  https://github.com/akio-sone/dvn/tree/Odum-Ext ¡  http://datafed.org ¡  http://thedata.org ¡  http://www.odum.unc.edu/odum/home2.jsp
  12. 12. THANK  YOU Odum  Ins#tute  Data  Archive   odumarchive@unc.edu     Jonathan  Crabtree   Assistant  Director  for  CompuRng  and   Archival  Research   Jonathan_Crabtree@unc.edu      

Storage Systems: Integration with iRODS

Views

Total views

1,526

On Slideshare

0

From embeds

0

Number of embeds

22

Actions

Downloads

19

Shares

0

Comments

0

Likes

0

×