Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

SciVal for Trend - 연구성과와 동향분석

463 views

Published on

2019년 5월14일(화) SciVal 특강 자료

Published in: Education
  • Login to see the comments

  • Be the first to like this

SciVal for Trend - 연구성과와 동향분석

  1. 1. Tuesday 14th May, 2019 김병국 차장 Customer Consultant – Elsevier Korea SciVal for Trend – 연구성과와 동향분석
  2. 2. Agenda • 성과분석 활용 데이터베이스: Scopus • 연구성과 평가지표 및 SciVal • 연구자, 기관별 연구성과 비교/분석 • 연구토픽, 주제분야 동향 분석
  3. 3. 성과분석 활용 데이터베이스 – Scopus
  4. 4. Scopus • 전 세계 5,000개 이상의 출판사에서 출판되는 22,800 이상의 타이틀, 120,000여권의 인문 사회학 도서, 90,000건의 컨퍼런스 등 등재 및 특허자료 링크 • Author Profile: 저자의 연구성과 분석: 논문, 피인용현황, 참고문헌, H-index 제공 • Affiliation Profile: 기관의 논문을 그룹핑. 기관의 연구성과 분석, 논문, 저자, 주제정보, 연구협력 기관 정보 제공 • Journal Analyzer: 저널의 영향력 평가 및 분석, 논문, 피인용도, SJR, SNIP, CiteScore 지수 제공 • 저널 등재: Scopus Content Selection & Advisory Board(CSAB)에서 타이틀 선정 기준에 따라 철저한 심사 후 등재 결정 • 평가도구로 활용: OECD, 주요 국가(미국, 유럽, 영국, 일본, 호주)의 정부 기관/ 연구위원회, 전세계 대학랭킹평가기관 (QS, THE, Financial Times), 우리나라 한국경제 등에서 연구 성과 평가 도구로 활용 Elsevier 출판사에서 구축한 초록/인용데이터베이스
  5. 5. <Scopus 주제분야별 타이틀 등재 현황> *2018.09. 기준 Scopus • Scopus 분류 기준인 ASJC (All Science Journal Classification) 적용 • 4개의 대 주제를 27개의 중 주제, 330 개의 소주제 분야로 구성 • 저널 타이틀은 하나 이상의 주제분야로 분류될 수 있음
  6. 6. Scopus <Scopus 주제분류 체계> • Scopus 분류 기준인 ASJC journal classification 적용 • 4개의 대 주제를 27개의 중 주제, 330 개의 소주제 분야로 선택 및 제한하여 성과 분석 • SciVal 의 주제 분류: Scopus 의 주제분류 방식 외에 다른 기관에서 활용하는 분류 체계를 통해서도 분석 할 수 있음 • Field of Science and Technology (FOS) Classification – OECD 주제분류 • QS – 세계대학 평가 기관의 주제분류 • THE – 세계대학 평가 기관의 주제분류 27개 주제 분야 (ASJC – Scopus 기준) ▪ Agricultural and Biological Sciences ▪ Arts and Humanities ▪ Biochemistry, Genetics and Molecular Biology ▪ Business, Management and Accounting ▪ Chemical Engineering ▪ Chemistry ▪ Computer Science ▪ Decision Sciences ▪ Earth and Planetary Sciences ▪ Economics, Econometrics and Finance ▪ Energy ▪ Engineering ▪ Environmental Science ▪ Immunology and Microbiology ▪ Multidisciplinary ▪ Materials Science ▪ Mathematics ▪ Medicine ▪ Neuroscience ▪ Nursing ▪ Pharmacology, Toxicology and Pharmaceutics ▪ Physics and Astronomy ▪ Psychology ▪ Social Sciences ▪ Veterinary ▪ Dentistry ▪ Health Professions
  7. 7. Scopus Stage1 Stage2 Stage3 ~3,500 Suggestions per year ~33% Meet the minimum criteria ~50% are accepted after CSAV’s review ~750 Serial titles meet the full Scopus criteria Strict Quality & Ethics Selection Criteria • 명확하고 공정한 기준으로 저널 선정 • 각 분야별 전문가로 구성된 CSAB(Content Selection & Advisory Board)에 의해 심사 및 평가 • 높은 수준의 타이틀 Quality 보장 • 매년 재평가를 통한 철저한 질 관리
  8. 8. Scopus – POSTECH 기관 프로파일 POSTECH 소속으로 발표된 논문 POSTECH 소속으로 논문을 발표한 저자
  9. 9. Scopus – 연구자 프로파일 수정 • Modify(Edit) author profile 클릭하여, 잘못된 논문 삭제 및 누락된 논문 추가 • 한 저자의 프로파일이 여러 개 있는 경우: 검색된 이름 옆의 체크박스 선택 후, Request to merge authors 클릭 • Scopus support center 활용: - https://service.elsevier.com/app/overview/scopus/ - https://service.elsevier.com/app/answers/detail/a_id/14550/c/14684/supporthub/scopuscontent/ • Scopus author feedback에 수정 요청: Scopus ID, 영어 저자명, 소속명, 수정해야 할 논문 리스트를 Scopus Author Feedback으로 수정 요청 - email: S2@Elsevier.com
  10. 10. 연구성과 평가지표 및 SciVal
  11. 11. Evaluation Metrix • 평가 메트릭스: 연구성과를 분석, 평가 하는데 이용되는 30개 이상의 평가 지표를 크게 4가지로 구분하여 활용 Benchmarking Metrics 연구 생산성 Scholarly Output Scopus 상에 등재된 기관의 논문 수 (논문 수) 연구 영향력 Citation Count 해당 기관의 이름으로 발표된 논문이 피인용 된 전체 건수 Citations per publication 논문 한 편당의 피인용 수 H-index 연구자의 연구영향력 측정하기 위한 지수로 생산성과 효과를 함께 측정, 발표한 논문 건수와 피 인용 횟수를 모두 고려한 지수 Field Weighted Citation Impact 상대적인 피인용 지수. 해당 연구 분야, 논문 타입, 발표 연도에 따른 전세계 평균 대비 피인용 비율. 전세계 평균=1, FWCI가 1.20인 경우 전세계 평균대비 20% 더 인용되었다고 해석 Outputs in Top Citation Percentiles 인용 건수 기준 전세계 상위 1%,10%에 해당되는 아티클 편수의 비율 Publications in Top Journal Percentiles 저널의 영향력 지수기준 상위 10% 저널에 발표된 논문 수 및 해당 비율 CiteScore: 저널의 영향력 지수 SJR: 저널의 명성에 따른 영향력 지수 (전세계 영향력 지수 평균을 1로 정규화) SNIP: 저널의 주제에 따른 영향력 지수 (특정 주제의 영향력 지수 평균을 1로 정규화) 공동연구 International Collaboration 해당 기관과 다른 국가의 기관 저자가 공동으로 발표한 논문의 비율 Collaboration Impact 국제적인 기관 저자와의 협력으로 발표한 논문의 한 편당 피인용된 횟수 연구 관심도 View per publication Scopus상에서 기관의 논문이 다운로드 된 횟수를 논문 수로 나눈 논문 한 편당 다운로드 수
  12. 12. 학술지의 영향력 지수: SJR / SNIP SJR (SCImago Journal Rank): 학술지의 명성에 따른 지수 • ‘모든 인용은 동등하게 평가하면 안 된다‘는 전제 하에 완성 • 학술지의 주제분야, 품질, 명성은 SJR 지수 산출에 직접적인 영향을 미침 • 인용도가 낮은 학술지에서 인용하는 것보다 인용도 지수가 높은 학술지에서 인용하는 것을 더 높이 평가 (명성의 이전) SNIP (Source Normalized Impact per Paper): 학술지의 주제에 따른 지수 • 학술지의 주제분야별 인용패턴 고려 • 주제분야별 해당 연도의 Impact와 인용 잠재력 (Citation Potential) 간의 비율로 계산
  13. 13. • 연구자의 연구성과를 평가하기 위한 지표로 UCSD의 물리학자 Jorge E. Hirsch에 의해 개발 • 연구자가 발표한 논문의 수나 피 인용수 등 개별 지표에서 성과를 양이나 질로 단순히 평가하는 기존의 지표와 달리, 질과 양적인 측면 모두 고려 • 논문을 인용빈도가 높은 순부터 나열 하였을 때, 논문의 인용빈도가 논문의 순위보다 크거나 같은 마지막 논문의 순위가 h-지수 • 현재는 연구자 뿐만 아니라, 저널, 기관, 국가의 연구성과 측정에도 활용되고 있음 연구자의 h-지수가 13라면, 최소 13회 이상 인용된 논문을 13편 발표했다는 의미 No Citations 1 134 2 69 3 43 4 42 5 39 6 31 7 29 8 28 9 28 10 20 11 18 12 15 13 13 연구자의 연구영향력 평가지수: H-Index
  14. 14. 논문의 영향력 지수: Field Weighted Citation Impact (FWCI) • 같은 출판연도, 주제분야, 논문 형태에 따라 인용을 측정하여 정규화한 인용지수 (상대적인 피인용 지수) • 특정 논문들이 받은 실제 인용 수에 대한 비율로, 전체 인용은 주제 분야 평균에 기반에서 산출 • 정규화된 지수로 다양한 주제분야를 비교하는데 있어 활용될 수 있음 • FWCI의 전세계 평균은 1이며, 1보다 크면 평균이상, 1 이하이면 평균 이하, 예) FWCI 지수가 1.34이면 전세계 평균대비 34% 더 인용되었다고 해석 FWCI of Publication P(1) = P(1)의 인용 수 P(1)과 같은 연도, 주제, 출판물 형태가 같은 논문들의 전세계 평균 인용 수 FWCI of publication group P(1)-P(N) = Average FWCI of P(1), P(2), P(3)… P(N) THE 세계대학평가에서 기관의 연구영향력 분석을 위한 지표로 활용
  15. 15. SciVal – Science Evaluation • 전 세계 220여개 국가 10,000여개 기관, 수백만 연구자의 성과를 손쉽게 비교/분석 • 국내외 연구협력 기관 및 연구자 매칭 • 연구토픽, 주제분야 분석을 통한 동향파악 Visualize research performance Benchmark your progress Develop collaborative partnerships 국가, 기관, 연구팀/ 학과, 연구자에 대한 연구성과 분석 30여개 이상의 성과 평가 매트릭스를 통한 국가, 기관, 연구자, 연구팀의 성과 분석 및 비교 연구협력 현황 분석 및 잠재적인 협력 가능기관 및 연구자 추천 Analyze research trends 연구 주제, 키워드별 동향 분석 및 우수 연구 국가, 기관, 연구자 탐색 <Overview> <Benchmarking> <Collaboration> <Trends>
  16. 16. 연구자 초빙을 위한 탐색 툴-1 • Overview or Benchmarking-Researchers and Groups-연구자 검색-Author Profile 확인-Validate publication (옵션)-Save-연구자별 성과 확인/비교 분석 • 연구분야, 토픽, 논문 및 국내외 연구협력 현황 파악 연구자를 한 명씩 검색하거나, Author ID, ORCIDs 반입하여 그룹생성 가능
  17. 17. 연구자 초빙을 위한 탐색 툴-2 • Overview, Benchmarking, Trends 모듈 활용하여 저자 성과분석 리포트 작성 • 한국연구재단의 신진 연구자상, 주요 대학의 연구자 수상 및 연구자 채용 시 리포트 형식으로 활용되고 있음
  18. 18. 논문, 키워드 분석을 통한 이슈리포트 작성 <STEPI, 4차 산업혁명 관련 논문(자율주행차)를 중심으로> <NRF, 4차 산업혁명 관련 5대 플랫폼 기술의 연구수준 분석>
  19. 19. 연구자, 기관별 연구성과 비교/분석
  20. 20. SciVal 접속-1 • SciVal.com 접속 후, 화면 상단에 ‘Sign in’ 버튼 클릭 • ScienceDirect, Scopus 계정이 있는 경우 해당 계정으로 접속 • 계정이 없는 경우, 학교 이메일 (***@korea.ac.kr)로 생성 • 웹 브라우저는 Chrome, Firefox 권장
  21. 21. SciVal 접속-2 • Welcome to SciVal! • Go to Overview> 클릭
  22. 22. Overview: 전 세계 연구기관 중 우리 대학의 순위는? • Overview-Countries-World 검색-연도/주제선택-Institutions-결과 • 연구기관 성과 Excel 다운로드 : ?
  23. 23. Overview: 연구성과 분석 (2013~2018) • Overview-Institutions and Groups-”**대학교” 검색-Summary-결과 • 분야별 질적/양적 연구 성과 파악 • 다양한 메뉴 클릭하여 해당 정보 확인
  24. 24. • ~100,000 global research topics by clustering all of Scopus and ranked them by Prominence. • Prominence is a new indicator that shows the current momentum of a topic by looking at very recent citations, views and CiteScore values. • Prominence = momentum (not the same as importance!) • Prominence predicts funding – helps researchers and research managers identify topics in which funding will increase. Topics Prominence
  25. 25. • All Scopus publications are clustered into topics using citation links • ~35 million publications (1996-present) in ~100,000 topics A N O B C D E F G H I J K L M S T P Q R U V W Z X Y Cluster 1 Cluster 2 Cluster 3 How are “Topics” identified
  26. 26. Overview: 우수연구 토픽-1 • 기관에서 가장 연구가 활발하고 주목받고 있는 Hot Topic 확인 • Topic을 중심으로 연구동향 및 우수 연구자 파악 연구가 가장 활발하고 주목받는 토픽
  27. 27. Overview: 우수연구 토픽-2 • 2013-2018년 출판된 논문을 기준으로 Topic 분석을 통해 기관에서 특정분야의 고유역량 파악 • 연구 경쟁력을 파악하여 동향분석 및 연구방향 설정 <상위 1% 연구 토픽>
  28. 28. Benchmarking: 타 대학과 연구성과 비교 (1/3) • Benchmarking 모듈-왼쪽패널 Institutions and Groups 관심기관 검색 후 Add-연도, 주제분야 선택-Chart • X축: Scholarly output 2013~2017년에 출판된 논문 수 • Y축: FWCI 전 세계 평균인 1을 기준으로 기관의 지수 비교 • Z축: International Collaboration 논문의 공저자 기준 다른 나라 기관 저자들과 협력 비율
  29. 29. Benchmarking: 타 대학과 연구성과 비교 (2/3) 최대 20개까지 Metrix 추가 • Chart에서 Table로 변경 • 1996~2018까지 연도조정-Metrix 추가-Export하여 Excel 다운로드
  30. 30. Benchmarking: 타 대학과 연구성과 비교 (3/3) • 학과검색: Scopus에서 특정 학과 검색을 통해 논문의 EID를 다운로드 받아서 Publication set 구성하여 비교/분석 • Author ID, ORCID 검색: Scopus에서 특정 학과 교수님들의 Author ID 검색하여 SciVal-Researchers and Groups 통해 반입하여 비교/분석 학과명 검색을 통한 Publication set 구성 1. Scopus-Search-Advanced 2. Affil (“department of medicine, Seoul National University) 3. Year 2013~2017-Limit to-All 선택-CSV Export-SciVal Benchmarking 모듈에서 Publication sets-Import a publication set- 연구자 검색을 통한 Researchers Gropus 구성 1. Scopus-Search-Authors 2. 특정 학과별 교수님 검색하여 Author ID 확인 3. SciVal Benchmarking 모듈-Researchers and Gropus-Add researchers and Gropus-Import Researchers 특정 학과별 비교/분석 할 수 있는 2가지 방법
  31. 31. Collaboration: 연구협력 현황 • 특정분야에서 우리 학교가 미국 내 기관 중 공동 저자 10명 미만의 국제협력을 가장 많이 한 기관 리스트 • 협력 논문 리스트, 피인용 수, FWCI 등 다양한 메트릭스 확인 • 2013~2017년까지 진행한 **학교의 Medicine 분야 연구 협력현황 분석 • 기존 협력을 기반으로 협력을 더 강화하거나 협력이 없던 기관을 대상으로 새로운 협력 기회 탐색하는 전략 고려할 수 있음 • 27개 주제분야 330개 소주제 분야 단위로 협력현황 및 잠재적인 협력기회 탐색할 수 있음 • 특정 협력기관 리스트 클릭하면 상세 정보 확인: 논문, 협력 연구자, 협력하면 좋은 효과를 낼 수 있는 연구자 추천
  32. 32. 연구토픽, 주제분야 동향분석
  33. 33. Trends: 주제분야 연구동향 <Word Cloud> • Trends 모듈-Research area-Add research areas-Advanced research area search- 주제분야 선택 • 해당분야의 논문현황, 인용현황, 연구가 가장 활발한 기관/국가, 연구자, 저널리스트 등 확인
  34. 34. Trends: 특정 연구 키워드 동향분석 <Word Cloud> <상위 5개 기관 / 국가> <논문을 가장 많이 발표한 상위 5명의 저자와 저널> • Trends 모듈-Topics and Topic Clusters-Add Topics and Topic Clusters-Advanced Topics and Topic Clusters search-Topics-특정 Topic 검색 • 해당분야의 논문현황, 인용현황, 연구가 가장 활발한 기관/국가, 연구자, 저널리스트 등 Topic을 활용한 연구동향 파악
  35. 35. Trends: 관심저널의 연구동향 분석 <Word Cloud> 해당 저널에 논문을 가장 많이 발표한 저자 Top 5 • Trends 모듈-Research area-Use entities-Scopus Sources-저널 타이틀 검색 • 특정 저널에 대한 연구경향 분석 • Keyphrase가 녹색이면 성장하는 추세, 파란색이면 감소하는 추세를 나타냄
  36. 36. SciVal is evolving… We continue to invest in the platform, add new metrics, functionality and data types to help meet the reporting requirements of senior management, research administrators, researchers, government & funding agencies.
  37. 37. 김병국 차장 b.kim@elsevier.com Thank You !

×