DOI QR코드

DOI QR Code

Evaluation of Scholarly Information System in STEM

STEM 학술정보시스템 평가

  • 박민수 (강남대학교 데이터사이언스전공)
  • Received : 2022.08.30
  • Accepted : 2022.09.09
  • Published : 2022.09.30

Abstract

The fields of STEM (Science, Technology, Engineering and Medicine) are changing rapidly. Recently, with the remarkable development of Internet and Web technologies, an environment that can be accessed worldwide has been created, thereby lowering the barriers to share STEM knowledge and information. The purpose of this study is to derive improvements by evaluating users' satisfaction with the information system developed by applying the open access model in the STEM field. Through an online survey using a structured questionnaire, a total of 204 users participated from January to February. The collected data were analyzed using quantitative statistical techniques. IPA (Importance Performance Analysis) technique was used. By identifying the importance and satisfaction (performance) between variables, areas with relatively low satisfaction compared to importance were derived. Users' overall satisfaction with the open access information system was 81.2 points and social reliability was 85.9 points, which were relatively high, respectively. What should be paid attention to in this study is the satisfaction with the system use environment, which is the most vulnerable area.

과학기술 분야(STEM, Science, Technology, Engineering and Medicine)는 빠르게 변화하고 있다. 최근에는, 인터넷 및 웹 기술의 눈부신 발전과 함께, 전 세계적으로 접근할 수 있는 환경이 조성되어 STEM 지식 공유의 장벽이 낮아지고 있다. 이러한 정보 기술의 발전은 결과적으로 학술지의 출판(보급) 모델을 변화시켰다. 본 연구의 목적은STEM 분야에서 오픈 액세스 모델을 적용시켜 개발한 정보시스템에 대한 이용자들의 만족도를 평가하여 개선사항을 도출하는 데에 있다. 구조화된 설문지를 활용한 온라인 조사를 통하여, 지난 1월부터 2월까지, 총 204명의 이용자가 참여하였다. 수집한 데이터는 정량적 통계기법을 이용하여 분석하였다. 웹사이트 속성 별 특성을 분석하기 위하여 IPA (Importance Performance Analysis)기법을 활용하였다. 변수들 간 중요도와 만족도(실행도)를 파악하여 중요도 대비 만족도가 상대적으로 낮은 영역들을 도출하였다. 오픈액세스 정보시스템에 대한 이용자들의 전반적인 만족도는 81.2점, 사회적 신뢰도는 85.9점으로 각각 비교적 높게 나왔다. 본 연구에서 주목해야 하는 사항은 가장 취약한 영역으로 드러난 시스템 이용 환경에 대한 만족도 부분이다. 최적화된 상업적 검색도구들에 노출되어 있는 이용자들에게 검색하는 과정에서 속도는 매우 중요한 검색시스템 평가 요인 가운데 하나이다. 이용자들의 니즈를 반영하여 신속하게 검색결과로 제공할 수 있도록 지속적인 평가를 통한 개선 작업이 필요하다.

Keywords

References

  1. M. Park and T. Seo, "Creating a national open access journal system: the Korean journal publisher service," Vol. 48, No. 1 pp. 53-67.
  2. M. Park, "Multi-dimensional analysis of dynamic human-information interaction," Information Research, Vol. 18, No. 1, Paper 566, 2013.
  3. M. Park, "Human multiple information task behavior on the Web," Aslib Journal of Information Management, Vol. 67, No. 2, pp. 118-135, 2015. https://doi.org/10.1108/AJIM-12-2013-0154
  4. M. Park, "Cognitive factors in adaptive information access," International J ournal of Advanced Culture Technology, Vol. 6, No. 4, pp. 309-316, 2018.
  5. P. J. Agerfalk, J. Sjostrom, E. Eliasson, S. cronholm, and G. Goldkuhl, "Setting the scene for actability evaluation: understanding information systems in context," in Proceedings of ECITE Conference, 2002.
  6. H. Beyer and K. Holtzblatt, Contextual design: defining customer-centered systems, San Diego: Academic Press, 1998.
  7. S. Cronholm and G. Goldkuhl, "Actable information systems - quality ideals put into practice," in Proceedings of the Eleventh Conference on Information Systems, 12-14 September, 2002.
  8. M. Park, "User participation evaluation of a scholarly information site," Journal of the Korean Society for Information Management, Vol. 28, No. 4. pp. 85-97, 2011. https://doi.org/10.3743/KOSIM.2011.28.4.085
  9. M. Park, "Usability of the national science and technology information system," Journal of the Korean Biblia Society for Library and Information Science, Vol. 22, No. 4, pp. 5-19, 2011. https://doi.org/10.14699/kbiblia.2011.22.4.005
  10. M. Park and T. Lee, "Understanding science and technology information users through transaction log analysis," Library Hi Tech, Vol. 31, No. 1, pp. 123-140, 2013. https://doi.org/10.1108/07378831311303976
  11. M. Park and T. Lee, "A longitudinal study of information needs and search behaviors in science and technology: A query analysis, Electronic Library, Vol. 34, No. 1, pp. 83-98, 2016. https://doi.org/10.1108/EL-04-2014-0058