바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

검색어: researcher evaluation, 검색결과: 96
41
최광남(한국과학기술정보연구원) ; 조현양(경기대학교) ; 안세필(Kins,Inc) 2002, Vol.19, No.4, pp.77-94 https://doi.org/10.3743/KOSIM.2002.19.4.077
초록보기
초록

본 연구에서는 한국과학기술정보연구원에서 구축중인 한국과학기술인용색인을 바탕으로 국내 주요 과학기술계 학술지에 수록된 연구 논문을 중심으로 연구자들의 인용현황을 분석하였다. 또한 기계공학 분야를 실험 대상으로 선정하여 현재 SCI의 기계공학 분야의 인용 순위와 비교한 결과 SCI의 JCR과는 실질적인 차이가 있음을 발견하였다. 본 연구는 국내 연구자에게 분야별 필수적인 연구 정보원의 제공과 국내 기관별, 분야별 과학기술 수준을 파악하고 평가하기 위한 도구로서 활용이 가능한 한국인용색인데이터베이스의 효율적인 구축방안 및 서비스모델을 제안한다.

Abstract

In this study we analyze the present situation of cited and citing references among researchers, based on Korean Science Citation Index developed by Korea Institute of Science & Technology Information. There are some differences on the rank of frequently cited journals between JCR of ISI and KSCI, especially in the field of mechanical engineering. The purpose of this study is to find an efficient way of constructing KSCI database and to propose a service model which can be available as a tool to evaluate research activities and to provide researcher with basic information resources.

42
이종욱(한국과학기술정보연구원) ; Yang, Kiduk(경북대학교) 2011, Vol.28, No.4, pp.119-140 https://doi.org/10.3743/KOSIM.2011.28.4.119
초록보기
초록

교수연구업적을 보다 효과적으로 평가하기 위해서는 연구의 정량 및 정성적 측면을 고려하여야 한다. 본 연구에서는 연구의 양적 측면을 보여주는 논문 수와 질적 측면을 반영하는 피인용 수에 의한 국내 문헌정보학과 교수의 연구업적 평가순위를 국내 대학에서 사용되는 연구업적 평가규정을 적용한 순위와 비교․분석하였다. 연구결과, 논문 수에 의한 교수별 순위가 피인용 수에 의한 순위와 차이가 있으며, 대학별 교수 업적평가는 피인용 수보다는 논문 수에 의한 평가와 가까운 것으로 나타났다. 또한 대학별 상이한 논문 배점기준은 교수업적평가 결과에 별다른 영향을 끼치지 않았다. 향후 연구에서는 연구의 양적 및 질적 수준을 보다 잘 반영하는 계량서지학적 지표에 관한 연구가 진행되어야 할 것으로 본다.

Abstract

Effective assessment of faculty research performance should involve considerations of both quality and quantity of faculty research. This study analyzed methods for evaluating faculty research output by comparing the rankings of Library and Information Science(LIS) faculty by publication counts, citation counts, and research performance assessment guidelines employed by Korean universities. The study results indicated that faculty rankings based on publication counts to be significantly different from those based on citation counts. Additionally, faculty rankings measured by university guidelines showed bigger correlations with rankings based on publication counts than rankings by citation counts, while differences in universities guidelines did not significantly affect the faculty rankings. The study findings suggest the need for bibliometric indicators that reflect the quality as well as the quantity of research output.

43
이두영(중앙대학교) ; 김희전(가톨릭대학교) 2003, Vol.20, No.2, pp.73-91 https://doi.org/10.3743/KOSIM.2003.20.2.073
초록보기
초록

1970년대 후반 북유럽을 중심으로 제조업 부문에서 시작된 서비스 품질 연구는 기업이 그들이 제공하는 서비스에 대하여 보다 많은 관심을 기울이게 되면서 활발해지게 되었다. 이러한 상황은 도서관도 예외는 아니어서 도서관의 경쟁력을 높이고 이용자들에게 보다 높은 수준의 서비스를 제공하기 위한 방면의 모색이 어느 때보다 절실하게 요구되고 있는 현실이다. 본 연구는 서비스 마케팅 분야의 대표적인 서비스 품질 평가 방법인 SERVQUAL과 SERVPERF를 적용하여 도서관의 서비스 품질을 평가하고 SERVQUAL과 SERVPERF중 어떠한 방법이 도서관 서비스 평가에 적합한 지를 평가하였다. 또한 서비스 품질과 이용자 민족간의 관계를 고찰하였다.

Abstract

Research papaers on the service quality, which began with the manufacturing industry in many Northern Europe at the end of 1970, have been found since the companies became much concerned about the level of services they offered. Libraries can not be an exception to this situation. It is absolutely necessary to find a way to develop a competitive strategy to offer a high level of services to those who use libraries. The purpose of study to evaluate the quality of library services by applying "SERVQUAL" and "SERVPERF" of evaluating service quality and to determine which of these 2 methods is better in terms of measuring library services. The study also investigated the relationship between the service quality and user satisfaction.

44
한유경(정보통신정책연구원) ; 최원석(정보통신정책연구원) ; 이민철(카카오엔터프라이즈) 2023, Vol.40, No.2, pp.115-135 https://doi.org/10.3743/KOSIM.2023.40.2.115
초록보기
초록

본 연구는 단행본, 학술지, 보고서 등 다양한 종류의 발간물로 구성된 연구보고서의 참고문헌 데이터베이스를 효율적으로 구축하기 위한 것으로 딥러닝 언어 모델을 이용하여 참고문헌의 자동추출 성능을 비교 분석하고자 한다. 연구보고서는 학술지와는 다르게 기관마다 양식이 상이하여 참고문헌 자동추출에 어려움이 있다. 본 연구에서는 참고문헌 자동추출에 널리 사용되는 연구인 메타데이터 추출과 더불어 참고문헌과 참고문헌이 아닌 문구가 섞여 있는 환경에서 참고문헌만을 분리해내는 원문 분리 연구를 통해 이 문제를 해결하였다. 자동 추출 모델을 구축하기 위해 특정 연구기관의 연구보고서 내 참고문헌셋, 학술지 유형의 참고문헌셋, 학술지 참고문헌과 비참고문헌 문구를 병합한 데이터셋을 구성했고, 딥러닝 언어 모델인 RoBERTa+CRF와 ChatGPT를 학습시켜 메타데이터 추출과 자료유형 구분 및 원문 분리 성능을 측정하였다. 그 결과 F1-score 기준 메타데이터 추출 최대 95.41%, 자료유형 구분 및 원문 분리 최대 98.91% 성능을 달성하는 등 유의미한 결과를 얻었다. 이를 통해 비참고문헌 문구가 포함된 연구보고서의 참고문헌 추출에 대한 딥러닝 언어 모델과 데이터셋 유형별 참고문헌 구축 방향을 제안하였다.

Abstract

The purpose of this study is to assess the effectiveness of using deep learning language models to extract references automatically and create a reference database for research reports in an efficient manner. Unlike academic journals, research reports present difficulties in automatically extracting references due to variations in formatting across institutions. In this study, we addressed this issue by introducing the task of separating references from non-reference phrases, in addition to the commonly used metadata extraction task for reference extraction. The study employed datasets that included various types of references, such as those from research reports of a particular institution, academic journals, and a combination of academic journal references and non-reference texts. Two deep learning language models, namely RoBERTa+CRF and ChatGPT, were compared to evaluate their performance in automatic extraction. They were used to extract metadata, categorize data types, and separate original text. The research findings showed that the deep learning language models were highly effective, achieving maximum F1-scores of 95.41% for metadata extraction and 98.91% for categorization of data types and separation of the original text. These results provide valuable insights into the use of deep learning language models and different types of datasets for constructing reference databases for research reports including both reference and non-reference texts.

초록보기
초록

국내 학술연구의 동향을 구체적으로 파악하여 연구개발 활동의 체계적인 지원 및 평가는 물론 현재와 미래의 연구 방향을 설정할 수 있는 기초 데이터로서, 개별 학술지 논문에 표준화된 주제 범주(통제키워드)를 부여할 수 있는 효율적인 방안을 모색하였다. 이를 위해 한국연구재단 「학술연구분야분류표」 상의 분류 범주를 국내 학술지 논문에 자동 할당하는 과정에서, 자질선정 기법을 중심으로 자동분류의 성능에 영향을 미치는 주요 요소들에 대한 다각적인 실험을 수행하였다. 그 결과, 실제 환경의 불균형 데이터세트(imbalanced dataset)인 국내 학술지 논문의 자동분류에서는 보다 단순한 분류기와 자질선정 기법, 그리고 비교적 소규모의 학습집합을 사용하여 상당히 좋은 수준의 성능을 기대할 수 있는 것으로 나타났다.

Abstract

As basic data that can systematically support and evaluate R&D activities as well as set current and future research directions by grasping specific trends in domestic academic research, I sought efficient ways to assign standardized subject categories (control keywords) to individual journal papers. To this end, I conducted various experiments on major factors affecting the performance of automatic classification, focusing on feature selection techniques, for the purpose of automatically allocating the classification categories on the National Research Foundation of Korea’s Academic Research Classification Scheme to domestic journal papers. As a result, the automatic classification of domestic journal papers, which are imbalanced datasets of the real environment, showed that a fairly good level of performance can be expected using more simple classifiers, feature selection techniques, and relatively small training sets.

초록보기
초록

대학도서관은 급변하는 정보통신기술과 대학환경에 대응하기 위해 그동안 도서관의 신축 및 리노베이션을 통한 공간구성의 변화를 시도해왔다. 이러한 변화는 대학도서관의 전통적 기능인 자료 보존 및 제공 그리고 대학교 구성원의 학습에 필요한 공간과 서비스를 제공하는 지원자(supporter)의 기능을 넘어서, 공간구성의 변화를 통해 학습과 연구를 지속할 수 있게 하는 조력자(facilitator)의 기능으로의 전환에 대한 필요성이 반영된 것으로 해석될 수 있다. 하지만 대학도서관 공간 기능의 변화와는 달리 이에 대한 평가는 여전히 리노베이션이나 신축 전후의 도서관 이용자의 만족도 혹은 도서관 이용의 변화에 국한되고 있어서, 대학의 비전과 목표를 반영한 도서관의 학습커먼즈(learning commons)로서의 기능을 평가하는 측정도구 개발의 필요성이 대두되고 있다. 이에 본 연구는 대학도서관 공간구성에 대한 변천과정을 분석하고 이에 대한 평가와 관련된 연구조사를 통해 대학도서관의 공간구성에 대한 효과성을 평가하는 도구의 개발과 미래의 공간구성 및 평가 전략을 위한 기초 자료를 제공하고자 하였다.

Abstract

University libraries have been attempting to reorganize their space through new building construction and remodeling to cope with the rapid changes in information and communication technologies and university environment. These changes seem to reflect the need for the shift of the university library functions toward the facilitator role of enabling continuous learning and research through space reorganization beyond the traditional supporter role of preserving and supplying library materials and providing learning space and services to university members. Despite all these changes of university library space functions, however, their assessment has been still limited to the library users’ satisfaction and usage changes before and after library building renovation or new construction, calling for the need to develop proper measurement tools for evaluating the library functions as learning commons that reflect university vision and goals. Therefore, this study intends to analyze the trend of space reorganization practices in university libraries and the studies of evaluating its effect, in order to develop tools to evaluate the effectiveness of space reorganization and to provide basic data for future space reorganization and assessment strategies.

초록보기
초록

본 연구는 고도화된 웹 서비스와 스마트 기기의 확산으로 인해 변화된 시스템 환경 속에서 클라우드 서비스에 대한 선호도와 이용의도에 영향을 미치는 데이터 안정성, 네트워크 반응속도, 그리고 시스템 접근성을 중심으로 정보센터의 이용도 향상에 대한 방향 설정을 위해 인지된 유용성, 인지된 이용 용이성을 중심으로 이용자의 이용의도와의 관계를 살펴보았다. 본 연구가설의 검증을 위해 태블릿PC, 스마트폰과 같은 모바일기기를 많이 이용하거나 관심이 높은 20대에서 30대 연령층의 114명으로 부터 설문을 받아 활용하였다. 클라우드 서비스 선호도에 대한 이용자의 인지된 유용성과 인지된 이용용이성에 영향을 미칠 수 있는 정보센터의 시스템 품질특성과 관련된 요인들과의 관계를 살펴봄으로써 최근의 클라우드 서비스를 위해 새롭게 고려되어야 할 정보센터의 시스템 품질특성에 대해 이용자 이용의도 관점에서 논의하였다.

Abstract

The purpose of this study is to identify the new roles and services of information center that is affected by changing information technology so called cloud computing service. Using Information Technology acceptance model, hypotheses were developed to find relationships among intention to use of a cloud service, perceived usefulness, perceived easy of use and three system quality evaluation factors such as data safety, network response time, and system accessibility. The hypotheses have been tested with 114 user surveys. This study presents the relationship between certain attitude and intention to use variables and system accessibility applying clouding service. The result of this research gives an insight of the evaluation and a guideline for the implementation of cloud computing services in information centers.

초록보기
초록

기업이나 연구소 등에서 운영하는 전문도서관의 경제적 가치 평가에 대한 필요성이 제기됨에 따라 본 연구는 전문도서관 주요 서비스의 가치평가에 대한 새로운 접근방법을 제시하였다. 선행연구의 이론과 보편타당성과 적용가능성을 기준으로 삼았다. 서비스에 어떤 유형의 자원(물적 자원 또는 인적 자원)이 사용되었는지에 따라 측정요소와 방법론을 달리 적용하였으며, 이를 토대로 전문도서관 주요 서비스의 가치평가를 위한 산출식을 제시하였다. 전문도서관 서비스의 경제적 가치평가를 위한 분석모형 개발은 서비스의 가치에 대한 객관적 입증이 가능해져서 전문도서관의 진정한 가치를 알릴 수 있는 계기가 될 수 있을 것으로 사료된다.

Abstract

This study aims to suggest a new approach to economic valuation of the special library, in response to the necessity of economic justification of the special library operated by firms and research institutes. Benefit measurement elements and analysis methods to be used in the studywere derived through feasibility evaluation on models in previous studies, and objectivity and applicability were the criteria for feasibility evaluation. Depending on which type of resources are used in providing service, different benefit measurement elements and methods were applied. Based on this, calculation formula for service valuation of special library was presented. The development of analysis model for economic valuation of special library made it possible to objectively prove the value of the special library, and is considered to provide an opportunity to publicize the real value of the special library.

49
심원식(성균관대학교) ; 이은철(성균관대학교) 2013, Vol.30, No.2, pp.245-268 https://doi.org/10.3743/KOSIM.2013.30.2.245
초록보기
초록

본 연구는 마케팅 분야에서 개발된 서비스 품질 모형인 SERVQUAL을 도서관의 실정에 맞게 적용한 ARL(Assoication of Research Libraries) LibQUAL+ 평가 프로그램에 국내 대학도서관 한 곳이 공식 참여한 과정과 결과를 제시하고 있다. LibQUAL+ 시행을 위해 영문으로 된 설문지의 번역, 설문 대상자 표본 선정, 설문 버전의 선택 등을 포함한 절차를 설명하고 있다. 또한 설문의 시행 결과로 입수되는 설문 데이터에 대한 설명 및 응답과 관련된 제반 사항에 대한 검토 결과를 제시한다. 마지막으로 설문 데이터를 통해 이용자 집단간, 타기관과의 다양한 비교 전략을 제시하고 있다. LibQUAL+ 프로그램은 단순한 설문도구가 아닌 총체적인 도서관 서비스 품질 평가 시스템이다. LibQUAL+ 프로그램에 참여함으로써 보다 체계적이고 국제화된 평가를 시행할 수 있을 것이다. 설문도구로서 LibQUAL+에 대한 비판에도 불구하고 LibQUAL+ 프로그램에 참여함으로써 국내 대학도서관은 새로운 평가 및 서비스 개선 노력을 경주할 수 있을 것으로 기대된다. 도입과 관련해서는 개별적인 참여 대신 다수의 도서관이 컨소시엄을 구성해서 참여하는 것이 바람직하다. 이들 도서관을 중심으로 학습공동체를 구성해서 워크샵, 사례발표 등을 통해 한 단계 높아진 평가 활동을 할 수 있다.

Abstract

The paper describes a case study in which Sungkyunkwan University Library participated in the official ARL(Assoication of Research Libraries) LibQUAL+ evaluation program. LibQUAL+ model is based on the SERVQUAL service quality evaluation model originally developed in the marketing area. It details a number of processes including translation of the LibQUAL+ survey instrument into Korean, selection of study sample and choice of survey versions. In addition, it offers a number of strategies that can be adopted in order to analyze the survey data for various comparisons among different user groups and institutions. LibQUAL+ is more that a survey instrument; it a holistic system for assessing library service quality. Despite criticisms on LibQUAL+, we expect that university libraries in Korean will benefit from participating in the program. It is preferable that a group of libraries form a consortium to participate in the LibQUAL+ program as opposed to individual participation. The consortium can function as a learning community through various workshops and sharing activities, thus elevate the overall evalution efforts in Korean libraries to a higher level.

초록보기
초록

본 연구는 대학생들이 학습에서 선호하는 정보활용매체를 평가하였다. 즉, 강의를 위한 효율적인 학습방법이 무엇인가를 분석한 것이다. 연구목적을 달성하기 위하여 정보매체와 관련된 이론적 검토와 관련 선행연구를 하였다. 다양한 정보매체를 이용하는 강의를 기준으로 학생들에게 가장 이해도가 높은 학습방법을 분석하였다. 자료수집은 부산시내의 대학생 82명을 대상으로 하였고, 수집된 자료분석을 위하여 명목척도와 등간척도를 이용하였다. 본 연구결과, 첫째, “PPT”를 학습방법을 선호하는 학생들이 IT 및 컴퓨터 활용능력수준에 대한 이해도가 높았다. 둘째, “PPT”학습방법을 “WRT”보다 더 선호하는 것으로 나타났다. 셋째, “PPT”집단이 “WRT”집단에 비해 보다 학습효과에서 효과적인 것으로 나타났다. 마지막으로 두집단 모두 전체평균값은 3.08과 2.95로 수업집중도에는 큰 차이는 보이지 않았다. 그러나 본 연구는 면담에 의한 자료수집이 갖는 한계를 안고 있다. 향후 각 매체에 의한 학습효율성 연구와 정보매체에 의한 다양한 집단간 비교연구가 필요할 것이다.

Abstract

This research evaluated Information Application Mechanism based on university student's preference. In other words, the research content is analyzing what is the most effective learning method for lectures. To obtain this research objective I've done some research in theoretical research and pervious research related to informational mechanism. I also analyzed the degree of understanding in learning-efficiency with students based on lectures using various information mechanisms. For the data gathering I've surveyed 82 students living in Busan, and used the survey sheets to gather data, I made the survey sheet with nominal and interval parts to make the analyzement of data easier. The research result is down below. First, It shows that the students with higher understanding in IT preferred lectures with “PPT”s. Second, The “PPT” preference group thought that the “PPT” teaching method is more effective than other methods. Third, The “WRT” preference group thought that the “WRT” teaching method is more effective than other methods. Forth, Both groups gave each method a 3.08 and 2.95 as a total mean value out on a 1-5 scale showing not much difference. However this research has a research limitation like other researches. In other words, there can be some distortion of information when using the interview method to gather data. The researches from now on will need to organize groups by information mechanisms and research the learning-efficiency with each mechanism.

정보관리학회지