초록

본 연구의 목적은 연구데이터 서비스 자체의 유용성과 연구데이터에 대한 사용경험 기반의 유용성 측면에서 평가 모형을 개발하는 것이다. 다양한 사례에서 도출한 데이터 서비스의 유용성 평가 요소로부터 연구데이터에 내재된 평가척도인 검색성, 접근성, 상호운용성, 재활용성 4개와 각각의 측정지표 총 20개를 도출하였다. 그리고 Google Analytics, YouTube 광고료 책정 기준, 서울특별시, Altmetrics의 사례를 분석하여 연구데이터에 대한 이용자 경험 기반의 유용성 측정지표 12개를 도출하였다. 평가척도와 측정지표에 대한 타당성과 신뢰성 검정을 위해 연구데이터의 잠재적 이용자 164명을 대상으로 설문조사를 실시하였다. 평가척도의 타당성 검정을 위해 KMO Bartlett 분석을 하였으며, 측정지표의 성분분석을 위해 주성분 분석과 베리맥스 회전분석법을 사용하였다. 내재적 평가척도의 경우 4개 척도 모두 KMO Bartlett의 타당성 값을 충족시켰으며, 평가척도에 대한 측정지표의 성분분석 결과 모두 단일 성분으로 나타나 현재의 척도로 해당 지표에 대한 설명이 가능하였다. 그러나 이용자 경험 기반의 12개 측정지표의 성분분석 결과는 2개 성분으로 나누어지는 것으로 나타나 각각을 활용도와 참여도라는 개념의 2개 평가척도로 구분하였다. Cronbach’s alpha 계수에 의한 신뢰도 측정 결과 6개의 평가척도 모두 0.6 이상의 측정치를 충족시키는 것으로 나타났다.

Abstract

The Purpose of this study is to develop an evaluation model for usability of research data service from the angles of evaluating usefulness of research data service itself and research data use experience-based usability. First, the various cases of evaluating usability of data services are examined and 4 rating scales and 20 measuring indicators for research data service are derived as a result of comparative analysis. In order to verify validity and reliability of the rating scale and the measuring indicators, the study conducted a survey of 164 potential research data users. KMO Bartlett Analysis was performed for validity test, and Principle Component Analysis and Verimax Rotating Method were used for component analysis on measuring indicators. The result shows that the 4 intrinsic rating scales satisfy the validity criteria of KMO Barlett; A single component was determined from component analysis, which verifies the validity of measuring indicators of the current rating scale. However, the result of 12 user experience-based measuring indicators analysis identified 2 components that are each classified as rating scale of utilization level and that of participation level. Cronbach’s alpha of all 6 rating scales was 0.6 or more for the overall scale.

초록

본 연구에서는 도서관의 사회적 가치를 평가할 수 있는 평가지표를 개발하고자 하였으며, 이를 위해 1차적으로 도서관의 가치에 대해 연구한 60여 개의 국내․외 논문들을 총체적으로 분석하여 예비 평가지표를 도출하였다. 도출한 예비 평가지표를 토대로 11명의 전문가를 선정하여 3차에 걸친 델파이조사를 실시하여 최종평가지표를 개발하였다. 최종평가지표는 공공도서관의 사회적 가치를 크게 지역 사회 개발, 지역 사회의 연계, 지역 주민의 삶의 질 향상, 지역 주민의 평등화, 지역 사회에 필요한 정보제공서비스 등의 5가지 평가영역과, 13개 평가항목, 64개 평가지표로 구성된다. 향후에는 이를 기반으로 공공도서관의 사회적 가치를 측정하는 연구가 수행되어야 할 것으로 보인다.

Abstract

The purpose of this research is to develop evaluation indicators for evaluating the social value of libraries and, for this, first of all, preliminary evaluation indicators were derived by analyzing comprehensively about 60 domestic and overseas papers which researched on the value of libraries. On the basis of the derived preliminary evaluation indicators, 11 experts were selected and the final evaluation indicators were developed by conducting Delphi survey three times. The final evaluation indicators are composed of five evaluation areas, which are the divided areas of the social value of libraries, such as the development of local communities, the linkage of local communities, the improvement of local residents’ life quality, the equalization of local residents, and the information services necessary for local communities, 13 evaluation items, and 64 evaluation indicators. In the future, it seems that researches to measure the social value of libraries based on this will have to be conducted.

초록

최근 제안된 완벽주의 지수 PI는 연구자를 유력자와 대량생산자로 구분하는 지표이다. 이 연구에서는 PI를 개량한 새로운 지표인 준완벽주의 지수 NPI를 제안하였다. NPI는 특히 발행시기 등을 고려하지 않고 저인용논문에 무조건 획일적인 기준으로 패널티를 부과하던 PI의 방식을 개선하는 보완 지수이다. NPI에서는 꼬리 보상 영역에 인용빈도 곡선을 고려하면서 패널티를 부과함으로써, h-지수의 향상이 오히려 영향력 지표에 불리하게 작용하는 것을 방지한다. 이렇게 개발된 NPI를 Web of Science 문헌정보학 관련 분야 학술지에 시험 적용해본 결과 h-지수와 평균 인용횟수로는 불가능했던, 유력 학술지와 대량생산 학술지의 구분을 성공적으로 수행할 수 있었다.

Abstract

The Perfectionism Index (PI) is an indicator that is recently proposed to distinguish influential researchers from mass producers. In this study, Near Perfectionism Index (NPI), an improved indicator of Perfectionism Index, can be a solution to the problem of PI that indiscriminately gives a penalty to all low-cited papers regardless of publishing time or other issues. NPI improved the method to give a penalty to tail complement area considering the citation distribution curve. It prevents the improvement of the h-index from adversely affecting the researcher’s influence indicator. This study uses NPI to evaluate information and library science journals in Web of Science database. It successfully distinguishes between influential journals and mass producers unlike journal h-index or average citation frequency which could not differentiate influentials from mass producers.

초록

본 연구는 대학도서관이 교수연구지원을 위해 기여하는 서비스 현황을 파악함으로써 대학도서관이 대학의 교수연구지원을 위해 그들의 정보요구에 부합되는 시스템을 운영하고 있는 가를 알아보며, 대학도서관 웹사이트를 이용한 학술연구정보 시스템 개발의 필요성과 로드맵을 제시하는데 그 목적이 있다. 이를 위해 현재 국내 대학도서관 평가기준에 따라 변화되어 온 대학도서관 발전의 문제점과 이로 인한 대학도서관의 교수연구지원서비스의 한계점에 대하여 조사하였다. 또한 국내외의 12개 대학 도서관의 교수연구지원서비스 활동을 개관하고 분석함으로써 국내 대학도서관의 보다 진취적인 교수연구지원 서비스를 위한 벤치마킹을 모색하고자 하였으며, 서비스 전략의 방향을 제시하고자 하였다. 특히 본 연구에서는 교수 연구지원을 위한 고객관계관리(Customer Relationship Management: CRM) 서비스 전략이라고 할 수 있는 일대일, “mass-personalized services”를 제시함으로써 대학도서관의 “one-stop service execution wheel”을 토대로 한 교수연구지원 서비스의 가능성을 탐색하였다.

Abstract

This research aims to explore faculty research support systems in university libraries, assess their service performance for faculty research, and suggest the need and roadmap for new service development. We perform in-depth analyses of not only the current university library evaluation criteria as part of the overall university evaluation criteria, but also ten university libraries in the United States and two university libraries in Korea. Thorough benchmarking studies reveal the problems of the current university library evaluation criteria in its advances and limitations of current faculty support service systems. Especially this research suggests to develop a one-stop service execution wheel for the roadmap for the faculty research support system which is based on customer relationship management(CRM) for one-to-one, mass- personalized services to the faculty.

초록

h-지수는 개인의 연구성과를 측정하는 지표로 지수의 강건성과 계산의 용이성 등이 인정되면서 이를 보완하는 다양한 변형지수들이 연구되었으며, 이 지수들을 이용하여 연구자 개인의 영향력 평가는 물론, 저널, 학과, 대학, 연구소 등 기관단위 평가를 하려는 시도가 이루어지고 있다. h-지수를 이용한 기관단위의 평가 방법으로는 기관 h-지수, 평균 h-지수, 메타 h-지수 등 세 가지가 있으며, 본 연구에서는 국내 10개 경영대학을 대상으로 h-지수 및 변형지수들의 특징 및 상관관계를 살펴 본 후, 위의 세 가지 방법을 모두 적용하여 각 방법론을 비교 분석하였다.

Abstract

The h-index is a new tool for measuring research outputs based on citation and many variants of h-index have been proposed to improve the weaknesses of h-index. The h-index and its variants can be applied to institutional evaluation in three different ways. We worked out 447 practical cases of professors from 10 business schools and examined h-index and its variants. And then we compared three evaluation methods of research institution based on the h-index and its variants.

초록

이 연구는 지방연구원 소속 전문도서관의 서비스 품질 평가를 통하여 실제 이용자 만족에 영향을 주는 서비스 품질을 파악하고 전문도서관의 기능과 역할을 더욱 효율적으로 개선하기 위한 방향을 제시하고자 하였다. 이를 위해 지방연구원 소속 6개의 전문도서관 이용자 111명을 대상으로 LibQUAL+을 기반으로 수정된 설문조사와 심층인터뷰를 실시하였다. 연구결과, 인력품질이 공간품질과 정보품질 보다 전반적 만족도에 미치는 영향이 더 큰 것으로 확인되었고, 서비스 품질 하위변수 중에서는 인력품질의 서비스 태도, 공간품질의 공간 편의성, 정보품질의 정보 유용성이 이용자의 전반적 만족도에 영향을 미치는 것으로 나타났다. 인터뷰 결과로 자료부족, 디지털 자료의 비활성화, 도서관 공간개념의 환경, 타 기관과의 자료공유 비활성화, 인력부족 등의 문제점이 지적되었다. 이 연구는 이러한 분석 결과를 바탕으로 지방연구원 소속 전문도서관의 서비스 품질에 대한 개선방안을 제시하였다.

Abstract

The purpose of this study is to investigate the quality of service that affects satisfaction of special library users and to suggest ways to improve the function and role of special library. The data were collected by survey and interview method conducted with 111 library users in 6 local research institute using modified questionnaires based on LibQUAL+. The results revealed that human quality factor had more influence on library service satisfaction than space and information quality factor. Also, there were statistically significant influence between library service satisfaction and three sub service factors, such as service attitude, space convenience, and information usability. The interviewers indicated problems of special library service in lack of data, inactivation of digital data, space problem, data sharing problem, and lack of experts. Finally this study proposed several suggestions to improve service quality of special library of local autonomous entity research institution.

초록

교육훈련 평가는 교육프로그램과 관련한 내용을 측정, 관찰하여 품질을 평가하고 이를 통해 교육훈련 변경에 대한 근거를 제공하는 행위이다. 국립중앙도서관은 사서교육 훈련프로그램 교육과정의 성과와 질을 제고할 수 있는 평가방법의 도입이 필요한 시점이다. 이에 본 연구는 국립중앙도서관의 사서교육훈련 직무교육의 효과성을 객관적이고 복합적으로 측정할 수 있는 평가모형을 개발하는 것을 목적으로 하였다. 이를 위해 Kirkpatrick의 4단계 평가모형을 적용하였으며, 선행연구, 국립중앙도서관 사서교육훈련 교육과정 현황조사, 이해관계자 요구분석을 실시하였다. 이를 바탕으로 사서교육훈련 평가체계 방향성을 설정하기 위한 평가체계 및 평가도구를 제시하였다. 본 연구 결과는 실제 국립중앙도서관 사서교육훈련과정의 현실적인 평가체계로 활용될 수 있을 것으로 기대된다.

Abstract

Evaluation of education and training is the act of measuring and observing contents related to an educational program and evaluating its quality; and thereby providing the basis for the changes in the curriculum. The National Library of Korea (NLK) has urgently needed to introduce an evaluation method that can enhance the performance and quality of its continuing education program. Therefore, this study is aimed at developing an evaluation model that can objectively and comprehensively measure the effectiveness of NLK’s job training program for its librarians. To this end, the study applied Kirkpatrick’s 4-Level Training Evaluation Model and conducted review of preceding researches, investigation of NLK’s librarian continuing education program, along with analysis on the stakeholders’ needs. Based on the results, the study suggested evaluation system to establish the directions of the evaluation system. The findings of this study are expected to be used as a practical evaluation system for NLK’s librarian education program.

초록

본 연구는 도서관 내외적인 정보환경과 운영환경의 변화요인을 수용하여 디지털 환경에서 대학도서관 평가지표를 개발하는데 있다. 이러한 연구를 수행하기 위하여 문헌연구와 델파이 조사, 본 조사를 실시하였으며, 본 연구를 통하여 규명된 연구의 주요 결과는 다음과 같다. 첫째, 문헌연구를 통하여 설정한 평가 항목 및 지표의 내용타당도를 검증하기 위한 델파이 조사 결과, 각 평가영역별 평정 값이 3.00이상이고 전체 평균이 4.02이며, 표준편차는 .40～.62 사이에 분포되어 있으므로 델파이 조사결과 평가지표는 타당한 것으로 조사되었다. 둘째, 본 평가지표의 구인타당도를 검증하기 위하여 요인분석을 실시하였다. 그 결과 11개 요인으로 구성된 평가항목의 요인별 누적 변량은 72.733%로서 타당성이 높은 것으로 검증되었다. 셋째, 사서의 특성별로 인지하는 정도의 차이를 검증하기 위하여 유의확률 0.05 수준에서 t-검증과 일원 변량분석을 실시하였다. 이상과 같이 델파이 조사와 본 조사의 결과를 토대로 하여 전체 7개 평가부분 35개 평가항목 92개의 평가지표로 구성된 새로운 평가지표를 개발하였다.

Abstract

This study is to consider varying factors of internal/external informational and operational environments in libraries, and develop a new evaluation indicators for university libraries in digital environments. The main research results are as follows. First, the results through the Delphi method that was to adopted to verify evaluation items and indicators determined by the literature review show that the repressed values for each evaluation category is greater than 3.00, overall average is 4.02. and standard deviation is ranged from 0.40 to 0.62 for each category. This means that the evaluation indicators are valid. Second, the factor analysis was performed to verify the construct validity of evaluation indicators. As a result, the cumulative variance of evaluation indicators consisting of 11 dimensions per factor is 72.733%. In turn, this result shows that the validity of these indicators is very reliable. Third, t-test and one-way ANOVA are performed within significance probability 0.05 in order to verify differences in each librarians point of views for the degree of importance in evaluation indicators. Based on the Delphi study and our own analysis, we developed a new evaluation indicators that consists of 7 evaluation categories, 35 evaluation items, and 92 evaluation indicators.

초록

Abstract

The purpose of this study is to suggest the subject and standards of evaluation on integrated IR interface. For this study, we studied the preceding research about major IR interface models. We took the survey for interface elements which were verified by experts. These interface elements are divided twe viewpoints. One is the cognitive viewpoints which are the page design, content design, site design, output form, usability and aesthelic facet. The other is the objective viewpoints which are page design, dontent design, site design, output for and usability. We found that these evaluation elements have a crediblilty. [ 더 많은 내용 보기 ]

초록

본 연구는 2007년 고안된 병영도서관 평가지표의 개발과정을 고찰하고, 이를 2008년 84개 병영도서관에 적용한 결과 분석을 통해 보다 합리적으로 활용 가능한 평가지표로 수정하는 방안을 모색하였다. 이에 따라 병영도서관 서면평가결과와 10개 기관의 실사결과를 종합하여 나타난 문제점 분석을 통해 계획, 재정, 서비스, 장서관리 등 8개 영역 28개 지표와 지표별 평가 척도 일부를 수정․보완하였다. 또한, 정확하고 객관적인 평가를 위해 군별 특성이 다른 해군과 공군의 병영도서관을 육군 병영도서관과 분리하여 그룹핑할 것과, 보다 완전한 평가를 위하여 병영도서관 실태 조사 표준안을 만들어 군별로 전수조사가 이루어져야 한다는 것을 제안하였다.

Abstract

This study considered the developing course on evaluation indicators of military library which published in 2007, and applied them to 84 military libraries in 2008. By analyzing the results from applying, this study also tried to find more effective evaluation indicators which are available properly. Through the output analysis of documental evaluation and actual inspection, which performed by ten organizations, on military library, revised and completed 28 indexes of 8 classes ­ plan, finance, service, collection management etc. and some of their evaluation scales. For accurate, objective evaluation, it is suggested that the navy and the air force libraries which have different military traits have needs for grouping separately from the army libraries, and also proposed to make standard of research on the actual condition for military libraries that can be used in each military line.