바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

검색어: 성과평가, 검색결과: 22
11
이재윤(명지대학교) 2016, Vol.33, No.3, pp.7-29 https://doi.org/10.3743/KOSIM.2016.33.3.007
초록보기
초록

연구자 성과 평가를 위해 널리 사용되는 h-지수는 일관성 부족 문제와 공저자 수를 고려하지 않는다는 문제를 가지고 있다. 이를 극복하기 위해 h-지수와 g-지수, 그리고 공저 보정 방안을 검토하고 2004년부터 2013년 사이의 실제 KCI 데이터를 대상으로 분석해본 결과는 다음과 같다. 첫째, 일관성 결여 문제를 해소하기 위해서는 g-지수를 사용하는 것이 더 바람직하다고 판단된다. 둘째, 연구 성과의 양적인 측면과 질적인 측면을 한꺼번에 반영하는 복합 지수라는 h-지수와 g-지수의 고유한 특성을 유지하기 위해서는 반드시 공저를 보정하여 지수를 측정해야 한다. 셋째, 공저자 수로 나눈 인용빈도를 사용하는 hC-지수와 gC-지수를 적용하면 단독 저술 비중이 높은 인문학 분야 연구자도 공정하게 평가할 수 있고, 특정 분야나 특정 기관에 속한 연구자가 상위 순위를 과점하는 현상을 방지할 수 있다.

Abstract

The h-index is a popular bibliometric indicator for evaluating individual researchers. However, it has been criticized for its inconsistency with reflecting increased number of citations and disregarding the number of co-authors in a paper. In order to overcome these problems, we examined the g-index and other Hirsch-type indices considering the number of co-authors. Test data collection was extracted from Korean Citation Index database published from 2004 to 2013. The results of this study are as follows: First, g-index is more reliable indicator than h-index with consistency. Second, number of co-authors must be considered to maintain the h-index as an complex indicator applying the quality and the quantity of research performance. Finally, hc-index and gc-index, with fractionalised counting of the papers, can fairly measure the research performance of humanities researchers, and successfully prevent specific disciplines or institutions occupying majority of top rankings.

12
박지연(이화여자대학교) ; 김정은(대외경제정책연구원) ; 민윤경(포스코경영연구소) 2010, Vol.27, No.1, pp.249-267 https://doi.org/10.3743/KOSIM.2010.27.1.249
초록보기
초록

h-지수는 개인의 연구성과를 측정하는 지표로 지수의 강건성과 계산의 용이성 등이 인정되면서 이를 보완하는 다양한 변형지수들이 연구되었으며, 이 지수들을 이용하여 연구자 개인의 영향력 평가는 물론, 저널, 학과, 대학, 연구소 등 기관단위 평가를 하려는 시도가 이루어지고 있다. h-지수를 이용한 기관단위의 평가 방법으로는 기관 h-지수, 평균 h-지수, 메타 h-지수 등 세 가지가 있으며, 본 연구에서는 국내 10개 경영대학을 대상으로 h-지수 및 변형지수들의 특징 및 상관관계를 살펴 본 후, 위의 세 가지 방법을 모두 적용하여 각 방법론을 비교 분석하였다.

Abstract

The h-index is a new tool for measuring research outputs based on citation and many variants of h-index have been proposed to improve the weaknesses of h-index. The h-index and its variants can be applied to institutional evaluation in three different ways. We worked out 447 practical cases of professors from 10 business schools and examined h-index and its variants. And then we compared three evaluation methods of research institution based on the h-index and its variants.

초록보기
초록

본 연구에서는 선행연구의 연구 성과에 기초하여 웹정보의 신뢰성 평가에 영향을 미치는 요인들을 포괄적으로 추출한 다음, 이를 전문가를 대상으로 한 지표적합도 조사를 통해 웹 사이트의 신뢰성 평가지표의 개발을 시도하였다. 선행 연구에서 제시된 국외 54개, 국내 49개의 웹 신뢰성 평가요인을 부분적으로 축소하거나 통합하였으며, 아울러 웹 사이트의 신뢰성을 높이거나 떨어뜨리는 요인을 일부 분석에 추가한 다음, 웹정보 신뢰성 평가지표 적합성 조사를 통해 웹정보 신뢰성 평가지표를 선정하고 계층화하였다. 이러한 과정을 통해 웹 신뢰성 평가에 영향을 미치는 1차 지표로서 웹사이트 신뢰성의 평가영역을 진실성 요인과 전문성 요인, 그리고 안전성 요인으로 나누었으며, 2차 지표로 진실성 요인을 믿음성과 명성으로, 전문성 요인을 유용성과 시의성, 그리고 경쟁력으로, 안전성 요인을 보안성과 안정성으로 나누었으며, 최종적으로 각 하위 요인별 네 개씩 모두 28개의 세부 요인을 추출하였다. 이렇게 개발된 평가지표를 소수의 전문가들을 대상으로 자기 분야의 웹 사이트를 중심으로 한 지표 적합도 조사를 통한 검증과정을 거쳤다.

Abstract

The Internet is now an integral part of the everyday lives of a majority of people. Web users are demanding web sites that offer credible information. This study tired to comprehensively extract the factors that affect the perception web credibility based on preceding researches and develop of indicators for evaluating the web credibility by goodness-fit analysis. I modified more than 100 factors which presented by preceding researches to 28 factors, and allocated these factors into the hierarchical categories like followings; trustworthiness, expertness, safety are categorized as first level factors, trustfulness and reputation are placed to sub-factors of trustworthiness, usefulness, timeliness and competency to sub-factors of expertness, security and reliability to sub-factors of safety as second level factors. Finally this study developed evaluating indicators for web credibility by goodness-of fit analysis.

14
박옥남(상명대학교) ; 김신영(경일대학교) ; 장경원(경기대학교) ; 차성종(숭의여자대학교) 2017, Vol.34, No.4, pp.173-199 https://doi.org/10.3743/KOSIM.2017.34.4.173
초록보기
초록

교육훈련 평가는 교육프로그램과 관련한 내용을 측정, 관찰하여 품질을 평가하고 이를 통해 교육훈련 변경에 대한 근거를 제공하는 행위이다. 국립중앙도서관은 사서교육 훈련프로그램 교육과정의 성과와 질을 제고할 수 있는 평가방법의 도입이 필요한 시점이다. 이에 본 연구는 국립중앙도서관의 사서교육훈련 직무교육의 효과성을 객관적이고 복합적으로 측정할 수 있는 평가모형을 개발하는 것을 목적으로 하였다. 이를 위해 Kirkpatrick의 4단계 평가모형을 적용하였으며, 선행연구, 국립중앙도서관 사서교육훈련 교육과정 현황조사, 이해관계자 요구분석을 실시하였다. 이를 바탕으로 사서교육훈련 평가체계 방향성을 설정하기 위한 평가체계 및 평가도구를 제시하였다. 본 연구 결과는 실제 국립중앙도서관 사서교육훈련과정의 현실적인 평가체계로 활용될 수 있을 것으로 기대된다.

Abstract

Evaluation of education and training is the act of measuring and observing contents related to an educational program and evaluating its quality; and thereby providing the basis for the changes in the curriculum. The National Library of Korea (NLK) has urgently needed to introduce an evaluation method that can enhance the performance and quality of its continuing education program. Therefore, this study is aimed at developing an evaluation model that can objectively and comprehensively measure the effectiveness of NLK’s job training program for its librarians. To this end, the study applied Kirkpatrick’s 4-Level Training Evaluation Model and conducted review of preceding researches, investigation of NLK’s librarian continuing education program, along with analysis on the stakeholders’ needs. Based on the results, the study suggested evaluation system to establish the directions of the evaluation system. The findings of this study are expected to be used as a practical evaluation system for NLK’s librarian education program.

초록보기
초록

본 연구에서는 공기업의 지식관리 영향요인, 지식관리 활동과 그 성과 간의 구조적 관계를 파악하고자 하였다. 이를 위해 본 연구는 정부기관 중 지식관리를 최초로 도입한 기관이자 공공부문 지식관리의 선도기관으로 평가받고 있는 한국철도공사 직원들을 대상으로 한 설문조사를 통해 실증분석을 시도하였다. 가설검증 결과, 지식관리 영향요인으로는 학습지향문화와 지식품질, KMS 품질 등이 지식창출 및 공유 활동 모두에 유의미한 영향요인으로 검증되었으며, 개인태도는 지식창출 활동에만 유의미한 영향을 미치는 것으로 나타났다. 또한 지식창출은 지식공유 활동에 유의미한 영향을 미치는 것으로 나타났으며, 지식창출과 지식공유 모두 성과에 유의미한 영향을 미치는 것으로 나타났다. 이러한 분석결과를 토대로 본 연구에서는 지식창출 및 공유 활성화 방안을 제시하였다.

Abstract

The purpose of this study is to examine the causal relationships among knowledge management(KM) influence factors(leadership, learning culture, member' attitude, reward, knowledge quality, KMS quality), KM activities(knowledge creation, knowledge sharing), KM performance in public enterprise. The results of data analysis by structured equation model(SEM) indicate that learning culture, knowledge quality and KMS quality significantly influence the knowledge creation and sharing. Member' attitude has significant influences on the knowledge creation. And knowledge creation and sharing have a significant affect on KM performance. Based on the results, the potential implications of the strategy for effective knowledge management are discussed.

초록보기
초록

조직 내 지식공유 및 지식활용의 주체는 조직구성원 개인이라는 점에서 지식관리전략을 논할 때, 인적자원관리와 지식관리의 관계성 논의는 매우 절실하다. 본 연구에서는 지방정부를 대상으로, 인적자원관리의 세부영역인 교육훈련, 의사결정에의 참여, 성과평가 및 보상제도와 지식공유 및 지식활용과의 영향관계를 분석하였다. 분석결과 교육훈련, 평가 및 보상제도가 중요한 요인으로 나타났으며, 이러한 연구결과를 토대로 정부조직의 지식공유와 활용에 있어서의 정책적 시사점을 논의하고 있다.

Abstract

Main drivers of knowledge activities such as knowledge sharing and utilization are individual members of an organization and thus knowledge management strategies should be discussed in relationships with human resource management. This study analyzes the effects on knowledge sharing and knowledge utilization of human resource management practices such as training, participation in decision-making, performance appraisal and compensation system in local government. The results show that training and performance appraisal and compensation system are significantly influential factors for the knowledge sharing and knowledge utilization. Lessons and implications of this study for management leadership are presented.

17
정혜경(KDI국제정책대학원대학교) ; 정은주(KDI 국제정책대학원) 2006, Vol.23, No.1, pp.121-138 https://doi.org/10.3743/KOSIM.2006.23.1.121
초록보기
초록

본 연구는 학술지 평가를 위한 경제성 분석 모형을 도출하였으며, 이를 이용한 사례분석을 수행하였다. 이 모형은 비용요소에 구독비용뿐만 아니라 제본, 주문, 그리고 클레임 등의 관리에 소요되는 총 비용을 포함하였으며, 편익요소에는 이용 빈도만을 다루었던 기존의 평가 모형과는 달리 유용성을 포함하여 종합적인 분석모형을 제시하였다. 유용성은 학술지가 기관의 성격에 맞게 유용하게 활용되었는지에 따라 등급으로 평가되도록 고안되었다. 이 모형은 최근 연구에 가장 중요한 자원으로 활용되고 있는 웹 기반 전자 학술지의 통계를 토대로 측정할 수 있도록 고안되었다. KDI 국제정책대학원 도서관을 대상으로 한 사례분석에서 이용자의 연구 성과물에 활용된 학술지는 가장 높은 등급인 3점을 부여하였으며, 전문 다운로드나 검색에 활용된 학술지는 각각 2점과 1점을 부여하였다. 사례분석은 분석 결과 상위 20위에 포함되어 있는 학술지의 편익이 전체의 75%를 차지하며, 이용자의 유형별 학술지 이용 행태에 차이가 있음이 나타났다. 이 모형은 특히 전문 도서관의 사서들이 학술지의 가치를 평가할 수 있는 기본 틀을 제공할 수 있는 계기가 될 수 있을 것으로 사료된다.

Abstract

This study attempts to derive an economic analysis model for journal evaluation and conducts a case analysis based on the model. Total costs are calculated and include administrative fees (such as binding, ordering, claiming, etc.) and subscription costs. The model quantifies qualitative benefits to users, a utility that combines usage data that has also been evaluated in the existing economic analysis models. The model is designed to tallly the usage statistics of the web-based electronic journals, which have become important resources for research. Rankings are assigned based on how items are utilized to the goal of the mother institution. In the case study based on the KDI School Library, the highest ranking of 3 was assigned to journals that patrons used for citation in their outputs. For journals that were used background information, i.e. full text downloading or browsing, each was assigned ranking of 2 and 1, respectively. According to the analysis, the top 20 journals provided 75% of the entire library utility, showing different user behaviors among different cohorts. We expect that the model makes it possible for librarians to measure the value of journals. It can provide a basic tool for journal selection, particularly in special libraries with custom needs.

18
박재용(신라대학교) ; 조윤희(중앙대학교) 2002, Vol.19, No.1, pp.115-134 https://doi.org/10.3743/KOSIM.2002.19.1.115
초록보기
초록

비영리 조직인 도서관에서 정보화가 차지하는 비중이 점차 증대됨에 따라 시스템에 대한 감리와 통제만으로 지식정보자원관리를 조직의 경영목표에 적합하도록 유지하는 것이 어렵게 되었다. 그러므로 조직의 종합적인 경영체제 내에서 전체 경영활동과 통합되고 융화될 수 있도록 정보화 경영시스템의 적용이 필요하다. 도서관에서도 조직의 전략적 측면이나 사회 ·경제적인 요구들을 포함하는 포괄적인 문제를 고려하여 지식정보화 촉진과 경영혁신을 추구해야 한다. 본 연구는 모든 도서관에 적용할 수 있는 표준화된 규격으로 정보화경영시스템의 적용을 검토하였다. 이를 위해 지금가지 다양하게 개발된 도서관 성과지표와 정보화경영시스템의 수준평가표를 비교, 분석 하였으며, 도서관은 정보화경영시스템 도입을 통하여 조직의 효율성과 이용자 만족을 제고하고 나아가 국가경쟁력을 향상시킬 수 있게 될 것이다.

Abstract

According to increase share ratio of information on library be unable bring to maintain knowledge and information resource management for information audit and control on management vision in non-profit organization. Application of information management system was necessary to the systems integration and total management activity in total management system of organization. Library must be to investigate knowledge and information promotion and management innovation needs to consider to gather into a bundle problems to include social and economic requirements. This research be able to adaption all library standardization rule review adapt ability of information management system through the analysis compared to various developed performance indicator for library and level evaluation indicator for information management system. Library will be expanse efficiency of organization, satisfaction of users and level up the National competition through the adaptation of information management system.

19
현미환(한국과학기술정보연구원) ; 김완종(한국과학기술정보연구원) ; 이혜진(한국과학기술정보연구원) ; 김혜선(한국과학기술정보연구원) 2013, Vol.30, No.4, pp.133-154 https://doi.org/10.3743/KOSIM.2013.30.4.133
초록보기
초록

본 연구의 목적은 과학기술정보 서비스 기관인 한국과학기술정보연구원(KISTI)에서 정보의 공동활용을 목적으로 제공하고 있는 오픈서비스에 대한 이용자의 만족도를 분석하여, 오픈서비스 이용자의 요구를 파악하고 수요자 기반의 서비스 개선사항을 도출하는데 있다. 이를 위해 KISTI에서 제공하는 있는 오픈서비스인 NOS (NDSL Open Service)의 이용자를 대상으로 만족도 조사를 실시하였다. 서비스별 품질을 나타내는 이용자의 만족도 지표는 해당 서비스에 대해 이용자들이 지각하는 품질을 측정할 수 있도록 설계하였으며, 품질지수, 만족지수, 성과지수로 구성되었다. 분석결과 이용자들은 오픈서비스의 사회적 기여도 및 공익성 측면에서 긍정적인 평가를 하고 있음을 확인할 수 있었다. 반면, 환경품질과 서비스 과정품질 항목은 상대적으로 낮은 만족도를 보여주어 오픈서비스를 조금 더 쉽게 활용할 수 있도록 하는 편의성의 제고와 함께 VOC를 중심으로 서비스 이용과정 및 환경 만족도 제고 방안을 모색해야 함을 알 수 있었다.

Abstract

The purpose of this study is to analyze service quality factors that affect user satisfaction of NDSL Open Service (NOS) and to improve standards of open service for sharing information through the user satisfaction survey. User satisfaction indexes were developed to measure the all aspects of the NOS services. The quality index, satisfaction index, and performance index were identified in this survey. According to the survey findings, the levels of social quality and social satisfaction are relatively high, this shows the positive evaluation and expectation of researchers for open services. However, relatively low level is identified in area of service process quality. Therefore, NOS requires method to help easily take advantage of OpenAPI and strategy to increase service process satisfaction and service environment satisfaction.

초록보기
초록

이 연구에서는 기존의 h-지수와 g-지수에 대해 달리 해석해보고 새로운 Hirsch 유형 복합 지표인 전치 g-지수를 제안하고자 한다. 새로운 해석에 따라서 h-지수 및 g-지수 산출 그래프의 가로축이 인용빈도 기준값에 해당하고 세로축이 논문 수가 되도록 축을 전치하고, 이로부터 새로운 전치 g-지수를 제안하였다. 한국학술지인용색인 KCI의 문헌정보학 분야 연구자들을 대상으로 적용해본 결과, 제안된 새 지수는 h-지수 및 g-지수에 비해서 변별력이 높으며 연구의 질보다 연구의 양 차이에 더 민감한 것으로 나타났다. 연구를 지속하는 꾸준한 연구자를 그렇지 못한 연구자와 변별해주는 차별화된 특성을 가지고 있으므로 전치 g-지수는 다면적인 연구 성과 평가에 도움이 될 것으로 기대된다.

Abstract

This study suggests a new Hirsch-type composite index, ‘transposed g-index’ with a different viewpoint on h-index and g-index. From this new point of view, the axes of the graph describing the h-index and g-index are transposed so that the horizontal axis corresponds to the citation frequency threshold and the vertical axis corresponds to the number of documents. Based on this transposed graph, a new indicator transposed g-index is suggested and applied to library and information science researchers’ outcomes in Korean Citation Index database. The results show that this new index has more discriminating power than h-index and g-index, and is more sensitive to differences in quantitative aspects than quality of research. It is expected that the transposed g-index will be helpful for the multifaceted evaluation of the research outcome because it has differentiating characteristics that distinguish consistent researchers who continue to study from those who do not.

정보관리학회지