바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

검색어: 질적평가, 검색결과: 21
11
김보일(한남대학교 문헌정보학과) ; 김홍렬(전주대학교) 2021, Vol.38, No.4, pp.25-46 https://doi.org/10.3743/KOSIM.2021.38.4.025
초록보기
초록

이 연구에서는 작은도서관의 활성화 및 내실화 측면에서의 평가를 통해 작은도서관 운영의 질적 수준을 향상하고 자생력을 강화하기 위하여 현행 작은도서관 평가지표 분석, 국내외 작은도서관 관련 평가지표 분석, 국내 타 관종 평가지표 분석, 작은도서관 운영자 및 관련 단체 전문가 등을 대상으로 의견수렴 등을 통해 작은도서관 평가체계 및 지표를 개선하여 제안하였다. 이 연구에서 제안된 작은도서관의 평가체계는 단위 작은도서관을 대상으로 하는 트랙 1과 기초지방자치단체 평가하는 트랙 2로 구분된다. 작은도서관의 평가지표는 트랙 1 작은도서관에 대하여 통계를 통해 확인되는 지표는 생략하고 단순화하였으며, 작은도서관 운영에 따른 도서관 경영, 도서관 인프라, 도서관 서비스의 3개 평가영역, 8개 평가항목, 10개 평가지표 100점으로 구성된 정량평가와 20점 총 120점으로 된 정성평가로 구성하였다. 트랙 2 기초지방자치단체의 평가지표는 정성평가 없이 작은도서관 정책 수립 및 시행과 작은도서관 지원 등에 관하여 도서관 경영, 도서관 인프라의 2개 평가영역, 4개 평가항목, 5개 평가지표 100점으로 구성된 정량평가로 구성되어 있다.

Abstract

This study proposed the improvement in the evaluation systems and indicators of small libraries, by analyzing the evaluation indicators of the current small libraries, domestic and foreign ones and domestic other institutions, and gathering opinions from managers of them and experts belonging to related groups, in order to enhance the management quality of small libraries and strengthen the independence of them, based on the evaluation on the activation and substantiality of them. The evaluation systems proposed by this study is divided into Track 1 evaluating small libraries and Track 2 evaluating local governments. The evaluation indicators of small libraries was simplified by eliminating the indicators found from the statistics of Track 1 (small libraries). Track 1 consists of three evaluation areas in regard to the management of small libraries, such as library management, infrastructures and services, 8 evaluation items, 10 evaluation indicators, quantitative (a total of 100 points) and qualitative (a total of 120 points) evaluation. Track 2 consists of 2 evaluation areas in regard to the establishment and enforcement of small library policies and the support for small libraries, such as library management and infrastructures, 4 evaluation items, 5 evaluation indicators and quantitative evaluation (a total of 100 points).

12
김원만(연세대학교) ; 이지연(연세대학교) 2010, Vol.27, No.1, pp.165-183 https://doi.org/10.3743/KOSIM.2010.27.1.165
초록보기
초록

본 연구는 법학전문도서관이 제 역할과 기능을 할 수 있도록 실질적인 평가 내용을 다루어 법학전문도서관의 역할과 나아가야 할 방향을 제시하였다. 특히 법학전문도서관 사서들을 대상으로 그들의 의견을 수렴하여, 평가항목을 도출하였고, 법학전문도서관의 주 이용계층인 법학전문대학원 학생들을 대상으로 그들의 요구를 조사하고 분석하였다. 특히 독립적이고, 전문적으로 법학전문도서관을 위한 평가를 지향하였다는 점에서 그 의의를 찾을 수 있으며, 법학전문도서관의 건물과 시설 그리고 소장자료의 양과 함께 소장자료의 질, 법학도서관 사서의 기능과 역할 그리고 이용자의 만족도를 증진시키며, 외적인 면과 함께 법학전문도서관의 내실을 갖추는 것을 목적으로 하였다.

Abstract

This study investigated factors and issues for law school library evaluation. Also, this study suggested the roles and guidelines for law school libraries to perform its own role and function. To carry out the research, surveys were conducted with the law librarians. Then surveys were conducted to investigate law school students' demands and behaviors. Especially this study evaluated law libraries which were not carried out independently and professionally until now and meaningful as it thoroughly investigated users' demands and behavior with law school libraries and function and roles of law librarians. To facilitate law school library services and functions, quality of the collections, librarians' role, and users' needs should be considered as well as buildings and physical facilities. Particularly, users' needs assessment and librarians' opinion survey will be imperative in implementing evaluation.

13
이재윤(명지대학교) 2016, Vol.33, No.3, pp.7-29 https://doi.org/10.3743/KOSIM.2016.33.3.007
초록보기
초록

연구자 성과 평가를 위해 널리 사용되는 h-지수는 일관성 부족 문제와 공저자 수를 고려하지 않는다는 문제를 가지고 있다. 이를 극복하기 위해 h-지수와 g-지수, 그리고 공저 보정 방안을 검토하고 2004년부터 2013년 사이의 실제 KCI 데이터를 대상으로 분석해본 결과는 다음과 같다. 첫째, 일관성 결여 문제를 해소하기 위해서는 g-지수를 사용하는 것이 더 바람직하다고 판단된다. 둘째, 연구 성과의 양적인 측면과 질적인 측면을 한꺼번에 반영하는 복합 지수라는 h-지수와 g-지수의 고유한 특성을 유지하기 위해서는 반드시 공저를 보정하여 지수를 측정해야 한다. 셋째, 공저자 수로 나눈 인용빈도를 사용하는 hC-지수와 gC-지수를 적용하면 단독 저술 비중이 높은 인문학 분야 연구자도 공정하게 평가할 수 있고, 특정 분야나 특정 기관에 속한 연구자가 상위 순위를 과점하는 현상을 방지할 수 있다.

Abstract

The h-index is a popular bibliometric indicator for evaluating individual researchers. However, it has been criticized for its inconsistency with reflecting increased number of citations and disregarding the number of co-authors in a paper. In order to overcome these problems, we examined the g-index and other Hirsch-type indices considering the number of co-authors. Test data collection was extracted from Korean Citation Index database published from 2004 to 2013. The results of this study are as follows: First, g-index is more reliable indicator than h-index with consistency. Second, number of co-authors must be considered to maintain the h-index as an complex indicator applying the quality and the quantity of research performance. Finally, hc-index and gc-index, with fractionalised counting of the papers, can fairly measure the research performance of humanities researchers, and successfully prevent specific disciplines or institutions occupying majority of top rankings.

14
이정희(한국해양대학교) ; 김희섭(경북대학교) 2007, Vol.24, No.3, pp.343-362 https://doi.org/10.3743/KOSIM.2007.24.3.343
초록보기
초록

이 연구에서는 우리나라 국공립 대학의 전자기록관리시스템이 보다 적합한 전자기록물을 검색할 수 있는 기반 환경을 조성하기 위하여 온톨로지 기반의 검색시스템을 설계 및 구현하였고 그 성능을 기존의 키워드 기반 검색시스템과 비교해 보았다. 온톨로지 기반 검색시스템은 OntoStudio 1.4를 사용하여 자체 설계 및 구현하였으며, 실험에 사용된 실험 컬렉션의 구성은 다음과 같다: (1) 문서는 한국해양대학교의 2005년도 전자문서관리시스템에서 생성한 인사발령통보’ 5,099건의 전자기록물, (2) 질의집단은 장문10개와 단문10개 총20개, 그리고 (3) 적합성평가는 전문가 집단에 의하여 이루어졌다. 한편 키워드 기반 검색시스템의 성능평가 실험은 기존의 전자기록관리시스템을 이용하여 10명의 피실험자에 의하여 온톨로지 기반 검색시스템과 동일한 실험 컬렉션을 사용하여 이루어졌다. 재현율과 정확률에 의한 성능을 비교해본 결과 온톨로지 기반의 검색시스템이 키워드 기반의 검색시스템 보다 뛰어난 성능을 보였다. 또한 온톨로지 기반 검색시스템은 단문보다는 장문의 질의에서 다소 뛰어난 성능을 보였다.

Abstract

The purpose of this study is to design and implement an ontology-based retrieval system for the electronic records of universities and to compare its performance with the existing keyword-based retrieval system. We used OntoStudio 1.4 for implementing an ontology-based retrieval system, and the test collection consisted of the following: (1) 5,099 electronic records of the 'personnel management notification' created by Korea Maritime University, (2) 20 topics (10 short-topics and 10 long-topics), and (3) the relevant assessments were conducted by the group of human experts. 10 university staff participated in the experiment of keyword-based searching and used the same test collection as used in the experiment of ontology-based searching. The ontology-based retrieval system outperformed to the keyword-based retrieval system in terms of Recall and Precision, and it showed better results with long-topic than with short-topic types.

초록보기
초록

이 연구의 목적은 대량의 최신정보를 제공하는 정보필터링 시스템에서 이용자 피드백에 의해 수정질의를 자동생성하여 재검색을 수행함으로써 검색 성능을 최적화할 수 있는 방안을 찾는 데 있다. 이용자가 입력한 초기질의를 사용하여 정보필터링 시스템이 검색한 문헌에 대해 이용자가 적합성 여부를 온라인으로 입력하도록 하고, 이 피드백 결과를 토대로 '중복제거법'과 '저빈도제거법' 두 가지 방법에 의해각각 17개의 수정질의를 생성하여 재검색한 결과를 초기 검색결과와 비교 분석하였다. 수정질의는 각각의 방법마다 17개 패턴의 불논리 질의형태를 미리 만든 다음 초기질의에 디스크립터와 분류기호를 결합하여 생성하였으며, 재검색 결과에 대한 적합성 평가를 통해 최적의 수정질의식을 도출하였다.

Abstract

In this study an information filtering system was implemented and a series of relevance feedback experiments were conducted using the system. For the relevance feedback, the original queries were searched against the database and the results were reviewed by the researchers. Based on users' online relevance judgements a pair of 17 refined queries were generated using two methods called "co-occurrence exclusion method" and "lower frequencies exclusion method." In order to generate them, the original queries. the descriptors and category codes appeared in either relevant or irrelevant document sets were applied as elements. Users' relevance judgments on the search results of the refined queries were compared and analyzed against those of the original queries. [ 더 많은 내용 보기 ]

초록보기
초록

이용자를 시스템 디자인 과정에 적극적으로 참여하는 것이 유용한 정보 시스템의 디자인을 성공시키는 필수요소이다. 본 논문에서는 이용자 중심의 시스템 디자인에 관한 대표적인 방법론을 조사하고, 그 조사결과에 따라 최적의 이용자 모델을 제안하였다. 최적의 정보시스템을 설계하기 위해 실제 이용자들이 자신들의 정보요구를 만족시키기 위해 어떠한 정보를 필요로 하는지와 그들이 수립하는 일련의 정보전략을 분석하였다. 본 연구에서 사용한 분석기법은 더빈의 Sense-Making 이론에서 사용한 Sense-Making Timeline 인터뷰이다. 특히 이 연구에서 제시된 이용자 모델은 이 연구에서 사용된 소프트웨어가 본래 가지고 있던 메뉴 배열순서와는 상이한 절차(timeline)를 보여주고 있다. 궁극적으로 본 연구에서는 장래에 수행되어질 시스템 디자인과 그 평가에 적용시킬 수 있기 위해, 이용자 모델수립에 필요한 개발과정의 단계들을 제시하였다.

Abstract

In order to make interactive computing systems, including information systems, usable it is important to bring users into the design process. This article surveys and introduces several major system design approaches that are widely accepted as approaches from a users' perspective. A user model developed by the author is introduced following these existing approaches. This user model is developed from actual users' understanding of their goals and strategies to solve their information needs by using Dervin's Sense-Making Theory with Sense-Making Timeline Interviews. This user model reveals a different timeline from the default menu presentation orders that originally comes with the software. Steps for developing a user model from the Sense-Making Timeline Interviews are suggested for further application and guidelines in developing user models for system design and evaluation.

초록보기
초록

이 연구는 색인가가 주제 색인하는 과정에서 참조하는 여러 문서구성요소를 문서 범주화의 정보원으로 인식하여 이들이 문서 범주화 성능에 미치는 영향을 살펴보는데 그 목적이 있다. 이는 기존의 문서 범주화 연구가 전문(full text)에 치중하는 것과는 달리 문서구성요소로서 정보원의 영향을 평가하여 문서 범주화에 효율적으로 사용될 수 있는지를 파악하고자 한다. 전형적인 과학기술 분야의 저널 및 회의록 논문을 데이터 집합으로 하였을 때 정보원은 본문정보 중심과 문서구성요소 중심으로 나뉘어 질 수 있다. 본문정보 중심은 본론 자체와 서론과 결론으로 구성되며, 문서구성요소 중심은 제목, 인용, 출처, 초록, 키워드로 파악된다. 실험 결과를 살펴보면, 인용, 출처, 제목 정보원은 본문 정보원과 비교하여 유의한 차이를 보이지 않으며, 키워드 정보원은 본문 정보원과 비교하여 유의한 차이를 보인다. 이러한 결과는 색인가가 참고하는 문서구성요소로서의 정보원이 문서 범주화에 본문을 대신하여 효율적으로 활용될 수 있음을 보여주고 있다.

Abstract

The purpose of this study is to examine whether the information resources referenced by human indexers during indexing process are effective on Text Categorization. More specifically, information resources from bibliographic information as well as full text information were explored in the context of a typical scientific journal article data set. The experiment results pointed out that information resources such as citation, source title, and title were not significantly different with full text. Whereas keyword was found to be significantly different with full text. The findings of this study identify that information resources referenced by human indexers can be considered good candidates for text categorization for automatic subject term assignment.

18
이수상(부산대학교) ; 노지현(부산대학교) 2012, Vol.29, No.4, pp.209-227 https://doi.org/10.3743/KOSIM.2012.29.4.209
초록보기
초록

본 연구의 목적은 스마트 사회/스마트 세대를 위한 스마트 도서관을 지향하기 위해 필요한 우리나라 도서관의 정책적 과제들을 발굴하는 데 있다. 이러한 목적을 위해 본 연구에서는 도서관 R&D 정책과제 탐색을 위한 방법론을 정립하고, 계량정보 분석 방법과 주제분석 방법, 브레인스토밍 기법을 활용하여 도서관 분야의 유망과제를 발굴하는 작업을 수행하였다. 이렇게 하여 도출한 도서관 R&D 유망과제 예비 리스트는 연구팀의 브레인스토밍과 전문가 평가를 통해 최종 과제화 되었다. 또한, 본 연구에서 도출한 최종 과제의 중요도를 산출하기 위해 전문가에 의한 AHP 분석 작업을 수행하였다. 이 연구의 결과는 우리나라 도서관 정보서비스의 질적 향상뿐만 아니라 미래의 변화를 스스로 주도할 수 있는 지적 기반의 마련을 위한 R&D 과제 개발 및 이행을 위한 기초자료로 활용할 수 있을 것이다.

Abstract

This study intends to develop R&D policy agendas that are required to prepare a smart library/smart society in Korea libraries. To the end, methodology was established to explore policy issues and agenda for library R&D, and the preliminary agendas were drawn from informetrics, subject analysis, and brainstorming techniques. Then, the preliminary agendas were revised through supplementary works, such as the comprehensive investigation into research papers and the recent research projects. Based on the results, evaluation for the R&D agendas was performed. The Analytic Hierarchy Process (AHP) method was used as a structured technique for analyzing the importance and the priority of the agendas. This study can be used for improving and/or expanding quality of information services in Korean libraries and for exploring the requirements to play a crucial role in the future society.

초록보기
초록

이 연구에서는 기존의 h-지수와 g-지수에 대해 달리 해석해보고 새로운 Hirsch 유형 복합 지표인 전치 g-지수를 제안하고자 한다. 새로운 해석에 따라서 h-지수 및 g-지수 산출 그래프의 가로축이 인용빈도 기준값에 해당하고 세로축이 논문 수가 되도록 축을 전치하고, 이로부터 새로운 전치 g-지수를 제안하였다. 한국학술지인용색인 KCI의 문헌정보학 분야 연구자들을 대상으로 적용해본 결과, 제안된 새 지수는 h-지수 및 g-지수에 비해서 변별력이 높으며 연구의 질보다 연구의 양 차이에 더 민감한 것으로 나타났다. 연구를 지속하는 꾸준한 연구자를 그렇지 못한 연구자와 변별해주는 차별화된 특성을 가지고 있으므로 전치 g-지수는 다면적인 연구 성과 평가에 도움이 될 것으로 기대된다.

Abstract

This study suggests a new Hirsch-type composite index, ‘transposed g-index’ with a different viewpoint on h-index and g-index. From this new point of view, the axes of the graph describing the h-index and g-index are transposed so that the horizontal axis corresponds to the citation frequency threshold and the vertical axis corresponds to the number of documents. Based on this transposed graph, a new indicator transposed g-index is suggested and applied to library and information science researchers’ outcomes in Korean Citation Index database. The results show that this new index has more discriminating power than h-index and g-index, and is more sensitive to differences in quantitative aspects than quality of research. It is expected that the transposed g-index will be helpful for the multifaceted evaluation of the research outcome because it has differentiating characteristics that distinguish consistent researchers who continue to study from those who do not.

20
김성진(인하공업전문대학) ; 정동열(이화여자대학교) 2004, Vol.21, No.1, pp.23-53 https://doi.org/10.3743/KOSIM.2004.21.1.023
초록보기
초록

본 연구는 국내외 학술지에서 이론개발과 이론활용이 이루어진 이론연구를 조사함으로써, 문헌정보학 이론의 효율성과 활용성을 분석하고 이를 기반으로 문헌정보학의 학문적 본질을 규명하는 데 목적이 있다. 이를 위해 국내외 문헌정보학의 대표 학술지를 두 종씩 선정하여 1984년부터 2003년 상반기까지 게재된 연구논문 1,661편에 대한 내용분석을 실시하였다. 이론개발과 이론활용에 대한 질적 평가를 위해 4단계의 이론 효율성 모델과 5단계의 이론 활용성 모델을 각각 분석척도로 사용하였다. 이론연구에 대한 구체적인 분석을 위해 연구의 배경적 속성(학회지, 발행국, 연구시기), 연구의 내용적 속성(연구주제, 연구방법), 연구자 속성(소속, 전공, 연구경력)을 조사하고, 활용된 이론의 근원학문과 활용주기를 분석하였다. 또한 저자동시인용법을 적용하여 동시이론활용을 분석함으로써 20년간 문헌정보학 연구자들에 의해 형성된 이론적 기반에 대한 지적 구조를 규명하였다.

Abstract

The purpose of this study is to analyze the identity and relationship of library and information science by exploring theoretical aspects of LIS research, including theory building and theory use. The sample of this study consists of 1,661 research articles published from 1984 to 2003 in two Korean and two American core LIS journals. Theory articles are analyzed with two scales, such as '4-degree of theory efficiency' and '5-degree of theory use.' Each article is coded in terms of journal, country, publication year, subfield, and methodology of the article, and affiliation, department, and research experience of the first author. The theories used therein are coded according to their origin and age. Also, an author co-citation technique is applied to represent intellectual structure on a two-dimensional map, which has been constructed by theory use of LIS authors for 20 years.

정보관리학회지