바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

검색어: 사용성 평가, 검색결과: 71
31
김수연(연세대학교) ; 정영미(연세대학교) 2006, Vol.23, No.3, pp.147-165 https://doi.org/10.3743/KOSIM.2006.23.3.147
초록보기
초록

이 연구에서는 전체 문헌집단으로부터 초기 질의어에 대한 연관용어 선정 시 사용할 수 있는 최적의 기법을 찾기 위해 연관규칙 마이닝과 용어 클러스터링 기법을 이용하여 연관용어 선정 실험을 수행하였다. 연관규칙 마이닝 기법에서는 Apriori 알고리즘을 사용하였으며, 용어 클러스터링 기법에서는 연관성 척도로 GSS 계수, 자카드계수, 코사인계수, 소칼 & 스니스 5, 상호정보량을 사용하였다. 성능평가 척도로는 연관용어 정확률과 연관용어 일치율을 사용하였으며, 실험결과 Apriori 알고리즘과 GSS 계수가 가장 좋은 성능을 나타냈다.

Abstract

In this study, experiments for selection of association terms were conducted in order to discover the optimum method in selecting additional terms that are related to an initial query term. Association term sets were generated by using support, confidence, and lift measures of the Apriori algorithm, and also by using the similarity measures such as GSS, Jaccard coefficient, cosine coefficient, and Sokal & Sneath 5, and mutual information. In performance evaluation of term selection methods, precision of association terms as well as the overlap ratio of association terms and relevant documents' indexing terms were used. It was found that Apriori algorithm and GSS achieved the highest level of performances.

32
이정희(한국해양대학교) ; 김희섭(경북대학교) 2007, Vol.24, No.3, pp.343-362 https://doi.org/10.3743/KOSIM.2007.24.3.343
초록보기
초록

이 연구에서는 우리나라 국공립 대학의 전자기록관리시스템이 보다 적합한 전자기록물을 검색할 수 있는 기반 환경을 조성하기 위하여 온톨로지 기반의 검색시스템을 설계 및 구현하였고 그 성능을 기존의 키워드 기반 검색시스템과 비교해 보았다. 온톨로지 기반 검색시스템은 OntoStudio 1.4를 사용하여 자체 설계 및 구현하였으며, 실험에 사용된 실험 컬렉션의 구성은 다음과 같다: (1) 문서는 한국해양대학교의 2005년도 전자문서관리시스템에서 생성한 인사발령통보’ 5,099건의 전자기록물, (2) 질의집단은 장문10개와 단문10개 총20개, 그리고 (3) 적합성평가는 전문가 집단에 의하여 이루어졌다. 한편 키워드 기반 검색시스템의 성능평가 실험은 기존의 전자기록관리시스템을 이용하여 10명의 피실험자에 의하여 온톨로지 기반 검색시스템과 동일한 실험 컬렉션을 사용하여 이루어졌다. 재현율과 정확률에 의한 성능을 비교해본 결과 온톨로지 기반의 검색시스템이 키워드 기반의 검색시스템 보다 뛰어난 성능을 보였다. 또한 온톨로지 기반 검색시스템은 단문보다는 장문의 질의에서 다소 뛰어난 성능을 보였다.

Abstract

The purpose of this study is to design and implement an ontology-based retrieval system for the electronic records of universities and to compare its performance with the existing keyword-based retrieval system. We used OntoStudio 1.4 for implementing an ontology-based retrieval system, and the test collection consisted of the following: (1) 5,099 electronic records of the 'personnel management notification' created by Korea Maritime University, (2) 20 topics (10 short-topics and 10 long-topics), and (3) the relevant assessments were conducted by the group of human experts. 10 university staff participated in the experiment of keyword-based searching and used the same test collection as used in the experiment of ontology-based searching. The ontology-based retrieval system outperformed to the keyword-based retrieval system in terms of Recall and Precision, and it showed better results with long-topic than with short-topic types.

초록보기
초록

전 세계적으로 협동연구가 증가함에 따라 복수저자 연구업적물 상의 개별저자 기여도를 보다 정확하고 합리적으로 산정하는 것이 중요해지고 있다. 효과적인 저자 기여도 산정을 위해서는 개별 학문분야의 고유한 연구행태 및 규범에 대한 이해가 우선되어야 한다. 그럼에도 불구하고 연구업적 평가 시 개별 학문분야의 특수성을 고려하지 않고 일률적인 방식으로 저자 기여도를 산정하는 경우가 많다. 따라서 본 연구에서는 국내 대학에서 사용하는 교수 연구업적 평가방식에 제시된 복수저자 기여도 측정방식이 특정 학문분야 즉, 경제학 분야 교수의 연구업적 평가에 적용되었을 때 나타나는 문제점을 제시하고 이를 해결할 수 있는 방안을 제안하였다. 본 연구에서는 문헌연구, 업적평가 규정분석 및 경제학 분야 교수 면담 등을 통하여 경제학 분야의 알파벳 순 저자표기 관행을 확인하였고, 이러한 표기방식이 연구업적 평가과정에 제대로 고려되고 있지 않음을 알 수 있었다. 연구결과를 토대로 저자들은 세 가지 즉, (1) 대학 업적평가 규정상의 주저자에 대한 명확한 정의 및 인정기준 확립, (2) 복수저자 기여율 평가규정의 융통성 제고, (3) 저자 기여율에 대한 인식연구의 필요성 등을 제안하였다.

Abstract

There has been growing interest in the methods for measuring the credits of individual authors in multi-authored research papers in response to the increase of research collaboration. Having a good understanding for academic norms of individual discipline is essential to measure author credit effectively. However, many Korean universities do not consider different norms for determining the order of authors across disciplines. Rather, they tend to use a standardized method to assess the credits of authors in multi-authored papers. Therefore, this study presented some problems of applying a standardized method to measure author credits in multi-authored papers in economics. The findings of this study confirmed the frequent use of alphabetical author order in economics papers; however, many university guidelines for research evaluation do not take account the alphabetical authorship in measuring the credits of authors. The authors suggest the needs for (1) establishment of a clear definition for primary authors, (2) flexibility in assessment methods for author credit, and (3) empirical research on author credit.

초록보기
초록

기업이나 연구소 등에서 운영하는 전문도서관의 경제적 가치 평가에 대한 필요성이 제기됨에 따라 본 연구는 전문도서관 주요 서비스의 가치평가에 대한 새로운 접근방법을 제시하였다. 선행연구의 이론과 보편타당성과 적용가능성을 기준으로 삼았다. 서비스에 어떤 유형의 자원(물적 자원 또는 인적 자원)이 사용되었는지에 따라 측정요소와 방법론을 달리 적용하였으며, 이를 토대로 전문도서관 주요 서비스의 가치평가를 위한 산출식을 제시하였다. 전문도서관 서비스의 경제적 가치평가를 위한 분석모형 개발은 서비스의 가치에 대한 객관적 입증이 가능해져서 전문도서관의 진정한 가치를 알릴 수 있는 계기가 될 수 있을 것으로 사료된다.

Abstract

This study aims to suggest a new approach to economic valuation of the special library, in response to the necessity of economic justification of the special library operated by firms and research institutes. Benefit measurement elements and analysis methods to be used in the studywere derived through feasibility evaluation on models in previous studies, and objectivity and applicability were the criteria for feasibility evaluation. Depending on which type of resources are used in providing service, different benefit measurement elements and methods were applied. Based on this, calculation formula for service valuation of special library was presented. The development of analysis model for economic valuation of special library made it possible to objectively prove the value of the special library, and is considered to provide an opportunity to publicize the real value of the special library.

35
유소영(한남대학교) ; 이재윤(명지대학교) ; 정은경(이화여자대학교) ; 이보람(이화여자대학교 대학원 문헌정보학과) 2015, Vol.32, No.4, pp.249-272 https://doi.org/10.3743/KOSIM.2015.32.4.249
초록보기
초록

연구성과평가와 연구비 배분에 인용분석을 포함한 계량정보학적 분석방법이 많이 사용되고 있으며, 부적절한 적용 및 해석에 대한 우려와 지적 또한 계속되고 있다. 이에 따라 최근 연구성과평가 지침과 권고안이 학술 커뮤니티와 계량서지학적 연구집단에서 연이어 발표되고 있다. 따라서 이 연구에서는 2015년 발표된 라이덴 선언(Leiden Manifesto)을 중심으로 Thomson Reuters 백서, 프랑스 과학원 권고안, DORA 선언, IEEE 권고안을 비교하고 이를 통해 국내 연구성과평가 환경에의 제안 가능성을 살펴보고자 하였다. 비교분석 결과, 다수의 권고안은 연구의 목적과 연구 주제분야별 특성을 반영하고 다양한 지표를 활용한 다면적 평가를 통해 총체적인 평가를 지향하고 있는 것으로 나타났다. 이러한 결과는 국내 연구성과평가시스템 적용에서 고려해 볼 주요 권고안이라고 할 수 있으며, 추후 이에 대한 이해관계자들의 의견 수렴 등을 통하여 국내 연구성과시스템에의 적용가능성을 보다 심층적으로 살펴볼 필요가 있을 것이다.

Abstract

Inappropriate applications of bibliometric approach and misinterpretation on the analysis in research evaluation have been found and recognized nationally and internationally as the use of the approach has been rapidly adopted in various sectors in research evaluation systems and research funding agencies. The flood of misuse led to several numbers of declarations and statements on appropriate research evaluation, including Leiden Manifesto, DORA, IEEE Statement, etc. The similar recommendations from five different declarations, Leiden Manifest, IEEE Statement, DORA, Institut de France, and Thomson Reuters White paper were reviewed and meta-analyzed in this study and it is revealed that most of them emphasize evaluation on quality in various aspects with multiple indicators. Research evaluation with assessing multiple aspects of individual research based on the understandings of its purpose and pertinent subject area was revealed as being mostly advised in the declarations, and this recommendation can be regarded as being mostly requested in national research evaluation system. For future study, interviews with relevant stakeholders of national research evaluation system in order to explore its application are needed to confirm the findings of this review.

초록보기
초록

본 연구는 J교육대학교 기록관 이용자들을 대상으로 기록정보서비스에 대한 인식 및 경험을 조사하고 이를 바탕으로 서비스 개선방안을 도출하는 것을 그 목적으로 한다. 본 연구는 아카이브 매트릭스 프로젝트(Archival Metrics Project)에서 대학기록관의 기록정보서비스를 평가하기 위해 개발한 이용자 설문지를 수정하여 사용하였으며 이용자들의 기록관에 대한 인식, 이용현황, 직원에 대한 평가, 시설 및 서비스에 대한 만족도 등을 파악하였다. 본 연구는 47명에 대한 이용자 설문 결과와 기록연구사와의 면담결과를 바탕으로 기록관의 서비스 개선방안을 제안하였다.

Abstract

This study aims to examine users’ perceptions of and experiences about archival reference services in a university archive. The study uses the Researcher Survey provided by the Archival Metrics Project to understand users’ perceptions about the university archive and users’ satisfaction level of facilities and services. Based on the results of the survey among 47 users and the interview with the archivist working in the university archive, this study suggests recommendations for improving archival reference services.

37
노효진(전남대학교 문헌정보학과) ; 장우권(전남대학교) 2019, Vol.36, No.1, pp.137-168 https://doi.org/10.3743/KOSIM.2019.36.1.137
초록보기
초록

이 연구의 목적은 대학도서관 이용자의 공동체의식과 대학도서관 서비스품질 평가, 이용자만족도 및 충성도를 측정 및 분석하여 대학도서관 이용자의 공동체의식이 이용자만족도 및 충성도에 미치는 영향 관계를 규명하고자 한다. 이를 위해 연구모형과 연구가설을 설정하였다. 가설 검증을 위하여 J대학교 중앙도서관을 이용한 경험이 있는 학생들을 대상으로 최종 282부의 유효표본을 분석에 사용하였다. 측정변수들의 평균값을 기술통계량으로 분석하였으며, 가설 검증을 위해 Hayes의 PROCESS macro프로그램 모형 4번과 6번을 사용하여 매개효과분석을 실시하였다. 이 연구의 결과, 1) 대학도서관 이용자의 공동체의식은 대학도서관 서비스 품질평가에 따라 이용자만족도에 유의한 영향을 미치는 것으로 나타났다. 대학도서관 이용자의 공동체의식을 구성하는 요소인 서비스 혜택 지각 및 충족감, 상호영향의식이 통계적 유의수준 하에서 서비스 품질평가에 정(+)의 영향을 미치며, 이를 매개로 이용자만족도에 정(+)의 영향을 미치는 것으로 나타나, 대학도서관 이용자의 공동체의식이 높을수록 서비스 품질평가가 높으며, 이를 통해 이용자만족도가 높아진다는 것을 알 수 있었다. 2) 대학도서관 이용자의 공동체의식은 대학도서관 서비스 품질평가와 이용자만족도에 따라 이용자충성도에 유의한 영향을 미치는 것으로 나타났다. 대학도서관 이용자의 공동체의식을 구성하는 요소인 서비스 혜택 지각 및 충족감, 상호영향의식이 서비스 품질평가를 매개로 이용자만족도에 통계적으로 유의한 영향을 미치고(가설1), 이용자만족도를 매개로 통계적 유의수준 하에서 이용자충성도에 정(+)의 영향을 미치는 것으로 나타났다. 따라서, 대학도서관 이용자의 공동체의식이 높을수록 서비스 품질평가가 높고, 이용자만족도가 높아지며, 이를 통해 이용자충성도가 높아진다는 것을 확인할 수 있었다.

Abstract

This study measures and analyzes the university library user’s sense of community, service quality assessment, user satisfaction and loyalty. In addition, the effect of the university library user’s sense of community on university library user satisfaction and loyalty mediated by the assessment of the quality of service is investigated. On the basis of study result, to improve user satisfaction and user loyalty, the direction and implications of library development are presented. In order to achieve the purpose of the study, precedent research and literature were investigated, and the study model and hypothesis were established based on theoretical background. In order to verify the hypothesis, a total of 300 questionnaires were distributed to subject who had experience using the Central Library among undergraduate students at the C National University, and the final 282 sample was used for analysis. To analyze the differences depending on the general characteristics of the samples, It is the result of an independent sample t-test and one-way ANOVA. The results of the mediated effects analysis using the PROCESS macro-programs models 4 and 6 of Hayes for hypothesis testing are as follows. First, The university library user’s sense of community (Service Benefits Perception and Satisfaction, Mutual sense of influence) effect the user satisfaction of university library mediated by service quality assessment at statistical significance. This showed that the higher the university library user’s sense of community, the higher the service quality assessment, and the higher the user satisfaction level of university library. Second, The university library user’s sense of community (Service Benefits Perception and Satisfaction, Mutual sense of influence) effect the user loyalty of university library mediated by service quality assessment and user satisfaction. This showed that the higher the university library user’s sense of community, the higher the service quality assessment, the higher user satisfaction level of university library and the higher the user loyalty level of university library. The results of this study showed that the university library user’s sense of community has a direct and indirect effect on enhancing user satisfaction and loyalty through the service quality assessment.

38
김인후(중앙대학교 문헌정보학과 대학원) ; 김성희(중앙대학교 문헌정보학과) 2022, Vol.39, No.3, pp.293-310 https://doi.org/10.3743/KOSIM.2022.39.3.293
초록보기
초록

본 연구에서는 한국어 데이터로 학습된 BERT 모델을 기반으로 문헌정보학 분야의 문서를 자동으로 분류하여 성능을 분석하였다. 이를 위해 문헌정보학 분야의 7개 학술지의 5,357개 논문의 초록 데이터를 학습된 데이터의 크기에 따라서 자동분류의 성능에 어떠한 차이가 있는지를 분석, 평가하였다. 성능 평가척도는 정확률(Precision), 재현율(Recall), F 척도를 사용하였다. 평가결과 데이터의 양이 많고 품질이 높은 주제 분야들은 F 척도가 90% 이상으로 높은 수준의 성능을 보였다. 반면에 데이터 품질이 낮고 내용적으로 다른 주제 분야들과 유사도가 높고 주제적으로 확실히 구별되는 자질이 적을 경우 유의미한 높은 수준의 성능 평가가 도출되지 못하였다. 이러한 연구는 미래 학술 문헌에서 지속적으로 활용할 수 있는 사전학습모델의 활용 가능성을 제시하기 위한 기초자료로 활용될 수 있을 것으로 기대한다.

Abstract

In this study, we analyzed the performance of the BERT-based document classification model by automatically classifying documents in the field of library and information science based on the KoBERT. For this purpose, abstract data of 5,357 papers in 7 journals in the field of library and information science were analyzed and evaluated for any difference in the performance of automatic classification according to the size of the learned data. As performance evaluation scales, precision, recall, and F scale were used. As a result of the evaluation, subject areas with large amounts of data and high quality showed a high level of performance with an F scale of 90% or more. On the other hand, if the data quality was low, the similarity with other subject areas was high, and there were few features that were clearly distinguished thematically, a meaningful high-level performance evaluation could not be derived. This study is expected to be used as basic data to suggest the possibility of using a pre-trained learning model to automatically classify the academic documents.

초록보기
초록

불리언 검색만을 제공하는 정보시스템들은 순위화된 검색 결과를 제공하지 않아 이용자들이 많은 시간을 들여 수많은 결과를 일일이 확인해야하는 단점이 있다. 따라서 본 연구에서는 불리언 검색 모델의 단점을 극복하기 위한 방법으로써 불리언 검색에서 적용되고 있는 색인 가중치 정보 대신에 태그 간의 결합 관계 정보를 이용하여 순위화된 검색 결과를 제공하기 위한 시스템을 제안한다. 본 연구에서 제안하고 있는 방법은 일반적인 키워드 질의 대신에 문서를 질의로 사용하기 때문에 해당 문서에서 질의로 사용하는 핵심태그를 추출한다. 질의 생성 과정에서는 태그결합도에 따라 다양한 그룹의 불리언 질의를 생성하고, 매칭 과정에서는 해당 질의어 그룹 간에 차별성 정보와 태그 중요도 정보를 이용하여 순위화를 처리한다. 본 연구에서 제안하고 있는 방법의 유용성을 평가하기 위하여 선정된 연구정보와 관련된 동향분석정보를 추출하는 과정에 적용하여 실험을 수행하였다. 또한 제안된 방법에 대한 이용자 평가를 위하여 다수의 이용자들을 대상으로 약 1년간 서비스를 제공하였으며 그 결과 높은 이용자 만족도를 확보할 수 있다고 조사되었다.

Abstract

Since IR systems which adopt only Boolean IR model can not provide ranked search result, users have to conduct time-consuming checking process for huge result sets one by one. This study proposes a method to provide search results ranked by using coupling information between tags instead of index weight information in Boolean IR model. Because document queries are used instead of general user queries in the proposed method, key tags used as queries in a relevant document are extracted. A variety of groups of Boolean queries based on tag couplings are created in the process of extracting queries. Ranked search result can be extracted through the process of matching conducted with differential information among the query groups and tag significance information. To prove the usability of the proposed method, the experiment was conducted to find research trend analysis information on selected research information. Aslo, the service based on the proposed methods was provided to get user feedback for a year. The result showed high user satisfaction.

초록보기
초록

본 연구에서는 교육 도구로써 위키의 가능성을 탐색하기 위해서, 위키 환경인 구글 사이트에서 협력학습 기반 그룹 프로젝트를 수행하는 학습자들의 행태와 인식을 조사하였다. 이를 위해 파일 업로드, 웹 페이지 사용, 댓글, 네비게이션 바와 관련된 개별 학습자 및 그룹별 형태 분석과 구글 사이트 사용에 대한 설문조사를 실시하였다. 연구 결과를 토대로 구글 사이트를 활용한 학습자들의 협력학습 기반 그룹 프로젝트 활동의 특징을 논의하였다. 또한 협력학습의 교육적 효과성과 학습활동 진행 과정 평가의 용이성을 증대시키기 위하여 위키 환경 시스템이 어떻게 개선되어야 하는지를 제시하였다.

Abstract

The study aims at investigating students' behaviors and perceptions regarding the collaborative learning based group project using the wiki environment. The study utilized Google Sites as a case, and analyzed file unloads, the use of web pages, navigation bars, and comments as well as surveys. The study discusses main characteristics of students' activities in the collaborative learning group project, which are drawn from the analysis of students' behaviors and perceptions. The study also provides implications for improvement of wiki environment to support collaborative learning in education.

정보관리학회지