바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

비디오자료의 의미추출을 위한 영상초록의 효용성에 관한 실험적 연구

An Experimental Study on the Effectiveness of Storyboard Surrogates in the Meanings Extraction of Digital Videos

정보관리학회지 / Journal of the Korean Society for Information Management, (P)1013-0799; (E)2586-2073
2007, v.24 no.4, pp.53-72
https://doi.org/10.3743/KOSIM.2007.24.4.053
김현희 (명지대학교)
  • 다운로드 수
  • 조회수

초록

본 연구에서는 12개의 표본 비디오 집단과 14명의 피조사자들을 이용하여 영상 초록 및 전체 클립 보기를 통한 색인어 및 요약문 추출의 정확도를 측정해 보았다. 측정 결과 첫째, 비디오 유형에 따라 정확도가 차이가 있는 것으로 나타났으며 이는 이미지에 주로 의존하여 정보를 표출하는 비디오의 경우 텍스트 초록만으로 의미 파악을 하기에는 한계가 있으며 텍스트 초록이 영상 초록과 함께 사용되었을 때 시너지 효과를 낼 수 있음을 보여주고 있다. 둘째, 영상 초록의 색인어 및 요약문 정확도가 전체 클립의 정확도 보다 떨어지지만 절반치에 근접한 것으로 나타나 영상 초록이 비디오 의미 추출에 효율적으로 활용될 수 있음을 확인하였다. 또한 영상 초록의 색인어 정확도(0.45)가 요약문 정확도(0.40) 보다 더 높게 나타나 영상 초록을 통해서 색인어 추출 작업을 더 효율적으로 할 수 있음을 확인할 수 있었다. 이러한 실험 결과에 기초하여 영상 초록이 색인어 또는 요약문 추출 작업에 활용될 수 있을 뿐만 아니라, 디지털 도서관 환경에서 텍스트 초록과 같은 다른 메타데이터 요소들과 함께 사용된다면 이용자의 적합성 판정을 좀 더 용이하게 할 것이며, 더 나아가 영상 질의의 매칭 자료로도 이용될 수 있음을 제안하였다. 끝으로 영상 초록의 품질을 높이기 위한 키프레임 추출 알고리즘 및 키프레임 배열 모형 설계 등 후속 연구에 대해서 제언하였다.

keywords
Open Video Digital Library, storyboard surrogates, Open Video Digital Library, storyboard surrogates, 디지털 비디오, 영상 초록, 스토리보드, 주제 색인, 요약, 텍스트 초록, 영상 질의, 키프레임, 메타데이터, 통보적 초록, 지시적 초록, 비디오 클립, 디지털 도서관, Open Video Digital Library, storyboard surrogates

Abstract

This study is designed to assess whether storyboard surrogates are useful enough to be utilized for indexing sources as well as for metadata elements using 12 sample videos and 14 participants. Study shows that first, the match rates of index terms and summaries are significantly different according to video types, which means storyboard surrogates are especially useful for the type of videos of conveying their meanings mainly through images. Second, participants could assign subject keywords and summaries to digital video, sacrificing a little loss of full video clips' match rates. Moreover, the match rate of index terms (0.45) is higher than that of summaries (0.40). This means storyboard surrogates could be more useful for indexing videos rather than summarizing them. The study suggests that 1)storyboard surrogates can be used as sources for indexing and abstracting digital videos; 2) using storyboard surrogates along with other metadata elements (e.g., text-based abstracts) can be more useful for users' relevance judgement; and 3)storyboard surrogates can be utilized as match sources of image-based queries. Finally, in order to improve storyboard surrogates quality, this study proposes future studies: constructing key frame extraction algorithms and designing key frame arrangement models.

keywords
Open Video Digital Library, storyboard surrogates, Open Video Digital Library, storyboard surrogates, 디지털 비디오, 영상 초록, 스토리보드, 주제 색인, 요약, 텍스트 초록, 영상 질의, 키프레임, 메타데이터, 통보적 초록, 지시적 초록, 비디오 클립, 디지털 도서관, Open Video Digital Library, storyboard surrogates

참고문헌

1.

고영승. (2005). MPEG-7 기반의 의료영상 검색시스템 개발. 8(8), 1032-1041.

2.

김재우. (2002). 영상 기호의 의미 작용에 관한 연구. 6, 41-67.

3.

김무규. (2006). 영화영상에 관한 기호학적 이해의 문제점과 대안: ‘사이공간’ 개념을 중심으로. 언론과학연구, 6(3), 65-98.

4.

존, 버거. (1991). 영상커뮤니케이션과 사회. , -.

5.

황민선. (2005). 출판물과 출판물을 원작으로 하는 영상물의 매체 특성 비교 연구. 한국출판학연구, (48), 371-392.

6.

Browne, P. (2005). Video retrieval using dialogue, keyframe similarity and video objects. , 11-14.

7.

Choi, Y. (2002). User′s relevance criteria in image retrieval in American history. 38(5), 695-726.

8.

Christel, M.G. (2002). Collages as dynamic summaries for news video. , 561-569.

9.

Christel, M. G. (2001). The effect of text in storyboards for video navigation. 3, 1409-1412.

10.

Hughes, A. (2003). Text or pictures? An eye-tracking study of how people view digital video surrogates. , 271-280.

11.

Li, F. (2000). Browsing digital video. , 169-176.

12.

Marchionini, G. (2002). The Open video digital libra. 8(12), -.

13.

Markkula, M. (1998.5-6Feb). Searching for photos - journalistic practices in pictorial IR. , 5-.

14.

Mu, X. (2003). Enriched video semantic metadata: Authorization, integration, and. , 316-322.

15.

Niblack, W. (1997). Updates to the QBIC system. (3312), 150-161.

16.

Robertson, G. (1998). Data mountain: Using spatial memory for document management. , 153-162.

17.

Smeaton, A.F. (2006). A usage study of retrieval modalities for video shot retrieval. 42(5), 1330-1344.

18.

Smeaton, A. F. (2004). Indexing, browsing, and searching of digital video. 38, 371-407.

19.

Stachowicz, C. (2002). The effectiveness of storyboard surrogates in the subject indexing of digital video. , -.

20.

Wildemuth, B.M. (2002). Alternative surrogates for video objects in a digital library: Users′ perspectives on their relative usability. , 493-507.

21.

Yang, M. (2005). An exploration of users’ video relevance criteria. , -.

22.

Yang, M. (2004). The Relative Effectiveness of Concept-Based versus Content-Based Video Retrieval. , 368-371.

23.

Lyer, H. (2007). Prioritization strategies for vidoe storyboard keyframes. 58(5), 629-644.

정보관리학회지