본 논문은 비디오 스토리의 포괄적 이해를 위한 새로운 비디오 질의응답 데이터셋 DramaQA를 제안한다. DramaQA 데이터셋은 1) 인간지능의 인지 발달 단계에 기초한 인공지능 시스템에 대한 평가...
http://chineseinput.net/에서 pinyin(병음)방식으로 중국어를 변환할 수 있습니다.
변환된 중국어를 복사하여 사용하시면 됩니다.
https://www.riss.kr/link?id=A107274091
2021
Korean
KCI등재
학술저널
1-7(7쪽)
0
0
상세조회0
다운로드국문 초록 (Abstract)
본 논문은 비디오 스토리의 포괄적 이해를 위한 새로운 비디오 질의응답 데이터셋 DramaQA를 제안한다. DramaQA 데이터셋은 1) 인간지능의 인지 발달 단계에 기초한 인공지능 시스템에 대한 평가...
본 논문은 비디오 스토리의 포괄적 이해를 위한 새로운 비디오 질의응답 데이터셋 DramaQA를 제안한다. DramaQA 데이터셋은 1) 인간지능의 인지 발달 단계에 기초한 인공지능 시스템에 대한 평가 지표로서의 계층적 질의응답 데이터셋과 2) 스토리의 지역적 일관성을 모델링하기 위한 등장인물 중심의 비디오 주석을 제공하는 것을 목표로 한다. DramaQA 데이터셋은 TV 드라마 “또 오해영”을 이용하여 제작되었으며, 23,928개의 다양한 길이의 비디오로부터 각각 4개의 난이도 중 하나에 포함되는 17,983개의 질의응답 쌍을 포함한다. 데이터셋은 등장인물 중심 시각적 주석이 되어있는 217,308장의 이미지들과 상호참조가 해결된 스크립트를 제공한다. 또한, 우리는 비디오 질의응답에 대한 등장인물중심의 표현을 효과적으로 학습하기 위한 Dual Matching Multistream 모델을 제안하고 DramaQA 데이터셋에 적용하여 등장인물 중심의 비디오 스토리 이해 방법을 제시한다.
다국어 초록 (Multilingual Abstract)
In this paper, we propose a novel video question answering (Video QA) task, DramaQA, for obtaining a comprehensive understanding of a video story. The DramaQA focuses on two perspectives: 1) hierarchical QAs as an evaluation metric based on the cognit...
In this paper, we propose a novel video question answering (Video QA) task, DramaQA, for obtaining a comprehensive understanding of a video story. The DramaQA focuses on two perspectives: 1) hierarchical QAs as an evaluation metric based on the cognitive developmental stages of human intelligence, and 2) character-centered video annotations to model the local coherence of the story. Our dataset is built upon the TV drama “Another Miss Oh” and contains 16,191 QA pairs from 23,928 video clips of various lengths, with each QA pair belonging to one of four difficulty levels. We provide a total of 217,308 annotated images with rich character-centered visual annotations and coreference resolved scripts. In addition, we provide analyses of the dataset as well as a Dual Matching Multistream model which effectively learns character-centered representations of the video to answer questions about the video.
목차 (Table of Contents)
참고문헌 (Reference)
1 Winston, P.H., "The Strong Story Hypothesis and the Directed Perception Hypothesis" 2011
2 Lei, J, "TVQA:Localized, Compositional Video Question Answering" 2018
3 Riedl, M.O., "Narrative Planning:Balancing Plot and Character" 39 : 217-268, 2010
4 Tapaswi, M, "MovieQA: Understanding Stories in Movies through Question-Answering" 2016
5 Szilas, N., "Interactive Drama on Computer: Beyond Linear Narrative" 150-156, 1999
6 Pennington, J., "Glove:Global Vectors for Word Representation" 2014
7 Kim, K.M, "Deepstory: Video Story QA by Deep Embedded Memory Networks" 2016-2022, 2017
8 He, K, "Deep Residual Learning for Image Recognition" 2016
9 Collis, K.F., "A Study of Concrete and Formal Operations in School Mathematics: A Piagetian Viewpoint" Australian Council for Educational Research 1975
1 Winston, P.H., "The Strong Story Hypothesis and the Directed Perception Hypothesis" 2011
2 Lei, J, "TVQA:Localized, Compositional Video Question Answering" 2018
3 Riedl, M.O., "Narrative Planning:Balancing Plot and Character" 39 : 217-268, 2010
4 Tapaswi, M, "MovieQA: Understanding Stories in Movies through Question-Answering" 2016
5 Szilas, N., "Interactive Drama on Computer: Beyond Linear Narrative" 150-156, 1999
6 Pennington, J., "Glove:Global Vectors for Word Representation" 2014
7 Kim, K.M, "Deepstory: Video Story QA by Deep Embedded Memory Networks" 2016-2022, 2017
8 He, K, "Deep Residual Learning for Image Recognition" 2016
9 Collis, K.F., "A Study of Concrete and Formal Operations in School Mathematics: A Piagetian Viewpoint" Australian Council for Educational Research 1975
정상 충방전 데이터에 기반한 리튬 이온 배터리 고장 탐지
IoT와 딥러닝을 활용한 대중교통 버스 승·하차 계수 시스템 개발 연구
랜덤포레스트를 이용한 프로젝트 초기단계 소프트웨어 기능점수 추정
학술지 이력
연월일 | 이력구분 | 이력상세 | 등재구분 |
---|---|---|---|
2022 | 평가예정 | 재인증평가 신청대상 (재인증) | |
2019-01-01 | 평가 | 등재학술지 유지 (계속평가) | |
2016-01-01 | 평가 | 등재학술지 유지 (계속평가) | |
2015-01-01 | 평가 | 등재학술지 유지 (등재유지) | |
2014-09-16 | 학술지명변경 | 한글명 : 정보과학회논문지 : 컴퓨팅의 실제 및 레터 -> 정보과학회 컴퓨팅의 실제 논문지외국어명 : Journal of KIISE : Computing Practices and Letters -> KIISE Transactions on Computing Practices | |
2013-04-26 | 학술지명변경 | 외국어명 : Journal of KISS : Computing Practices and Letters -> Journal of KIISE : Computing Practices and Letters | |
2011-01-01 | 평가 | 등재학술지 유지 (등재유지) | |
2009-01-01 | 평가 | 등재학술지 유지 (등재유지) | |
2008-10-02 | 학술지명변경 | 한글명 : 정보과학회논문지 : 컴퓨팅의 실제 -> 정보과학회논문지 : 컴퓨팅의 실제 및 레터외국어명 : Journal of KISS : Computing Practices -> Journal of KISS : Computing Practices and Letters | |
2007-01-01 | 평가 | 등재학술지 유지 (등재유지) | |
2005-01-01 | 평가 | 등재학술지 유지 (등재유지) | |
2002-01-01 | 평가 | 등재학술지 선정 (등재후보2차) |
학술지 인용정보
기준연도 | WOS-KCI 통합IF(2년) | KCIF(2년) | KCIF(3년) |
---|---|---|---|
2016 | 0.29 | 0.29 | 0.27 |
KCIF(4년) | KCIF(5년) | 중심성지수(3년) | 즉시성지수 |
0.24 | 0.21 | 0.503 | 0.04 |