2018년 컴퓨터종합학술대회
Current Result Document :
| 한글제목(Korean Title) |
드라마 질의응답을 위한 복합 비디오 스토리 모델링 기법 |
| 영문제목(English Title) |
Multi-modal Video Story Modeling for Drama Question Answering |
| 저자(Author) |
최성호
김경민
장병탁
Seong-Ho Choi
Kyung-Min Kim
Byoung-Tak Zhang
|
| 원문수록처(Citation) |
VOL 45 NO. 01 PP. 1039 ~ 1041 (2018. 06) |
한글내용
(Korean Abstract) |
최근 시각 및 자연어 처리 연구가 급속도로 발전하였고 이 두가지 정보를 모두 활용하는 비디오 처리 연구가 가속화되고 있다. 특히 Cisual Question Answering (VQA). 분야에서 비디오 질의응답 데이터셋은 이러한 비디오 처리 연구를 검증하기 위한 하나의 방법으로 다루어지고 있다. 본 논문은 비디오 질의응답문제를 해결하기 위해 등장인물의 표정을 통해 감정을 인식하고 이를 통해 문맥을 이해하는 모델을 제안하고, 이 모델을 검증하기 위한 데이터셋의 필요성에 대해 논한다. 제안하는 모델은 1) 주어진 동영상을 등장인물의 대사가 있는 부분을 기준으로 Shot으로 나누고 2) 나뉘어진 Shot에서 비디오 프레임들과 등장인물의 표정에 대한 Feature, 소리의 Feature, 자막의 Feature를 추출하고 3) 추출된 Feature들을 이용하여 주어진 질문에 대한 5가지의 선택지 중 가장 알맞은 정답을 골라낸다.
|
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
