시공간 모션 특징 분석을 통한 시각적으로 유발되는 멀미 유발인자 분석을 위한 동영상의 샷 분류방법

초록

본 논문은 시각 정보에 따라 유발될 수 있는 motion sickness (Visually Induced Motion Sickness, VIMS) 대한 분석을 위한 시공간 영역상의 특징 추출 기반의 동영상 분류 알고리즘을 제시한다. VIMS의 유발 원인은 동영상 컨텐츠의 움직임 정도와 패턴에 따라 많은 영향을 받으며, 이는 촬영 시 카메라의 움직임에 기인하므로 다양한 촬영 기법들에 의해 그 원인이 제공된다. 본 연구는 이러한 촬영 특성에 따른 자동화된 동영상 분류를 위해 2차로 구성된 Bayesian 분류기를 통하여 동영상을 총 7가지 종류로 분류하였으며, 분류를 위하여 시공간 영역에서 강건한 특징들을 추출할 수 있는 새로운 알고리즘을 제시하였다. 특징 추출을 위해서는 동영상의 프레임 간의 영역별 optical flow에 대한 PCA를 활용하였으며, 시간영역 상의 특징을 강건하게 고려하기 위해 대표 flow에 대한 영역별 차분 영상과 히스토그램 분석을 새로운 특징으로 추가하였다. 최종 분류는 위해 입력으로 주어진 영상은 샷 경계를 기준으로 나누어진 뒤 1차 분류기를 통해 전역/지역 움직임으로 분류되며, 2차 분류기를 통해 다양한 촬영 기법에 따른 6 종류의 영상들로 자동화된 시스템 내에서 분류를 달성하였다.