동영상 콘텐츠 생성을 위한 음악과 사진 분석 = Analysis of Music and Photo for User Creative Movie

국문 초록 (Abstract)

데이터 전송 기술의 발달과 디지털 기기의 다양한 보급으로 소비자들은 디지털 콘텐츠를 생산하는 주체로 변화하였다. 생성되는 다양한 콘텐츠 중 사용자는 동영상 제작에 큰 관심을 보였으며, 그 중 음악과 사진으로 동영상을 제작하는 방법은 사용자에게 보다 손쉽게 동영상을 만들 수 있도록 제공되었다. 그러나 현재의 방법은 사진과 사진간의 연관성이 결여되었을 뿐 아니라, 음악의 리듬과 관계없이 일정 시간 간격에 따라 사진이 변화한다. 본 논문에서는 음악 분석을 통하여 음악 리듬에 따라 사진이 변화하고, 사진 분석을 통하여 사진 간의 연관성을 나타낼 수 있는 동영상 제작 방법을 제안한다. 음악 분석은 RMS를 이용하여 리듬이 강한 부분을 찾았으며, 사진 분석은 구조 단순도와 얼굴 영역 추출을 이용하여 인물 사진과 풍경사진으로 분류하였다. 사진 분석은 86.4%의 성공률을 보였으며, 이를 이용하여 음악 리듬에 맞은 사진 변화 위치와 사진간의 연관성을 가진 순서 배치를 할 수 있었다. 따라서 음악 분석과 사진 분석을 이용한 자연스럽고 효과적인 동영상을 제작 할 수 있다.

다국어 초록 (Multilingual Abstract)

Consumers changed to the subject to produce a digital contents as data transmission technique is advanced and a digital machine is diffused variously. Users are interested greatly in a user creative movie (UCM) production among various online contents. The UCM production method which uses the music and picture is the method that users make the UCM more easily. However, the UCM production service has the problem that any association does not exist in the music and picture and that the picture changes according to fixed time interval without the relation at a music rhythm. To solve this problem, we propose the UCM production method which uses a music analysis and picture analysis in the paper. A music analysis finds a picture change time according to the rhythm and a picture analysis finds the association of the picture. A music analysis finds strong parts of the sound which uses Root-Mean-Square (RMS). And a picture analysis classifies the picture as a scenery picture and people picture which uses structure simplicity of the picture(SSP) and face region detection. A picture analysis got correct result of 86.4% in the experiment and we can finds the association at each picture and arranges the sequence which the picture appears. Therefore, if we use a music and picture analysis at the UCM production, users may make natural and efficient movie.

참고문헌 (Reference)

1 "UCC의 동향 및 전망" 정보통신연구진흥원 (1262) : 2006

2 "Rhythm and Tempo Recognition of Music Performance from a probabilistic Approach" 357-364, 2004

3 "Principles of Electric Machines with Power Electronic Applications" Wiley- IEEE Press 496-, 2002

4 "On Peak-Detecting and RMS Feedback and Feedforward Compressors" 2003

5 "Nealy 50MM Americans Create Web Content" 2006

6 "Multichannel Dynamic Range Compression For Music Signals" 2 : 1013-1016, 1996

7 "MP3 and AAC Explained" 1999

8 "Example-based object detection in images by components" 23 (23): 349-361, 2001

9 "Dancing-to-Music Character Animation" 25 (25): 2006

10 "Bayesian modelling of temporal structure in musical audio" 29-34, 2006

11 "An Extended Set of Haar- like Features for Rapid Object Detection" 1 : 900-903, 2002

12 "A fuzzy approach towards perceptual classification and segmentation of MP3/AAC audio" 727-730, 2004

13 "A Bigger bang" 2006