영화 시나리오와 영화촬영기법을 이용한 감정 예측 시스템 = Emotion Prediction System using Movie Script and Cinematography

다국어 초록 (Multilingual Abstract)

Recently, we are trying to predict the emotion from various information and to convey the emotion information that the supervisor wants to inform the audience. In addition, audiences intend to understand the flow of emotions through various information of non-dialogue parts, such as cinematography, scene background, background sound and so on.
In this paper, we propose to extract emotions by mixing not only the context of scripts but also the cinematography information such as color, background sound, composition, arrangement and so on. In other words, we propose an emotional prediction system that learns and distinguishes various emotional expression techniques into dialogue and non-dialogue regions, contributes to the completeness of the movie, and quickly applies them to new changes. The precision of the proposed system is improved by about 5.1% and 0.4%, and the recall is improved by about 4.3% and 1.6%, respectively, when compared with the modified n-gram and morphological analysis.

국문 초록 (Abstract)

최근에 다양한 정보로부터 감정을 예측하여 청중에게 감독이 알리고자 하는 정보를 빠르게 전달하고자 한다. 또한, 청중은 감독의 의도를 대화 내용에 나타나는 대사뿐만 아니라, 영상내의 다양한 정보인 촬영 기법, 장면의 배경, 배경 음악 등을 통해 비대사 구간에서도 감정의 흐름을 이해하려고 한다.
본 논문에서는 대사와 같은 문맥의 상황뿐만 아니라, 촬영 영상에 담아낸 색상, 음향, 구도, 배치 등에 의해 표현된 정보를 혼합하여 감정을 추출하고자 한다. 즉, 다양한 감정 표현 기법을 대사 구간, 비대사 구간으로 나누어 학습하고 판별하여 영상의 완성도에 기여하고 새로운 변화에 빠르게 적용할 수 있는 감정 예측 시스템을 제안한다. 본 논문에서 제안한 감정 예측시스템이 변형된 n-gram 방식과 형태소 분석을 적용한 사례와 비교했을 때, 정확도는 약 5.1%, 0.4% 향상되었고, 재현율은 약 4.3%, 1.6% 향상되었다.

참고문헌 (Reference)

• 1 김진수, "문단 분석을 통한 문서 내의 감정 예측" 한국디지털정책학회 12 (12): 249-255, 2014
• 2 김옥섭, "감정 온톨로지 기반의 영화 추천 기법" 한국멀티미디어학회 18 (18): 1068-1082, 2015
• 3 "mecab-ko"
• 4 Harry Box, "Set Lighting Technician's Handbook: Film Lighting Equipment, Practice, and Electrical Distribution" Routledge 2013
• 5 D.L. McGuinness, "OWL Web Ontology Language Overview"
• 6 "NLTK"
• 7 R Baeza-Yates, "Modern Information Retrieval: The Concepts and Technology behind Search" ACM Press New York 2004
• 8 "KoNLPy"
• 9 Manning, C. D, "Introduction to Information Retrieval" Cambridge University Press 2009
• 10 "IMSDb"
• 11 David Stump, "Digital Cinematography: Fundamentals, Tools, Techniques, and Workflows" Routledge 2014
• 12 J. W. Han, "Data Mining: Concepts and Techniques" Morgan Kaufmann 2011
• 13 Blain Brown, "Cinematography: Theory and Practice: Image Making for Cinematographers and Directors" Routledge 2016
• 14 Scherer, Klaus R, "Approaches to Emotion" Psychology Press 2014
• 15 Bernhard E Boser, "A Training Algorithm for Optimal Margin Classifiers" 144-152, 1992