영상 콘텐츠 오브젝트의 감정 영향력 분석을 통한 오브젝트 감정 순위 결정법

국문 초록 (Abstract)

현대에는 다양한 기술의 발전으로 동영상 콘텐츠가 증가하고 있고, 이에 따라 사람들은 자신의 감정 표현에 있어 동영상 매체를 활용하는 것이 만연해졌다. 따라서 텍스트 분석뿐만 아니라 반응 동영상 속 시청자의 감정을 분석할 필요가 있다. 기존의 시스템은 콘텐츠의 관련 반응 동영상 속 시청자의 감정과 직결하여 오브젝트의 감정값을 도출하지는 않으므로 오브젝트의 감정값을 추출할 방법이 필요하다. 따라서 본 연구에서는 콘텐츠의 등장 오브젝트와 관련 반응 동영상 오브젝트의 감정 영향력을 분석하고 오브젝트 감정 순위를 결정할 수 있는 기법을 제안한다. 본 시스템은 감정 오브젝트 추출을 위해 대상 콘텐츠에 대한 반응 동영상 수집을 통해 시청자 감정을 분석하고, 대상 콘텐츠 속 오브젝트의 시청자 감정값을 정량화한다. 또한, 추출된 오브젝트들을 기반으로 감정별 오브젝트 사전을 구축한다. 다양한 동영상을 대상으로 한 실험을 통해 구간 가중치를 적용한 구간의 오브젝트 존재 변화에 따라 다중 오브젝트 가중치를 적용하여 감정 영향력 평가를 진행함으로써 선별적 감정 오브젝트 추출이 가능함을 보였다.

다국어 초록 (Multilingual Abstract)

Currently, video content is in demand because of the development of various technologies, that have led to the widespread use of video media for people to express their thoughts. Thus, it is necessary to analyze the viewer"s thoughts in the reaction video as well as text analysis. The existing system does not derive the sentimental value of the objects directly from the viewer"s thoughts in the related reaction video of the content, so an approach to extracting the objects sentiment is needed. Thus, this study analyzed the sentimental influence of the content"s appearance objects and associated reaction video objects and proposes techniques to extract the ranking of the objects sentiment. This system analyzed viewers" sentiment through collecting reaction videos to target content for extracting sentiment objects and quantifies viewer sentiment values of objects in the target content. A sentimental object dictionary was built based on the extracted objects. The experiments showed to collect effective sentimental objects selectively, applying multi-level weights to the analysis of sentiment objects depending on the change of their existence in specific periods of videos.

목차 (Table of Contents)

• 요약
• Abstract
• 1. 서론
• 2. 관련 연구
• 3. SOISA(Sentimental Object Identification System using Sensitivity Analysis)
• 4. 실험 환경 및 결과 분석
• 5. 결과 검증
• 6. 결론
• References

참고문헌 (Reference)

• 1 김세진, "인터넷 용어의 감성 분석을 통한 동영상 광고 효과 분석 시스템 설계" 한국정보과학회 46 (46): 919-925, 2019
• 2 안인숙, "비언어적 의사소통의 의미강화 양상 연구" 국어문학회 54 (54): 51-75, 2013
• 3 홍장선, "비언어 커뮤니케이션의 기호특성과 자아표현 연구: SNS 이모티콘을 중심으로" 한국커뮤니케이션학회 24 (24): 5-31, 2016
• 4 "https://azure.microsoft.com/en-us/services/cognitive-services/face/"
• 5 Bilie Eilish, "Youtube video"
• 6 Mrshmello, Bastille, "Youtube video"
• 7 BTS, "Youtube video"
• 8 Taeyeon, "Youtube video"
• 9 IU, "Youtube video"
• 10 Philipp Michel, "Real Time Facial Expression Recognition in Video using Support Vector Machines" 258-264, 2003
• 11 S. Ko, "Object Classification and Extraction Techniques using Deep" 26-33, 2017
• 12 K. Park, "Emotion Recognition for Spontaneous Facial Expression Video based on 3D Euclidean Distance" 938-940, 2017
• 13 M. Kim, "Emotion Prediction from Images Based on Color and Object Word" 115-116, 2015
• 14 S. Lee, "Effect Evaluation on Sentiment objects of Video content and their corresponding response" 1268-1270, 2020
• 15 S. Noh, "Analysis and Recognition of Temporal Changes in Facial Expressions" Hanyang University 2008
• 16 K. Park, "A Study on the Tourism Recognition of Foreign Tourists to North Korea and Tourism destination image of North Korea : Through the Big Data Analysis of YouTube Comments" Kyung Hee University 2020
• 17 S. Kim, "A Design of a Video Advertisement Analysis Service based on Youtube Users’ Comments" 1988-1990, 2018
• 18 Y. Jeong, "A Design of Sentiment Analysis System for Video Contents with Image Deep Learning" 1239-1241, 2019