음성 인식과 텍스트 확장 알고리즘을 이용한 인물 성향 분석에 관한 연구 - 영화 내 주연 배우의 성향 중심으로

국문 초록 (Abstract)

다양한 사람들의 인물 성향을 분석하기 위해서는 종합 검사, 성격 및 지능검사 등 정밀 분석이 필요하지만, 검사자의 개인정보보호 문제, 검사 문항에 관한 저작권법 등의 인물 성향 분석을 위한 데이터 부족 문제로 인해 대체할 방안이 필요하다. 본 논문에서는 영화나 드라마 속 등장하는 등장인물들의 경험, 대사 등을 통해 인물의 성격을 분석하는 연구를 수행하였다. 영화에서 음성데이터를 추출한 뒤, Google Cloud Speech-To-Text API를 사용하여 영화에 대한 대사 정보를 도출하였으며, IBM Watson Personality Insights를 통해 성격 특성 정보 백분위를 도출하였다. 하지만 분석 결과에 대한 신뢰성 부족, 충분하지 않은 대사 정보 등을 보완하기 위해 텍스트 확장 기법을 사용하여 실험을 진행하였으며, 텍스트 확장 전과 후의 실험 결과를 비교하였을 때, 125개의 항목 중, 102개 항목의 성능이 향상되어 총 81.6% 성능 향상이 됐음을 확인할 수 있었다. 이를 통해 영화나 드라마 속 등장하는 등장인물의 대사를 통한 인물의 성격 분석이 가능함을 확인할 수 있었다. 향후 연구에서는 본 논문에서 수행하였던 음성인식에 대한 성능, 데이터 정제작업 등을 보완하기 위한 연구와 텍스트 확장에 적합한 하이퍼 파라미터, 기술적 성능 향상을 위한 연구를 수행하고자 한다.

다국어 초록 (Multilingual Abstract)

In order to analyze the character disposition of various people, precise analysis such as a comprehensive test, personality and intelligence test is required. However, there is a need for an alternative method due to the lack of data for analyzing character propensity, such as the personal information protection problem of the participant and the copyright law on inspection items. In this paper, a study was conducted to analyze the character"s personality through the experiences and lines of characters appearing in movies or dramas. After extracting the speech data from the movie, the dialogue information for the movie was derived using the Google Cloud Speech-To-Text API, and the personality characteristic information percentile was derived through IBM Watson Personality Insights. In order to compensate for the lack of reliability of the analysis results and insufficient dialogue information, the experiment was conducted using the text augmentation technique. When comparing the experimental results before and after the text augmentation, the performance of 102 items out of 125 items It was confirmed that the performance improved by 81.6%. Through this, it was confirmed that it is possible to analyze the character"s personality through the dialogue of the characters appearing in the movie or drama. In future research, we intend to carry out research to complement speech recognition performance and data refining work performed in this paper, hyperparameters suitable for text augmentation, and research to improve technical performance.

목차 (Table of Contents)

• Ⅰ. 서론
• Ⅱ. 관련 연구
• Ⅲ. 연구방법 및 절차
• Ⅳ. 실험 및 분석 결과
• Ⅴ. 결론 및 향후 계획
• 참고문헌
• 국문초록
• Abstract

참고문헌 (Reference)

• 1 방정욱, "형태소 발음변이를 고려한 음성인식 단위의 성능" 한국음성학회 10 (10): 111-119, 2018
• 2 이철성, "한글 마이크로블로그 텍스트의 감정 분류 및 분석" 한국정보과학회 40 (40): 159-167, 2013
• 3 박순찬, "잔향 환경 음성인식을 위한 다중 해상도 DenseNet 기반 음향 모델" 한국음성학회 10 (10): 33-38, 2018
• 4 이미영, "인간과 인공지능 로봇 캐릭터의 비교 연구-너도 인간이니? 기반으로" 영상문화콘텐츠연구원 (17) : 261-278, 2019
• 5 이혜원, "영상 보정을 이용한 인물 인식 고도화에 대한 연구" 영상문화콘텐츠연구원 (20) : 225-246, 2020
• 6 김민식, "심층신경망 기반의 음성인식을 위한 절충된 특징 정규화 방식" 한국음성학회 12 (12): 65-71, 2020
• 7 프랜디(주), "심리 기반 개인성향 분석 및 성향간 어울림지수 산출 모델 및엔진 개발" 서비스연구개발사업(KEIT) 3-, 2014
• 8 신판섭, "신조어 감성사전 기반의 소셜미디어 감성분석 시스템" 한국컴퓨터정보학회 25 (25): 133-140, 2020
• 9 옥정우, "감성사전 구축과 SVM을 이용한 온라인 뉴스 댓글의 부정 및 긍정 성향 분석" 1189-1190, 2019
• 10 "wordvectors"
• 11 "textrank"
• 12 "textaugment 1.3.4"
• 13 "Watson Personality Insights"
• 14 Barrios, F., "Variations of the Similarity Function of TextRank for Automated Summarization"
• 15 "Speech-to-Text"
• 16 Nenny Anggraini, "Speech recognition application for the speech impaired using the android-based google cloud speech API" 16 (16): 2733-2739, 2018
• 17 "Personality Insights"
• 18 T. V. Prasad, "Hindi Speech Enabled Windows Application using Microsoft SAPI" 4 (4): 425-436, 2013
• 19 Veton Këpuska, "Comparing Speech Recognition Systems (Microsoft API, Google API And CMU Sphinx)" 7 (7): 20-24, 2017
• 20 "Cloud Speech-to-Text"
• 21 Joshua Y. Kim, "A Comparison of Online Automatic Speech Recognition Systems and the Nonverbal Responses to Unintelligible Speech"