미디어 이용 데이터와 인공지능을 활용한 데이터 시청각화에 대한 예비 연구- 프로토타입 <서울 미디어 리듬을 위한 연습곡>을 중심으로 = A Preliminary Study of Data Audio-Visualization using Media Use Data and Artificial Intelligence - Focusing on the Prototype, <Etude for the Media Rhythm of Seoul>

다국어 초록 (Multilingual Abstract)

This study aims to present the changes in media use by Seoul citizens in the form of a real-time audio-visualization prototype, entitled "Etude for the Media Rhythm of Seoul," based on media use data and artificial intelligence. For this purpose, we reviewed Henri Lefebvre’s theory of rhythmanalysis and addressed the necessity to understand media use in a spatio-temporal context. Next, we constructed two indices from the KBS Time Use Survey: a share-by-media type and a diversity index. These indices are expressed in an audio-visual manner on a map of Seoul, and a classical artificial intelligence technique, the Markov chain, is applied to add the auditory elements of melody and harmony to the visual representation. "Etude for the Media Rhythm of Seoul" created in this way has significance as a new data expression that allows the human senses to perceive the use of media intuitively. According to the results, implications and suggestions for synesthetic representations for media using rhythm are discussed.

국문 초록 (Abstract)

본 연구의 목적은 미디어 이용 데이터와 인공지능을 활용하여 서울시민의 미디어 이용 변화를 <서울 미디어 리듬을 위한 연습곡>이라는 제목의 시청각 재현물로 표현하는 것이다. 이를 위해 앙리 르페브르의 “리듬분석” 이론을 토대로 미디어 이용을 생활시공간과의 관계 속에서 파악해야 하는 필요성에 대해 설명하고, KBS가 제공하는 <국민생활시간조사> 데이터를 시청각 재현물로 표현하기 위해 ‘점유율’ 및 ‘다양성지수’를 설정하였다. 이 지수들을 주로 서울시 지도에 시각적으로 표현하는 한편, 고전 인공지능 기법인 마코프 연쇄를 적용해 시각 재현물에 화음진행, 베이스 그리고 멜로디의 청각 요소를 덧붙였다. 이렇게 만들어진 <서울 미디어 리듬을 위한 연습곡>은 미디어 이용을 인간 감각이 직관적으로 지각하게 해 주는 새로운 데이터 표현 양식으로서 의의를 지닌다. 본 연구는 미디어 이용 리듬에 대한 공감각적 표현이 지니는 의미를 설명하고 후속 연구를 제언하였다.

참고문헌 (Reference)

• 1 강남준, "컨버전스와 다중 미디어 이용" 커뮤니케이션북스 2011
• 2 이재현, "컨버전스와 다중 미디어 이용" 커뮤니케이션북스 1-17, 2011
• 3 이재현, "인터넷, 전통적 미디어, 그리고 생활시간 패턴: 시간 재할당 가설의 제안" 한국언론학회 49 (49): 224-254, 2005
• 4 이재현, "미디어 이용에 대한 리듬 분석: 미디어화 이후의 리듬" 언론정보연구소 52 (52): 83-122, 2015
• 5 박지영, "디지털미디어 시대 리듬분석의 한 사례 - ICT 사용과 일상생활의 리듬을 중심으로" 사단법인 언론과 사회 23 (23): 5-63, 2015
• 6 KBS, "국민생활시간조사" 2010
• 7 Edensor, T, "Walking in rhythms : place, regulation, style and the flow of experience" 25 (25): 69-79, 2010
• 8 Miyazaki, S, "Urban sounds unheard-of : a media archaeology of ubiquitous infospheres" 27 (27): 514-522, 2013
• 9 이재현, "The Media Day: String Quartet for Henri Lefebvre"
• 10 Flaherty, M. G, "Sociotemporal rhythms in E-mail: a case study" 14 (14): 39-49, 2005
• 11 Manovich, L, "Small tech: The culture of digital tools" University of Minnesota Press 3-9, 2008
• 12 Degen, M. M, "Sensing cities : Regenerating public life in Barcelona and Manchester" Routledge 2008
• 13 Lefebvre, H, "Rhythmanalysis: Space, time and everyday life" Continuum 2004
• 14 Lefebvre, H, "Rhythmanalysis: Space, time and everyday life" Continuum 85-100, 2004
• 15 Zaichkowsky, J. L, "Measuring the involvement construct" 12 : 341-352, 1985
• 16 Kiefer, P, "Markov chains of chord progressions" 10 : 16-21, 2016
• 17 Highmore, B, "Homework: routine, social aesthetics and the ambiguity of everyday life" 18 (18): 306-327, 2004
• 18 Degen, M, "Geographies of rhythm: Nature, place, mobilities and bodies" Ashgate 21-31, 2010
• 19 Spinney, J, "Geographies of rhythm: Nature, place, mobilities and bodies" Ashgate 113-127, 2010
• 20 Edensor, T, "Geographies of mobilities: Practices, spaces, subjects" Ashgate 189-204, 2011
• 21 Csikszentmihalyi, M, "Flow: The psychology of optimal experience" Harper&Row 1990
• 22 Heath, R, "Emotional engagement : how television builds big brands at low attention" 49 (49): 62-73, 2009
• 23 Nansen, B, "Domestic orchestration: rhythms in the mediated home" 18 (18): 181-207, 2009
• 24 Max, "Documentation: ml.markov Reference (Max version 8.1.10 built-in reference)"
• 25 Solomon, M. R, "Consumer behavior : Buying, having and being" Pearson Education 2011
• 26 Aldred, R, "Constructing mobile places between ‘leisure’ and ‘transport’: a case study of two group cycle rides" 46 (46): 523-539, 2012
• 27 Simpson, P, "Chronic everyday life: rhythmanalysing street performance" 9 (9): 807-829, 2008
• 28 Simpson, P, "Apprehending everyday rhythms: rhythmanalysis, time-lapse photography, and the space-times of street performance" 19 (19): 423-445, 2012