생성형 AI를 활용한 애니메이션 제작과정에 관한 연구 = A Study of the Animation Production Process Using Generative AI

다국어 초록 (Multilingual Abstract)

Artificial intelligence technology, which started with the belief that it could imitate human intelligence, has developed rapidly. Generative AI technology, a core artificial intelligence technology, can be used in all fields of our society, so its technological development and utilization are beyond imagination. Generative AI technology is producing broad and deep results according to the purposes given by humans, such as science, medicine, economy, and industry. Results are produced at a speed that cannot be compared to the past. Of course, the results based on this generative AI technology are not perfect, and serious problems such as theft and plagiarism have not been resolved.
Although the results based on generative AI technology proposed by humans are not yet perfect, the reality is that it is difficult to ignore them. In particular, the fact that generative AI technology is being used even in the production process of purely human creations is causing several controversies. However, these works have appeared in our society and have reached a level where they are no different from human creations. Products based on generative AI technology are being used in various industrial fields or winning awards in contests where creativity is a priority.
Generative AI extracts and creates appropriate elements from an already established database according to commands given by humans. Of course, these results are immediate, sporadic, and fluid, so they have the characteristic of being unfixed and incomplete. Artificial intelligence's generative AI technology creates existing styles by copying, imitating, or modifying similar works. This can be seen as a new technology or change that creates a creative work. Artistic works such as art, music, and film have always been influenced by technology. There have been significant changes and developments in music and film art through digital technology. Creators have always taken advantage of new technological methods. Art and technology are bound to have a close relationship, and in particular, modern artificial intelligence (AI) technology has become an important opportunity to effectively express and significantly develop the style and characteristics of existing works. Generative AI technology, which has begun to be used in the fields of literature and art, is sparking an active combination of humans and technology. This is because creative works are created through human creativity and expressed technical skills, and the production process is implemented more easily and quickly than ever before. Currently, generative AI is being used as an auxiliary tool to increase the work efficiency of creators and complement their abilities. Although the acceptance of these unfamiliar tools is not yet familiar, it is expected that they will be utilized at a rapid pace.
The purpose of this study is to produce animation, a creative work based on generative AI technology, and to suggest future efficient and creative video production methods through this. Specifically, first, understanding and identifying the characteristics of artificial intelligence and generative AI technology. Second, we produce an animation prototype that reflects generative AI technology and traditional Chinese elements. Third, it explores the possibility of supplementing technical problems in the process of creating generative AI animation prototypes and serving as a rational creative assistant.
In previous research, current artificial intelligence videos mainly focus on solving technical problems, and lack consideration of artistic quality and cultural value. The research focused on understanding the operating principles of generative AI and image, video, and sound synthesis technologies, as well as ways to reflect tradition and reflect them in works. The researcher conducted an animation prototype project that reflected Chinese tradition and culture to complement the problems of current artificial intelligence and strengthen artistry. The ‘Dragon and Tiger City’ production project used generative AI to proceed in the following order: story creation, image model selection, character and background composition, image storyboard creation, and video production. In the process of analyzing traditional Chinese mythology and based animation and reflecting traditional characteristics in the story structure, the purpose for animation production was specified in ChatGPT and a story was created using specific prompts. As a result, a story with a simple plot was initially created. By describing events and characteristics in detail in ChatGPT and supplementing specific content, the researcher was able to obtain results that fit the plot of traditional mythology. In the image production process, Midjourney's Niji Model V5 and Scenic Style were used to configure the project style, and the characteristics of traditional Chinese clothing, Hanfu, sacred beasts, and buildings were identified and characters were created based on these. and designed the background. The characters embody the external characteristics of the main character ‘Akasha’ and the divine beast ‘Hyeonmu’ and reflect traditional elements. In background production, the characteristics of Tang Dynasty architecture were reflected and seed values were used to maintain a consistent painting style and color. In the scene production process, image prompts were designed with ChatGPT, created and modified with Midjourney, and finished with video using Genmo AI. The study carried out a process of identifying and supplementing technical problems that arose in the production of an animation prototype that combined generative AI and traditional Chinese elements. Artificial intelligence technology has an imitation function and generates results based on input keywords and images, so it goes through a different control process and problem-solving method than individual creation. We overcame the technical problems of the production project and searched for a reasonable animation production method. Art changes with technology, and we created an animation prototype using generative AI through the role of humans in the artificial intelligence creation process and a solution for efficient creation, and the researcher's control during the design, modeling, and finishing process of a story that reflects tradition. and coordination were applied consistently. The possibilities of using artificial intelligence as a technological tool were explored. We reviewed the impact of future technological developments on art and culture, and presented new possibilities in the fields of art and creation through cooperation between humans and AI by reflecting on tradition using AI.

국문 초록 (Abstract)

인간의 지능을 모방할 수도 있다는 믿음으로 시작된 인공지능 기술은 급속도로 발전되었다. 핵심 인공지능 기술인 생성형 AI 기술은 우리 사회 모든 분야에 활용될 수 있어 기술 발전이나 활용도는 상상을 초월하고 있다. 생성형 AI 기술은 과학이나 의학, 경제, 산업 등 인간이 부여한 목적에 따라 광범위하고도 깊이 있는 결과를 만들어내고 있다. 결과 도출은 과거와 비교될 수 없는 빠른 속도를 갖는다. 물론 이런 생성형 AI 기술기반의 결과는 완벽하지 못하거나 도용이나 표절 등 심각한 문제성이 해결되지는 않았다.
인간이 제시한 생성형 AI 기술기반의 결과는 아직 완벽하지는 못하지만 이를 외면하기 어려운 게 현실이다. 특히 순수한 인간의 창작품 제작과정에서도 생성형 AI 기술이 활용되고 있음은 여러 논쟁을 일으키고 있다. 그러나 이런 작품들은 우리 사회에 등장, 인류의 창작품과의 변별과도 큰 차이가 없는 수준에 도달했다. 생성형 AI 기술기반의 생성물은 다양한 산업 분야에서 활용되거나 창작성이 우선되는 공모전에서도 수상받는 현상들이 나타나고 있다.
생성형 AI는 인간이 부여한 명령에 따라 이미 구축된 데이터베이스에서 적절한 요소를 추출하여 생성한다. 물론 이러한 결과는 즉각적이고 산발적이며 유동적이므로 고정되지 않은 불완전성을 갖는 특성이 있다. 인공지능의 생성형 AI 기술은 기존의 스타일을 복제, 모방, 유사한 작품을 변형하여 생성한다. 이는 창작물은 만드는 하나의 새로운 기술이나 변화로 볼 수 있다. 미술이나 음악, 영화 등 예술 작품들도 항상 기술의 영향을 받아왔다, 디지털 기술을 통해 음악이나 영화예술은 커다란 변화와 발전이 있었다. 창작자들은 항상 새로운 기술 방식을 활용해왔다. 예술과 기술은 긴밀한 관계를 맺기 마련인데 특히 현대의 인공지능의 생성형 AI 기술은 기존 작품의 스타일과 특성을 효과적으로 표현하고 크게 발전시킬 수도 있는 중요한 계기가 되고 있다. 문학과 예술 분야에서도 사용되기 시작한 생성형 AI 기술은 인간과 기술의 적극적 결합을 촉발하고 있다. 창작품은 인간의 창의성과 표현되는 기술력에 의해 탄생하는데 그 제작과정이 그 어느 때보다 쉽고도 빠르게 구현되기 때문이다. 지금은 생성형 AI는 창작자의 업무 효율을 높이고 능력을 보완하는 보조적 도구로 활용되고 있다. 이런 생소한 도구 수용은 아직 익숙하지 않은 상황이지만 빠른 속도로 활용될 것으로 전망된다.
본 연구의 목적은 생성형 AI 기술을 기반의 창작물인 애니메이션 제작과 이를 통해 미래 효율적이고 창의적 영상물 제작 방안을 제시함이다. 구체적으로는 첫째, 인공지능 및 생성형 AI 기술에 대한 이해와 특징 파악이다. 둘째, 생성형 AI 기술과 중국 전통 요소를 반영한 애니메이션 프로토타입을 제작한다. 셋째, 생성형 AI 애니메이션 프로토타입 제작 과정에서 기술적 문제점 보완과 합리적 창작 보조 도구로서의 가능성을 탐구하는 것이다.
선행연구에서 현재의 인공지능 영상물은 주로 기술적 문제를 해결하는 데 중점을 두고 있어 작품성과 문화성 고려는 미흡했다. 연구는 생성형 AI의 작동 원리와 이미지, 영상, 소리 합성 기술을 이해하고, 전통성 반영 방식을 파악하여 이를 작품에 반영하는 데 초점을 맞추었다. 연구자는 현재의 인공지능의 문제점을 보완하고 예술성을 강화하기 위해 중국 전통과 문화를 반영한 애니메이션 프로토타입 프로젝트를 진행하였다. ‘용호성’ 제작 프로젝트는 생성형 AI를 활용하여 이야기 제작, 이미지 모델 선정, 캐릭터 및 배경 구성, 이미지 콘티 제작, 영상 제작 등의 순서로 진행되었다. 중국 전통 신화와 기반 애니메이션을 분석하고 이야기 구조에 전통 특징을 반영하는 과정에서, 애니메이션 제작을 위한 목적을 ChatGPT에 명시하고 구체적인 프롬프트를 활용하여 이야기를 생성한 결과, 초기에는 단순한 플롯의 이야기가 생성되었다. 연구자는 ChatGPT에 사건과 특징을 세부적으로 묘사하고 구체적인 내용을 보완함으로써 전통 신화의 플롯에 맞는 결과물을 얻을 수 있었다. 이미지 제작과정에서는 Midjourney의 Niji Model V5와 Scenic Style을 활용하여 프로젝트의 스타일을 구성하였고, 중국 전통 복식인 한푸(漢服)와 신령한 짐승 신수(神兽), 건물 등의 특징을 파악하여 이를 기반으로 캐릭터와 배경을 디자인했다. 인물은 주인공 '아카샤'와 신수 '현무'의 외형 특징을 구체화하고 전통 요소를 반영하였다. 배경 제작에서는 당나라 건축의 특징 입력 후, 시드값을 활용하여 일관된 화풍과 색상을 유지하였다. 장면 제작과정에서 ChatGPT로 이미지 프롬프트를 설계하고 Midjourney로 생성 및 수정 과정을 거쳐 Genmo AI로 영상화하여 마무리하였다. 연구는 생성형 AI와 중국 전통 요소를 결합한 애니메이션 프로토타입 제작에서 발생한 기술적 문제를 식별하고 보완하는 과정을 수행했다. 인공지능 기술은 모방 기능이 있어 입력된 키워드와 이미지를 기반으로 결과를 생성하므로 개인의 창작과 다른 제어 과정과 문제 해결 방식을 거쳤다. 제작 프로젝트의 기술적 문제를 극복하며 합리적인 애니메이션 제작방법을 모색했다. 예술은 기술과 함께 변화하며 인공지능 창작 과정에서 인간의 역할과 효율적인 창작을 위한 해결 방식을 통해 생성형 AI를 활용한 애니메이션 프로토타입을 제작하였고, 전통 반영 이야기 설계 및 조형과 마무리 과정에서 연구자의 제어 및 조율이 일관되게 적용되었다. 기술적 도구로서 인공지능을 활용하는 것에 대한 가능성을 탐구했다. 미래의 기술 발전이 예술과 문화에 미치는 영향을 검토하며, AI를 활용한 전통성 반영을 통해 인간과 AI 간의 협력을 통한 예술과 창작 분야의 새로운 가능성을 제시하였다.

목차 (Table of Contents)

• 제1장 서론 1
• 제1절 연구의 필요성 및 목적 1
• 제2절 연구의 범위 및 방법 8
• 제3절 연구의 흐름 9
• 제4절 선행연구 11
• 1. 생성형 AI 애니메이션 배경 제작 사례 11
• 2. 동작을 반영한 생성형 AI 영상 사례 16
• 3. 생성형 AI 복합 활용 영상 제작 사례 20
• 제2장 생성형 AI 및 디지털 콘텐츠 제작 30
• 제1절 생성형 AI의 이해 30
• 1. 인공지능의 등장과 개념 30
• 2. 생성형 AI의 개념과 이해 34
• 제2절 인공지능을 활용한 디지털 콘텐츠 제작 39
• 1. 인공지능 이미지 제작 기술 39
• 2. 인공지능 영상 제작 기술 46
• 3. 인공지능 소리 합성 제작 기술 51
• 제3장 중국 신화 애니메이션 창작의 이해 58
• 제1절 중국 신화의 특징 58
• 1. 중국 신화의 정의와 발전 58
• 2. 중국 신화의 주제 61
• 3. 중국 신화의 민족성 64
• 제2절 중국 전통 신화 애니메이션의 특징 66
• 1. 중국 신화 애니메이션의 이해 66
• 2. 중국 신화 애니메이션의 특징 70
• 3. 중국 신화 애니메이션의 이야기 구조 76
• 제4장 중국 신화 애니메이션을 위한 생성형 AI 파이프라인 82
• 제1절 '용호성' 애니메이션 프로토타입 제작 82
• 1. 생성형 AI를 활용한 애니메이션 프로토타입 제작 82
• 2. 애니메이션 프로토타입의 신화 반영 방안 86
• 2.1. 세계관 속 중국 전통 정신의 반영 86
• 2.2. 등장인물 및 요소의 신화 반영 87
• 3. 애니메이션 스토리텔링 89
• 제2절 ChatGPT 스토리텔링 작성 91
• 1. 초기 시나리오 구성 91
• 2. 구체화 및 대화 형태의 시나리오 구성 100
• 제3절 AI 이미지 스타일 반영 110
• 1. 모델 선정 110
• 2. 스타일 프롬프트 설정 114
• 제5장 생성형 AI 애니메이션 프로덕션 디자인 126
• 제1절 생성형 AI를 활용한 프로덕션 디자인 126
• 1. 중국 애니메이션의 캐릭터 이해 126
• 2. 주인공 ‘아카샤’ 제작과정 128
• 2.1. 캐릭터 디자인 설정 128
• 2.2. 얼굴 및 헤어 디자인 136
• 2.3. 색채 및 표정 제작 145
• 2.4. 복장 및 체형 제작 153
• 3. 신수 '현무' 제작과정 171
• 3.1. 캐릭터 디자인 설정 171
• 3.2. 생성형 AI를 활용한 초안 디자인 177
• 3.3. 색채 및 삼면도 제작 184
• 제2절 배경 제작과정 190
• 1. 진홍 가문 ‘대문’ 제작과정 190
• 1.1. 배경 컨셉 디자인 설정 190
• 1.2. 건물 디자인 제작 194
• 1.3. 세부 디자인 과정 200
• 2. 진홍 가문 ‘현관’ 제작과정 205
• 2.1. 건물 디자인 제작 205
• 2.2. 진홍 가문 ‘현관’ 세부 디자인 208
• 2.3. 진홍 가문 배경 구성 211
• 제3절 AI 영상화 과정 및 한계 215
• 1. 장면 생성 및 문제 해결 과정 215
• 2. ChatGPT를 활용한 장면 생성 221
• 3. 장면 생성 및 영상화 232
• 4. 생성형 AI 제작 과정 및 한계 242
• 제6장 결론 256
• 참고문헌 262
• ABSTRACT 266