Research on the reconstruction of interactive art framework in the era of artificial intelligence : focused on "Chemistry" the CFT project with GAN technique

다국어 초록 (Multilingual Abstract)

The advent of the AI era has brought new features and expression methods to art. Diversified AI technologies has made art break through the traditional form cycle. Human beings can feel the environment more truly through the transformation of digital programs. Meanwhile, AI’s characteristic of automation has reconstructed the relationship between creators, viewers, and works of art. The creator, with its identity hidden in data codes, becomes the designer and maintainer, while the viewer becomes the provider of data, participating in the creation of works more actively and enriching the interactivity of works of art. The transformation of the identity of the creator and the viewer also drives the transformation of the identity of works of art. GAN and other technologies with the function of independently generating works of art make works of art become another subject of creation. It seems that works of art becomes an “artist”. Therefore, it is particularly important to explore the relationship between human beings and artificial intelligence. This research，selecting four excellent works in the field of AI interactive art, analyzes the interactive reconstruction in the works, and, on this basis, further explains the author’s own AI interactive art work Chemistry.

Chemistry is an interactive art work created mainly with the technology of the Generative Adversarial Network (GAN). We use GAN to identify the viewers’ facial features and age them. With the four seasons changing and flowers withering in animation style, the viewers have empathy with the work in the process of watching the aging of their faces, extending human consciousness, and also the emotional space of viewers and works. In the process of creating Chemistry, through analyzing the precedent works of art, we find that artificial intelligence cannot accurately and effectively identify the deep emotion fluctuations of human beings. On the contrary, art is the one of the most human things. Human beings create art, while, at the same time, art keep influencing everyone with its invisible thoughts. Therefore, through the creation of the art work Chemistry, we hope to use “art” as a “bridge” to connect humans and artificial intelligence, so as to make technology more humanized.

This research explores the reconstruction of the relationship between human beings and artificial intelligence with the philosophical thinking of inter-subjectivity, and, based on the practice of thinking inspired by the author's artificial intelligence interactive work of art, expounds the interactive art in the era of artificial intelligence, and discusses the changes of the context by integrating “interaction” into the background of human scientific and technological development. The rethinking of the relationship between creators, works and viewers in the era of artificial intelligence, the philosophical view that artificial intelligence is the extension of human consciousness, and the view of human-computer symbiosis and the interconnection of all things are also discussed in This research. It comes to the conclusion that we should study the relationship between human beings and artificial intelligence from the perspective of philosophy when, today, the whole society pays more attention to scientific and technological research, and pay attention to the initiative of artificial intelligence as a medium.

국문 초록 (Abstract)

AI 시대가 도래하면서 예술은 새로운 특징과 표현 방법을 갖게 되었다. 다원화된 AI 기술 덕분에 예술 분야는 전통적인 방식을 획기적으로 극복할 수 있게 되었다. 인류는 디지털 트랜스포메이션(Digital Transformation)을 통해 주변 환경을 더욱 현실감 넘치게 체험할 수 있다. 이와 동시에 AI가 지닌 자동화 특징으로 인해 창작자, 관중, 예술 작품 간의 관계도 재구성되었다. 창작자는 데이터 코드에 정체성이 드러나지 않게 되고, 창작자의 역할도 코딩을 설계하고 유지 보수하는 역할로 바뀌었다. 한편, 관중은 데이터를 제공하는 역할로 바뀌면서 더 적극적으로 작품의 창작에 참여하고 예술 작품의 상호작용성을 더욱 풍부하게 만들었다. 창작자와 관중의 정체성이 변화함으로 인해 예술 작품의 정체성도 변화했다. GAN 등 자체적으로 예술 작품 생성이 가능한 기술 덕분에 예술 작품은 스스로 창작 주체의 역할을 수행할 수 있는 한 명의 ‘예술가’가 되었다. 이러한 점을 전제로 인류와 인공지능의 관계를 논하는 것 또한 아주 중요해졌다. 본 논문은 AI 상호 작용 예술 분야의 우수 작품 4개를 분석했다. 또한 작품에서 드러난 상호 작용 재구성 현상에 대한 분석을 기반으로 필자의 AI 인터랙티브 예술 작품인 ‘케미스트리(Chemistry)’를 더욱 심도 있게 연구하고 논의한다.

‘케미스트리(Chemistry)’는 생성적 대립 신경망(GAN)을 주요 기술로 적용한 상호 작용 예술 작품이다. 우리는 GAN을 통해 관중의 얼굴 특징을 식별하고 이를 노화시켰다. 애니메이션 방식으로 사계절이 변하고 꽃이 시들면서 관객이 개인의 얼굴이 노화되는 것을 지켜보는 과정에서 작품과 공감대를 형성한다. 그러면서 인류 의식을 확장하고 관객과 작품의 감정적 공간을 확대했다. 작품 제작 과정에서 선행 작품들을 지속적으로 분석하는 과정에서 인공지능이 인류의 심오한 감정 변화를 정확하게 식별할 수 없다는 점을 발견했다. 이와 반대로, 예술은 가장 인간적인 요소라고 할 수 있다. 예술은 무형의 형태로 모든 사람들에게 지속적으로 영향을 미치고 있다. 예술작품인 ‘케미스트리(Chemistry)’에서는 인간과 인공지능 간의 소통을 가능케하는 ‘다리’ 역할을 수행하는 점을 미디어아트 기법으로 표현했다. 인간과 인공지능의 감정적 소통을 통해 기술이 더욱 인간중심적으로 발전할 수 있기를 바란다.

우리는 과학 기술의 발전 과정에 진정성 있게 참여함과 동시에 진리를 추구해야 한다. 본 논문에서는 상호주관성이라는 철학적인 사고 방식을 바탕으로 인간과 인공지능 사이에서 재구성되는 관계를 연구한다. 또한 필자의 AI 인터랙티브 아트 작품을 영감과 사고를 실천하는 기본 바탕으로 삼아 인공지능 시대 인터랙티브 아트를 고찰하고, ‘상호 작용’을 인간 과학 기술 발전과 접목시켜 그 맥락적인 변화를 알아본다. 뿐만 아니라 인공지능 시대의 창작자와 작품과 관중 간의 관계를 재조명하여 인공지능이 인간의 의식이 확장된 것이라는 철학적 관점과 사람과 기계의 공존, 그리고 만물의 연결이라는 관점에 대해 논한다. 과학 연구에 대한 사회적 관심이 날로 높아지는 가운데, 우리는 철학적 관점에서 인간과 인공지능 사이의 관계를 깊이 고찰해야 하며 매개체 역할을 하는 인공지능의 능동성에 주목해야 한다.

목차 (Table of Contents)

• 1. Introduction 1
• 1.1 Research Background 1
• 1.2 The Purpose and Necessity of the Research 2
• 1.3 The Content and Parameter of the Research 4
• 1.4 The Technical Development and Case Analysis of Artworks 6
• 1.5 The Result of the Research 10
• 1.6 The Rubric of the Paper 12
• 2. The Concept and Background of Interactive Art in the Era of Artificial Intelligence 13
• 2.1 The Theoretical Background 13
• 2.2 The Characteristics of AI Interactive Art 30
• 2.2.1 Groundbreaking Circulation of Mode the Conversion of Integrated Digital Program 31
• 2.2.2 Deep Learning-Automatic Generation 33
• 2.2.3 Kaleidoscopic Exchange-the Feedback of Sensual Sensitivity 35
• 2.2.4 Corporeal Experience-the Immersive Extension of Senses 40
• 3. The Reconstruction of AI Interactive Art Framework 47
• 3.1 Virtualization and Intelligence in Artistic Creation- Reconstruction of the Creator's Creation 48
• 3.2 Reconstruction of the Relationship among Creators, Artworks, and the Viewers based on Intersubjectivity Thinking 56
• 3.3 Artificial Intelligence-the Extension of Human Consciousness 64
• 3.4 The Interconnection of All Things-Symbiosis between Human and AI (Interconnected Ecosystem of All Things) 78
• 3.5 Analyses of Artworks 86
• 3.5.1 Mario Klingemann, Memories of Passersby I 86
• 3.5.2 Refik Anadol, Melting Memories 95
• 3.5.3 Refik Anadol, WDCH Dreams 105
• 3.5.4 Marina Abramovi, Rising 115
• 4. The Theory and Analysis of the Author's AI Interactive Artwork Chemistry 126
• 4.1 The Preliminary Study of Related Artworks 127
• 4.1.1 The Introduction of GAN and its Application in Art 127
• 4.1.2 The Artistic Inspiration for Chemistry 130
• 4.2 Design of AI Interactive Artwork Chemistry 135
• 4.2.1 The Motivation and Goal of Chemistry 135
• 4.2.2 Artwork description 136
• 4.3 The technicality of the Artwork 138
• 4.3.1 Face Aging 138
• 4.3.2 Style Transfer 140
• 4.4 The artistry of the Artwork 142
• 4.4.1 The Backdrop Design of the Four Seasons 142
• 4.4.2 The Animation of Flowers 146
• 4.5 The Analysis of the Reconstructed Interaction 148
• 4.5.1 The Reconstruction of Time and Space 148
• 4.5.2 Three levels of intersubjective 150
• 4.6 Experiments 153
• 4.6.1 The Program of Chemistry 153
• 4.6.2 Results and Exhibition 155
• 4.6.3 Feedbacks and Prospects of Future Research 156
• 5. Conclusion and Prospects of future research 158
• 5.1 Conclusion 158
• 5.2 Prospects of future research 161
• References 163
• Appendix 172
• 국문초록 178

참고문헌 (Reference)

1. Time logic [ M ], Sugihara husband, , 1986

2. Art in Artificial Science [ J ], Kenneth O. Stanley, 165 ( 01 ) : 9-15, , 2020

3. `` The Birth of Chinese Artistic Conception, Zong Baihua, , 1981

4. HAO J. Emotion Recognition by Speech Signals [ C ], KWON O W , CHAN K, , 2003

5. Research on media architecture and public space design in the information age, Fan Changlin, , 2019

6. ERCELEBI E. Classification of EEG Signals Using Neural Network and Logistic Regression [ J ], SUBASI A, 78 ( 2 ) : 87-99 ., , 2005