동시대의 서울에 대한 키워드를 바탕으로 텍스트(소설)를 작성하고, 이를 3D애니메이션적인 시.공간 적 해석을 더해 AI를 활용하여 영상을 제작한다. 제작된 영상은 프로젝터를 통해 투사되며, 이는 좌표에 따라 로봇암을 통해 이동하며 보여진다.
작성된 텍스트를 데이터베이스로 명령어(text prompt)로 삼고, 인공지능(Deep Learning)으로 구성한 영상 소설이다. 이 작업은 인공지능에 의해 작성된 2032년 서울을 배경으로 문학적 접근을 근간으로, 현실과 꿈의 경계, 사회문제등에 대하여 다양한 신경망의 작용을 거치는 프로세스를 통해 재구성한다. 각 문장 속 텍스트를 영상과 음악의 파라미터로 적용하여, 인공지능 알고리즘 기반의 생성기로 제작한다. 이는 타자적 주체의 글과 그에 대한 이미지 해석으로 구성 되며, 3D 공간을 위해 언리얼 엔진의 효과를 총 4개의 영상에 구현하는데 집중한다. 이에 더해 공간적인 연출을 통해 비가시적인 공간에 대한 흐름을 로보틱스를 바탕으로 XR(Extended reality) 타입으로 구현하였다. 이 작업에서 인공지능을 통해 시청각 결과물을 생성하는 과정은 작가와 관객 뿐만아니라 인격적 주체가 아닌 타자에 의한 개입으로 작품이 성립할 수 있도록 기획되었다. 동시대 의 사회에 침투중인 인공지능의 기술을 작품의 제작의 전반에 반영하여 새로운 주체가 생성한 결과와 함께 새로운 시도로서 작품은 의의를 형성한다. 또한 첨단기술사회의 인간이 아닌 기계 혹은 시스템의 눈에서 바라본 사회와 환경, 인간에 대한 접근을 통해 새로운 관점과 경험을 도출할 수 있도록 하였다. 따라서 미래 혹은 현실의 기술 문명의 요소가 핵심적 요소로 작용하여 주체에서 인간이 배제 되었으나, 예술의 재환영을 통해 인간을 위해 새롭게 구성된 시스템 즉, 미래사회와 환경의 단면을 가상의 공간을 설정하여 시뮬레이션 한다.
다음은 인공지능(OPEN AI_GPT-3)이 작성한 소설 원문이다.
“서울이 다른 곳이었을 때가 기억납니다.” 한 노인이 손자에게 말합니다. “당시에는 더 작은 도시였고 발전하지 못했습니다. 하지만 훨씬 더 활기가 넘쳤습니다. 더 많은 사람들과 할 일이 많았습니다.” 그 노인은 지금 살고 있는 고층 아파트의 창밖을 내다본다. 그는 가난한 사람들이 사는 도시의 반대편을 볼 수 있다. 부자와 가난한 사람의 격차는 최근 몇 년 동안 더 커졌습니다. “저 사람들은 다 어떻게 된 겁니까?” 그는 묻는다. “그들은 어디로 갔습니까?” “그들 중 일부는 도시를 떠났던 것 같아요.” 그의 손자가 대답합니다. “다른 사람들은 죽었을지도 몰라.” 노인은 고개를 끄덕입니다. 그는 서울의 인구 감소에 대해 들었던 것을 기억합니다. 환경 문제가 시작된 이래로 몇 년 동안 일어나고 있습니다. 공기도 더럽고 물도 더럽다. 사람들은 더 이상 감기와 독감뿐만 아니라 더 자주 아프게 됩니다. 지금까지 아무도 본 적 없는 새로운 질병이 있습니다. “당신이 여기 나와 함께 있어서 기쁩니다.” 노인이 손자에게 말했습니다. “나는 당신 없이 무엇을 할 수 있는지 모르겠어요.” 노인은 이 모든 일이 일어나기 전 어린 시절을 기억합니다. 그는 도시 탐험, 버스나 지하철을 타고 도시의 다른 지역으로 가는 것을 좋아했습니다. 그는 시장이나 공원에 가거나 그냥 걸어다니며 서울의 풍경과 소리를 들을 것입니다. 그는 그 시절을 그리워합니다. “상황이 원래대로 돌아갈 것이라고 생각합니까?” 그는 손자에게 묻는다. 소년은 어깨를 으쓱합니다. “모르겠어.” 그가 말했다. “하지만 그렇게 되기를 바랍니다.” 노인은 미소를 지으며 손자의 손을 잡습니다. “나도” 라고 그는 말합니다. “저도요.”
The project creates a text (novel) based on keywords about contemporary Seoul, adds a 3D animated spatial and temporal interpretation, and creates a video using AI. The video is projected through a projector, which moves through a robotic arm according to the coordinates. It is a video novel composed by deep learning, using the written text as a text prompt in a database. The work is based on a literary approach, set in Seoul in 2032, written by an artificial intelligence, and reconstructs the boundary between reality and dreams, social issues, etc. through the process of various neural networks. The text in each sentence is applied as a parameter for video and music, and is produced by an artificial intelligence algorithm-based generator. It consists of the text of a third-party subject and the image interpretation of the text, and focuses on implementing the effects of Unreal Engine for 3D space in a total of four videos. In addition, through spatial production, the flow of invisible space was realized as an XR (Extended reality) type based on robotics. In this work, the process of generating audiovisual outputs through artificial intelligence is designed so that the work can be established through the intervention of not only the artist and the audience, but also a third party who is not a personal subject. By reflecting the technology of artificial intelligence that is penetrating into contemporary society throughout the production of the work, the work forms meaning as a new attempt along with the results generated by a new subject. In addition, new perspectives and experiences can be derived through the approach to society, the environment, and humans from the eyes of a machine or system rather than humans in a high-tech society. Therefore, the elements of the future or real technological civilization act as key elements, simulating a cross-section of the future society and environment by setting up a fictional space in which humans are excluded as subjects, but a newly constructed system for humans through the reintroduction of art.
The following is the original text of the novel written by artificial intelligence (OPEN AI_GPT-3).
“I remember when Seoul was a different place.” An old man says to his grandson. “It was a smaller city then, and it wasn’t as developed, but it was much more lively – there were more people and more things to do.” The old man looks out the window of the high-rise apartment he lives in now. He can see the other side of the city, where the poor live. The gap between rich and poor has grown wider in recent years. “What happened to all those people?” he asks. “Where did they go?” “I think some of them left the city,” his grandson replies. “Others may have died.” The old man nods. He remembers hearing about Seoul’s declining population. It’s been happening for years, ever since the environmental problems started. The air is dirty, the water is dirty. People are getting sick more often, and not just colds and flu anymore. There are new diseases that no one has ever seen before. “I’m glad you’re here with me.” An old man said to his grandson, “I don’t know what I would do without you.” The old man remembers his childhood before all this happened. He loved exploring the city, taking the bus or subway to different parts of the city. He would go to the market or park or just walk around and take in the sights and sounds of the city. He misses those days. “Do you think things will ever go back to the way they were?” he asks his grandson. The boy shrugs. “I don’t know,” he says. “But I hope so.” The old man smiles and takes his grandson’s hand. “Me too,” he says. “Me too.”