《블록파티》 전기양의 눈으로 보기

[Block Party] "Seeing Through the Eyes of Electric Sheep"

아마도예술공간에서는 5월 6일(토)부터 6월 24일(토)까지 총 8주의 기간 동안 《블록파티(Block Party)》 연계 워크숍 〈전기양의 눈으로 보기〉를 진행했다.인간의 상식은 기계의 시선에서 어떻게 이해될까? 참여자들은 텍스트 기반의 인공지능 프로그램 chatGPT와 그림 인공지능 프로그램 Stable Diffusion을 직접 사용해 보면서 인간과 인공지능의 시선 차를 재고해보는 시간을 가졌다. 이 과정을 통해 참여자들은 여러 이미지를 생성해 무빙 이미지를 제작해 보았고, 《블록파티(Block Party)》의 클로징 이벤트 〈블록파티파티(Block Party Party)〉에서 최종 결과물을 선보였다.


1. 1주차_Ice-breaking

[이미지01] 프롬프트 “Rice eating raccoon”을 입력했을 때 생성된 이미지

〈전기양의 눈으로 보기〉 첫 시간에는 워크숍에 대한 소개 및 진행 방식에 대한 안내와 더불어 각자 인공지능에 대해 어떤 인상을 가지고 있는지 이야기해 보았다. 이후 참여자들이 관심 있는 주제 혹은 대상을 토대로 프롬프트를 정해보고 Stable Diffusion을 통해 여러 이미지를 생성해 보았다.


2. 2주차_프롬프트(prompt)를 구체화하기

[이미지02] 프롬프트 작성법

첫 번째 워크숍을 통해 참여자들은 원하는 이미지를 생성하기 위해서는 조금 더 정교하고 정확하게 프롬프트를 입력해야 한다는 점을 확인할 수 있었다. 두 번째 워크숍을 통해서는 프로그램의 예측 불가능성을 극복하기 위해 어떤 방식을 채택해야 하는지 고민해 보는 시간을 가졌다. 이를 위해 어떤 프롬프트가 있으며, 프롬프트를 어떻게 구성해야 할지 알아보고 더 나아가 Stable Diffusion의 다양한 기능에 대해서 살펴보았다.


3. 3-4주차_이미지 생성을 통해 스토리보드 생성하기

[이미지03] chatGPT가 키워드를 통해 작성한 텍스트
[이미지04] Stable Diffusion에 chatGPT가 생성한 텍스트를 입력했을 때 생성한 이미지

Stable Diffusion을 통해 다양한 이미지를 생성한 후 참여자들은 최종 결과물을 제작하기에 앞서 시놉시스를 만드는 시간을 가졌다. chatGPT에 자신이 정한 키워드에 대한 텍스트를 요청하고, 생성된 텍스트를 시놉시스로 상정한 후 텍스트를 분절해 Stable Diffusion의 txt2img 툴(텍스트를 기반으로 이미지를 생성하는 기능)에 입력해 보았다. 이를 통해 무빙 이미지를 제작할 시 이정표 역할을 하는 대표 이미지를 생성하고, 무빙 이미지의 흐름을 가정해 볼 수 있는 스토리보드를 제작해 보았다.


4. 5-8주차_릴레이 챌린지
5주차부터는 본격적으로 인공지능 이미지를 생성해 무빙 이미지를 만들어 보았다. 무빙 이미지 제작에 있어 참여자들 간의 수평적인 참여를 전제하고자 명확한 서사 없이 생성 이미지의 색상이나 형태만으로 스토리보드를 구성했으며, 대표 이미지 간의 공백을 메워 줄 이미지들을 30장씩 생성했다.

[이미지05] 스토리보드 예시
[이미지06] 스토리보드에 업로드된 이미지 프롬프트를 기반으로 대표 이미지 간 격차를 매워줄 이미지들을 생성했다.

이미지들은 대표 이미지들 간의 결속력을 높이기 위해 img2img 툴(기존 이미지를 기반으로 새로운 생성 이미지를 만들어 내는 기능)을 사용했다. 예를 들어 A, B, C라는 이미지가 있을 때 이미지 A, 그리고 이미지 C의 프롬프트를 이미지 B와 함께 입력했다. 이를 통해 대표 이미지 간의 선후관계를 고려하면서 무빙 이미지의 유기적인 흐름을 만들어 낼 수 있었다.


5. 최종결과물

[이미지07] 최종결과물

최종적으로 참여자들은 약 만 개의 이미지를 생성해 9분가량의 무빙 이미지를 완성했다. 최종결과물은 《블록파티(Block Party)》의 클로징 이벤트 〈블록파티파티(Block Party Party)〉에서 상영되었다. 현장에서는 최종 결과물뿐만 아니라 대표 이미지 및 프롬프트 또한 확인할 수 있었다.
At Amado Art Space, a workshop titled "Seeing Through the Eyes of Electric Sheep" was conducted from May 6th (Sat) to June 24th (Sat), spanning a total of 8 weeks in conjunction with the "Block Party." Participants explored the question of how human common sense is perceived through the lens of machines. Using the text-based artificial intelligence program chatGPT and the image-generating artificial intelligence program Stable Diffusion, participants engaged in a session to reflect on the differences in perspective between humans and artificial intelligence. Throughout this process, participants created various images and produced moving images, showcasing the final results at the closing event of "Block Party" called "Block Party Party."

Week 1 - Ice-breaking
[Image 01] Image generated when prompted with "Rice eating raccoon"

In the first session of "Seeing Through the Eyes of Electric Sheep," participants were introduced to the workshop and its format. They shared their impressions of artificial intelligence and then used Stable Diffusion to generate multiple images based on prompts related to their chosen topics or subjects.

Week 2 - Refining Prompts
[Image 02] Writing prompts guidelines

Following the initial workshop, participants realized the need for more precise and detailed prompts to generate the desired images. In the second workshop, they contemplated strategies to overcome the predictability of the program. Participants explored different types of prompts, learned how to structure them, and delved into various functionalities of Stable Diffusion.

3-4. Weeks 3-4 - Storyboard Creation through Image Generation

[Image 03] Text written by chatGPT based on keywords
[Image 04] Image generated when chatGPT's text is input into Stable Diffusion

After generating various images through Stable Diffusion, participants dedicated time to creating synopses before producing the final results. They requested text from chatGPT based on their chosen keywords, used the generated text as a synopsis, and input the segmented text into Stable Diffusion's txt2img tool (which generates images based on text) to envision representative images serving as milestones for the moving images. Participants then created storyboards, predicting the flow of the moving images.

Weeks 5-8 - Relay Challenge
Starting from the fifth week, participants actively engaged in creating artificial intelligence images for making moving images. To encourage horizontal participation among participants in creating moving images, a storyboard was constructed solely based on the colors or shapes of the generated images, devoid of a clear narrative. Participants generated sets of 30 images each to fill the gaps between representative images.

[Image 05] Storyboard example
[Image 06] Images created based on uploaded prompts on the storyboard to fill the gaps between representative images

To enhance cohesion between representative images, img2img tool (which generates new images based on existing images) was employed. For example, if there were images A, B, and C, prompts for images A and C were input alongside image B. This approach allowed participants to consider the chronological relationship between representative images, creating an organic flow for the moving images.

Final Results
[Image 07] Final Results

Ultimately, participants generated approximately a thousand images, completing a 9-minute moving image. The final results were screened at the closing event, "Block Party Party," of the "Block Party." At the venue, participants had the opportunity to view not only the final results but also representative images and prompts.