[인터뷰] 프롬프트 엔지니어링 접목 AI 예술, 인간을 사로잡을 수 있을까

기사입력 : 2023년06월27일 09:03

최종수정 : 2023년06월27일 09:45

프롬프트 엔지니어링의 예술화, 뉴미디어 아티스트 조영각
AI는 나만의 어시스턴트…효율적 시간 운용 도와줘
인간은 기획만, 모든 구현 AI가 담당하는 시대 올 것
편 가르기 말고 AI 제3의 객체로 바라볼 필요

인공지능 AI는 막대한 빅데이타를 토대로 학습한다. 모든 것을 기억하고 이를 기반으로 예측한다. 음악과 미술, 예술계도 커다란 변혁이 일고 있다. AI 지휘자와 프롬프트 엔지니어링으로 미술을 하는 뉴아티스트도 생겼다. AI와 예술계의 파급 효과를 알아본다.

[서울=뉴스핌] 김윤희 인턴기자 = "예술에서 상상과 기획만 인간이 담당하고, 모든 구현은 각종 기계나 인공지능이 맡는 시대도 곧 다가오리라 생각합니다."

[서울=뉴스핌] 김윤희 인턴기자 = 6월 14일 서울 동대문구에 위치한 그의 작업실에서 만난 조영각 아티스트. 2023.06.15 yunhui@newspim.com

뉴스핌과의 인터뷰에서 조영각 뉴미디어 아티스트(37)는 AI와 공존할 예술의 미래에 대해 이야기했다.

10년 차 뉴미디어 아티스트인 조 작가가 예술에 AI를 접목한 건 어느덧 7~8년째다. 이세돌 바둑 9단과 알파고가 승부를 겨룰 때부터 AI 알고리즘에 관심을 가진 조 작가는 이후 데이터베이스를 활용한 오픈소스 커뮤니티를 주목하며 작품을 제작해왔다.

프롬프트 엔지니어링, 로보틱스, 데이터 사이언스 등각종 신기술을 활용한 뉴미디어 아트를 만들면서도 작은 부품 하나까지 손수 제작한다는 조영각 아티스트. 이를 증명하듯 그의 작업실 한쪽 벽엔 손때 묻은 온갖 공구들이 자리를 지키고 있었다. 투박한 공구들 맞은편 켜켜이 쌓인 전자제품들과 서적으로 가득 찬 책장 앞 나란히 놓인 3대의 모니터도 눈길을 끌었다.

[서울=뉴스핌] 김윤희 인턴기자 = 조영각 아티스트의 작업실 내부 모습. 2023.06.15 yunhui@newspim.com

예술의 과거와 미래가 뒤섞인 듯한 작업실 풍경은 실제 조 작가의 작품세계가 그대로 반영된 것이다. 회화 전공으로 예대를 졸업하고 미디어 아트 및 융합 예술 디자인으로 대학원 석사 를 마친 그에게 맨손으로 나무를 깎고 다듬는 일과 프로그래밍 언어를 다루는 일은 크게 보아 다르지 않다. 사용하는 도구만 다를 뿐 결국 예술이란 하나의 목표로 귀결되는 과정이기 때문이다.

◆ 오픈 AI가 쏘아올린 거대한 공…빠르게 변화하는 예술

이런 조 작가에게 최근 AI가 일으킨 미술계의 변혁은 '예견된 수순'이었다. 다만 8년 전부터 AI를 작업에 활용해 온 그조차도 예상치 못한 것이 있다면, 바로 변화의 속도다. 조 작가는 처음 AI 예술을 시도할 때만 해도 이 정도로 빠르게 시장이 확대될 것이라곤 생각지 못했다며 놀라움을 표했다.

지금과 같은 흐름이 만들어진 건 작년 오픈AI사가 달리2를 내놓은 뒤, 미드저니, 스테이블 디퓨전 등의 이미지 계열 생성 AI가 연달아 공개되면서부터다. 챗GPT를 필두로 거대언어모델(LLM)이 주목받으면서 텍스트를 이미지로 변환하는 프롬프트 엔지니어링 역시 덩달아 떠올랐고, 데이터 알고리즘이나 자연어 처리(NLP) 등에 관한 공학 지식 없어도 프롬프트 작업이 가능한지에 관심이 쏠렸다.

아트 플랫폼 Coloso에서 프롬프트를 활용한 작품 제작법을 강의 중인 조 작가는 이제 비전공자도 쉽게 도전할 수 있을 만큼 AI 예술의 진입 장벽이 낮아졌다고 설명했다.

"영어가 주를 이루긴 하지만, 시스템에 언어를 입력하는 작업만 가능하다면 누구나 AI를 통해 작품을 제작할 수 있습니다. 기존엔 인공지능 모델(대표적으로는 GAN 계열)을 직접 만들거나 학습시키는 형태가 대세였다면, 최근에는 LLM 덕에 최종사용자(엔드유저)가 간단한 조작만으로도 AI를 다룰 수 있게 됐죠. 물론 공학적 지식과 프로그래밍, 코딩 기술 등이 수반된다면 더 다양하게 활용도를 높일 수 있긴 합니다."

◆ 기술적 부분 도맡을 AI, 인간 기획의 중요성은 여전

조 작가는 '예술(藝術)'의 개념을 '기예'와 '학술'로 나누어 바라본다. 지금까지의 예술이 숙련된 기술자의 손을 통해 인간이 상상한 바를 구현함으로써 발전해왔다면, 앞으로의 예술은 기술적 측면에서 점차 AI의 손을 더 많이 빌리는 방식으로 흘러갈 갈 것이라는 게 그의 생각이다.

하지만 동시에 그는 예술에서 AI가 담당하는 부분이 인간의 기획 행위를 넘어설 수는 없다고 지적했다. 조 작가는 "프롬프트 엔지니어링 역시 인간이 엔터 버튼을 눌러야만 입력되는 것"이라며, 아무리 AI를 통한 자동화 기술이 발전해도 결국 예술엔 인간의 상상이 뒷받침되어야 한다고 말했다.

이어 조 작가는 "AI를 통해 원하는 화풍의 이미지를 구현하려면 관련 작가나 해당 스타일에 대해 잘 알아야" 하고, 그래서 "미술사나 재료 등을 많이 공부한 사람일수록 더 쉽고 폭넓게 프롬프트 작업을 진행할 수 있다"고 덧붙였다.

[서울=뉴스핌] 김윤희 인턴기자 = 프롬프트 엔지니어링 작업을 진행하는 조영각 아티스트. 2023.06.15 yunhui@newspim.com

실제로 지금도 그는 작품 제작 시 대략 50% 이상의 기획을 끝내두고 프롬프트 작업에 돌입한다. 주제는 물론 대강의 구도, 색감 등을 모두 생각한 뒤 텍스트 입력으로 넘어가는 것이다. 프롬프트의 큰 골자를 건들지 않는 선에서 변형도 많이 시도한다. 같은 기획안을 인공지능 모델만 달리하여 변환해 본다거나, 그렇게 구현한 이미지들을 서로 접합해보고, 교차해 다시 다른 모델로 넣어보는 식이다.

◆ 작품 세계 확장하며 시간 단축해줘…일거양득 AI

보통의 뉴미디어 아트가 팀 단위의 작업이 많이 이뤄지는 데 비해 혼자 활동하는 시간이 많은 조 작가는 "여기엔 인공지능의 도움이 컸다"고 말한다. AI를 '나만의 어시스턴트', 즉 일종의 보조로 활용한 덕에 보다 효율적으로 시간을 운용하며, 다양한 시도를 할 수 있었다는 것.

지금도 스타트업에서 근무 중인 그는 "일을 계속 해야 하니까 작업할 시간이 잘 없다"며 "아침 출근길 휴대폰으로 컴퓨터에 원격 접속해 프로그래밍을 하고, 퇴근할 때 프롬프트 결과물을 확인한다"라고 설명했다.

프롬프트 엔지니어링으로 구현한 작품인 'Collection of proverbs(속담 모음집)'에 대해 조 작가는 "가장 인간적 언어활동 중 하나인 속담을 인공지능이 얼마나 이해하고, 어떻게 구현하는가"에 대한 호기심에서 해당 작품이 출발했다고 전했다.

'Collection of proverbs 속담 모음집' (2022). 속담을 프롬프트 엔지니어링(Text to image)으로 변환한 뒤 디스코 디퓨전(disco diffusion), 미드저니(midjourney) 등 딥러닝 모델로 이미지·영상화했다. / Deep Learning frameworks(disco diffusion v5.4, midjourney), Text DB, interpolation software, sound generator Multi channel video, 19'40", Resolution: 4K [사진 = 조영각 아티스트]

◆ 향후 AI 예술이 나아갈 방향은

조 작가는 앞으로는 단순히 예쁘고 멋진 결과물을 내는 것보다 '더 새로운 소재로 매력적인 콘텐츠를 만드는 것'이 보다 중요해질 거라 말했다. AI 기술을 활용하되, 사람들이 잘 하지 않는 이야기로 흥미를 끌어낼 수 있는지가 관건이 될 것이란 분석이다.

Office Walker 오피스 워커 (2021) / Servo motor, mcu controller, tablet pc, PLA, emoji DB, stylegan & biggan Libraries, Video conference app, desk, chair / Dimension variable, robot 2ea : 45 x 42 x 42 cm / Video_18'40", FHD [사진 = 조영각 아티스트]

"지금 로봇 개 이런 것들이 많이 나오긴 했는데, 제 작업물 중에도 걸어다니는 의자가 있다. 이걸 AI 강화학습으로 더 발전시켜서 최적화된 걸음걸이를 만들어보고 싶습니다. 곤충이나 동물 등의 걸음걸이를 모사하는 식으로 갈 수도 있고, 아니면 아예 사물의 의인화를 시도할 수도 있고요. '의자처럼 걷는다'는 말은 없잖아요. 그런 걸 한 번 만들어보고 싶습니다."

마지막으로 그는 인공지능을 바라보는 시각이 양분화되어 있다는 점을 우려하며 관점을 달리할 것을 제안했다.

"한국사회는 가뜩이나 편 가르기가 심한데, AI에 대한 관점에서도 이런 특성이 드러나는 것 같아요. 인공지능이 인간의 편인지 아닌지 따지는 데만 너무 매몰되어 있다는 생각이 듭니다. AI를 너무 인간같이도, 기계같이도 생각하지 말고 아예 다른 분류 체계로 분리해 제3의 객체로 바라볼 수 있다면 더 현명하게 AI를 다룰 수 있지 않을까 싶습니다."

yunhui@newspim.com

사진

[써보니] 트라이폴드 태블릿과 다르다 [서울=뉴스핌] 김정인 기자 = 삼성전자가 2일 공개한 3단 폴더블폰 '갤럭시 Z 트라이폴드'를 현장에서 직접 사용해보니 예상보다 가볍고 얇은 형태가 먼저 느껴졌다. 크기와 구조상 무게가 상당할 것이란 우려가 있었지만, 실제로 들어보면 생각보다 부담이 덜한 편이다. 다만 한 손으로 오래 들고 쓰기에는 다소 무리가 있고, 전용 케이스나 거치대를 함께 사용할 때 가장 안정적인 사용감이 나온다. 펼친 화면은 태블릿을 떠올리게 할 만큼 넓고 시원하지만, 두 번 접어 휴대할 수 있다는 점은 기존 태블릿과 확실히 다른 경험을 만든다. 동시에 두께·베젤 등 초기 모델의 구조적 한계도 분명히 느껴졌다. ◆ 10형 대화면의 시원함…멀티태스킹 활용도↑ 가장 인상적인 요소는 화면을 펼쳤을 때의 시야다. 10형 대화면은 영상 시청 시 몰입감이 크고 웹 검색·문서 작업에서도 확 트인 느낌을 준다. [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'를 다 펼친 모습. 2025.12.02 kji01@newspim.com [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'로 3앱 멀티태스킹을 진행하는 모습. 2025.12.02 kji01@newspim.com 특히 최대 3개의 앱을 동시에 띄워놓는 멀티태스킹 기능은 생산성 관점에서 기존 폴더블보다 한 단계 더 진화했다는 느낌이 강했다. 세 개의 스마트폰 화면을 한 번에 펼쳐 놓은 듯한 넓이가 확보돼, 동시에 여러 작업을 처리하기에 충분한 공간감이 느껴졌다. 이메일·인터넷·메모장 등 업무 앱을 한 화면에서 자연스럽게 배치할 수 있고, 영상 콘텐츠를 켜둔 채 작업을 이어가는 것도 충분히 가능하다. [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'로 영상 시청을 하는 모습. 2025.12.02 kji01@newspim.com ◆ 구조에서 오는 한계도 분명…베젤·힌지·두께는 '새로운 폼팩터의 숙제' 새로운 구조 특성상 아쉬운 부분도 있다. 우선 베젤이 비교적 두꺼운 편이다. 화면을 여러 번 접는 구조라 물리적 여유 공간 확보가 필수적이다 보니 테두리가 두드러져 보인다. 상단 롤러(힌지 유닛 일부로 보이는 구조물)도 시각적으로는 다소 낯설게 느껴진다. 화면 연결부 자체는 자연스럽지만, 힌지 구조물 자체는 어색하게 보일 수 있다. [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'를 닫은 모습. 2025.12.02 kji01@newspim.com 또 하나는 완전히 접었을 때의 두께감이다. 구조상 여러 패널이 겹치는 형태라 다 접어놓으면 두껍게 느껴지는 것은 불가피하다. 다만 이는 구조에 따른 필연적인 결과로, 사용성에 치명적일 정도의 부담은 아니었다. [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'는 왼쪽 화면부터 닫아야 한다. 반대로 닫으려 할 시 경고 알람이 울린다. 2025.12.02 kji01@newspim.com 또 하나 눈에 띄는 점은 접는 순서가 고정돼 있다는 점이다. 오른쪽→왼쪽 순으로 접도록 설계돼, 반대로 접으려 하면 경고 알람이 울린다. 폼팩터 특성상 불가피한 방식이지만, 초기에 적응 과정이 필요하다. ◆ 태블릿과 겹치는 모습…그러나 휴대성이라는 확실한 차별점 사용 경험을 종합하면 '트라이폴드'는 태블릿과 유사한 역할을 상당 부분 수행한다. 대화면 기반의 콘텐츠 소비·문서 작업·멀티 환경 등 핵심 사용성은 태블릿과 맞닿아 있다. [서울=뉴스핌] 김정인 기자 = 삼성전자 '갤럭시 Z 트라이폴드'가 거치대에 놓인 모습. 2025.12.02 kji01@newspim.com 그러나 폴더블 구조로 접어서 주머니·가방에 넣을 수 있다는 점은 태블릿이 따라올 수 없는 차별점이다. 이동이 잦은 사용자에게는 '태블릿과 스마트폰의 중간 지점'에 있는 새로운 선택지가 될 수 있다. 강민석 모바일경험(MX)사업부 스마트폰PP팀장(부사장)은 "태블릿은 주머니에 넣고 다닐 수 없다. 태블릿은 대화면 그 자체의 장점이 있지만, 트라이폴드는 두께·무게 측면에서 소비자가 어디든 가져갈 수 있다는 점에서 혁신을 만들었다"며 "트라이폴드는 기존 태블릿과는 차원이 다른 새로운 카테고리라고 믿는다"고 말했다. ◆ 가격은 부담되지만…경쟁사 대비 '상대적 우위' 가격은 여전히 소비자에게 큰 장벽이다. 출고가 359만400원은 스마트폰 범주에서 결코 가볍지 않은 금액이다. 다만 경쟁사 제품들과의 상대 비교에서는 다른 해석도 가능하다. 중국 화웨이는 올해 출시한 트라이폴드폰을 1만7999위안(약 350만 원)부터 책정했다. 고용량 모델로 갈 경우 2만1999위안(약 429만 원)까지 올라간다. [서울=뉴스핌] 김정인 기자 = 임성택 삼성전자 한국총괄 부사장이 '갤럭시 Z 트라이폴드'를 소개하고 있다. 2025.12.02 kji01@newspim.com 이 기준에서 보면 삼성의 359만 원대 가격은 화웨이 평균 가격보다 낮은 편으로 비교된다. 특히 고용량 기준 화웨이 최고가와의 비교에서는 약 70만 원 가까운 차이가 나, '삼성이 가격 경쟁력까지 고려했다'는 해석이 가능하다. 또 시장에서는 출시 전부터 트라이폴드 구조상 부품 단가가 높아 400만 원 안팎이 될 것이라는 전망이 우세했다. 실제 출고가는 이 예상보다 낮게 형성되면서, 삼성이 새로운 카테고리 안착을 위해 가격선을 일정 수준까지 조정했다는 평가도 나온다. kji01@newspim.com 2025-12-02 11:48