프롬프트에 대응하여 텍스트, 이미지, 기타 미디어를 생성할 수 있는 인공지능 시스템인 생성형 AI는 최근 중요한 화두로 떠오르고 있지만 대부분 AI를 도구로서 활용하는 실습 중심에만 머물러왔다. 여기에서 벗어나 AI가 디자인 사고와 창작 방식에 어떠한 영향을 미치는지 탐구하고 실험하는 프로젝트가 진행됐다. 홍익대학교 디자인컨버전스학부의 생성형 AI를 활용한 전자책 기획, 디자인 프로젝트다. 

홍익대학교 디자인컨버전스학부에서 지난해 2학기에 진행된 이 실험적인 프로젝트는 생성형 AI를연구 주제로 삼고, AI를 활용하는 방법을 연구하며, 생성형 AI에 대한 다양한 시각을 탐구하는 프로젝트였다.   

생성형 AI가 우리의 사고방식과 창작 과정에 미치는 영향을 분석하고 실험하는 방식으로 진행된 이 프로젝트는 AI라는 새로운 기술의 적용을 통해 디자인과 AI의 관계를 연구하는 흥미로운 시도였다. 학생들은 각자의 방식으로 AI에 대해 탐구했고, 세 권의 책을 만들어냈다. 

<캠퍼스 고민수집단>, <AllInsight>, <파워블로거들의 수다>라는 다양한 장르의 세 권의 책들은 AI와 인간의 대화 가능성과 한계를 실험적으로 탐색했고, AI 신뢰에 대한 위험성을 경고했으며, AI의 환각 현상을 기록했다. 생성형 AI에 대한 솔직한 생각과 실험들에 의해 탄생된 이 프로젝트를 통해 학생들은 인간의 창의력을 확장하는 도구인 AI에 대해 경험했다. 

이 프로젝트는 홍익대학교 디자인컨버전스학부 사카베 히토미 교수에 의해 기획됐다. 시각커뮤니케이션(Visual Communication Design)과 일러스트레이션을 주 연구 분야로 다루고 있는 사카베 교수는 디자인하우스, KBS, 웅진씽크빅, 문학동네, 한국도로공사 등의 여러 프로젝트 진행 및 자문을 수행했으며, 현재 일본그래픽디자인협회(JAGDA) 정회원, 한국디자인학회 이사, 한국일러스트레이션학회 이사로 활동하며 여러 학술 및 교류 활동을 지원하고 있다.

사카베 히토미 교수

사카베 히토미 교수로부터 이번 프로젝트에 대해 들었다. 

Q. 2024년 2학기 ‘생성형 AI’에 대한 프로젝트를 진행했다. 어떤 배경에서 기획하게 됐나. 

최근 디자인 분야에서도 생성형 AI가 중요한 화두로 떠오르고 있습니다. 하지만 대부분의 연구나 교육 사례는 AI를 디자인 실무에 어떻게 적용할지, 즉 도구로서 활용하는 실습 중심으로 다루는 경우가 많았습니다. 저는 이러한 흐름에서 한 걸음 더 나아가, AI를 단순한 수단이 아니라 디자인 사고와 창작 방식에 어떤 영향을 미치는지를 탐구하는 주제로 삼고자 했습니다.

그래서 2024년 2학기에 개설된 Graphic Design & Technology(2) 수업에서는 ‘생성형 AI’를 연구 주제로 삼고, AI에 대한 다양한 관점을 담은 전자책을 기획하는 프로젝트를 진행했습니다. 학생들은 AI를 활용하는 방법뿐만 아니라, AI가 만들어내는 결과물의 의미, 창작의 주체성과 윤리적 문제 등을 고민하며 책을 집필했습니다.

Q. 이 프로젝트의 특징은 무엇인가.

하나의 정형화된 결과물을 목표로 하지 않고, 학생들이 각자의 방식으로 AI를 탐구할 수 있도록 한 점입니다. 그래서 책의 장르도 다양하게 완성됐습니다. SF나 단편 소설을 쓴 팀도 있었고, 논픽션 형식으로 AI의 활용 사례를 분석하며 장단점을 조명한 팀도 있었습니다. 여러 프로젝트 중 최종적으로 <캠퍼스 고민수집단>, <AIInsight>, <파워블로거들의 수다>라는 세 권이 공식적으로 출간되었습니다.

Q. 세 권의 책에 대해 소개해준다면. 

이번 프로젝트에서 출판된 세 권의 책은 각각 다른 방식으로 생성형 AI를 탐구하며, 인간과 기술의 관계를 실험적으로 조명하는 작업이었습니다.

<캠퍼스 고민수집단>은 대학생들의 연애, 학업, 취업, 인간관계 등 누구나 한 번쯤 고민해봤을 주제를 상담 형식으로 풀어낸 책입니다. 이 과정에서 대화형 AI가 자연스럽게 개입하며, 독자들은 마치 튜링 테스트를 경험하는 듯한 느낌을 받게 됩니다. 단순한 고민 상담을 넘어, AI와 인간의 대화 가능성과 한계를 실험적으로 탐색한 점이 특징입니다.

<캠퍼스 고민수집단>

<캠퍼스 고민수집단>의 저자들

 <AIInsight>는 AI를 활용해 제작한 가상의 과학 잡지로, ‘AIInsight 협회’라는 가상의 단체가 다중우주를 발견하고 사람들이 이상적인 세계로 이주할 수 있다고 주장하는 내용을 담고 있습니다. 하지만 사실, 이 모든 내용은 AI의 환각(할루시네이션) 기술을 극대화해 만든 허구입니다. 어찌 보면 책을 가장한 디지털 리터러시 실험이자, AI 신뢰의 위험성을 경고하는 퍼포먼스라고도 볼 수 있습니다.

<AlInsight>

<AlInsight>의 저자들

특히 흥미로운 점은, 한 온라인 서점에서 이 책을 ‘인문 > 미술ᐧ디자인’ 카테고리로 신청했음에도 불구하고, 담당자가 이를 실제 과학잡지로 착각해 ‘과학 > 천문학ᐧ지구과학’ 카테고리에 등록한 일이 있었습니다. 이는 이 프로젝트의 의도가 현실 유통 시스템에서 성공적으로 작동했음을 보여주는 사례이기도 합니다.

<파워블로거들의 수다>는 네 명의 가상 파워블로거가 물건, 동물, 레시피, 문화예술을 주제로 블로그 글을 쓴다면 어떤 일이 벌어질지를 실험한 책입니다. AI의 환각 현상을 극대화하여, 비논리적이거나 엉뚱한 정보가 어떻게 확산될 수 있는지를 유머러스하게 보여줍니다. 2024년 하반기 기준 AI의 환각 현상을 기록하는 동시에, 무비판적인 AI 수용에 대한 경각심을 환기하는 프로젝트였습니다.

<파워블로거들의 수다>

<파워블로거들의 수다>의 저자들

이처럼 세 권의 책은 AI를 단순한 도구로 활용하는 것이 아니라, 그것이 지식 생산과 정보 유통 방식에 미치는 영향을 실험적으로 탐구하는 과정에서 탄생한 결과물입니다.

Q. 각각의 책에서 AI가 어떻게 활용이 됐나. 

<캠퍼스 고민수집단>에서는 AI가 상담소에서 상담사 역할을 수행하며, 인간 상담사들과 함께 답변을 제공하는 방식으로 활용되었습니다. 또한, AI가 직접 고민을 만들어 질문자로도 참여하게 했으며, 이를 통해 독자들이 자연스럽게 튜링 테스트에 참여할 수 있도록 유도했습니다. AI는 맞춤법 검토, 자료 정리, 기획 단계의 아이디어 도출 등에서도 유용하게 활용되었습니다.

<캠퍼스 고민수집단> 과정(1)_ 말투와 내용에 피드백을 주는 'AI 막내 인턴 상담사' 교육과정

<AIInsight>에서는 AI가 본문의 일부 작성과 가상의 과학적 내용을 창작하는 데 활용되었습니다. 오픈형 AI를 통해 허구적이지만 그럴듯한 과학 개념과 이론을 생성하고, 이를 바탕으로 스토리를 구성했습니다. 특히, ‘레거시안’과 같은 새로운 용어를 만드는 데도 AI가 기여했습니다. 시각적 요소 강화를 위해 생성형 AI를 사용하여 사실적인 그래픽을 제작했고, 프롬프트 조정 및 후처리를 통해 높은 수준의 비주얼을 얻었습니다.

<AIInsight> 과정(1)_ 초기 생성이미지에 프로프트를 조정해 정교화시킨 과정 (김선형 학생). +는 긍정프롬프트, -는 부정프롬프트

<파워블로거들의 수다>에서는 AI가 만들어낸 엉뚱한 아이디어를 토대로 블로그 글을 작성했습니다. 세상에 존재하지 않는 물건, 동물, 음식과 인물들을 AI가 마치 실제 존재하는 것처럼 설명했고, 이러한 AI 생성 텍스트를 바탕으로 학생들이 직접 그래픽 디자인을 수행했습니다. 텍스트와 이미지 생성 과정 모두에서 AI가 적극적으로 활용되었습니다.

<파워블로거들의 수다> 과정(1)_ 시발점이 된 할루시네이션자료 (볶음엉덩이 레시피)

Q. AI를 활용한 이번 프로젝트에서 학생들이 가장 어려움을 느꼈던 부분은 무엇인가.

<캠퍼스 고민수집단>팀에서는 AI 상담이 예상보다 기계적이거나 공감이 부족한 경우가 많아 학생들이 이를 수정하는 데 많은 시간이 걸렸다고 합니다. 또한, 근본적으로 AI는 개인의 경험을 바탕으로 한 섬세한 조언을 제공하지 못하기 때문에, 이 부분에서 느껴지는 건조함은 끝내 해결할 수 없었다고 합니다. AI는 부정확할 수 있는 세심한 답변보다는 한발짝 물러선, 모범적이고 포괄적인 답변만을 내놓았고, 프롬프트에 입력한 구체적 예시만 변형하여 반복하는 점이 에러 사항이었다고 합니다. 

<AIInsight>팀에서는 사실과 허구의 균형을 맞추는 것이 가장 큰 도전이었다고 합니다. AI가 생성한 내용이 지나치게 허구적이면 신뢰성이 떨어졌고, 반대로 너무 사실적이면 기획 의도에서 벗어났기 때문인데요.  이 정도를 조정하기 위해 매우 구체적이고 정밀한 프롬프트 입력이 요구되었습니다. 또한, 생성형 AI의 한계로 인해 텍스트 기반 이미지 제작에서 글자가 왜곡되는 문제가 발생하여 추가적인 후처리가 필요했습니다.

<파워블로거들의 수다>팀에서는 AI가 생성한 내용 중 어느 부분이 사실이고 거짓인지 판단하기 어려워 필자들이 재차 교차검증을 해야 했던 점을 꼽았습니다. 또한 작업 수행 중에도 꾸준히 버전이 업그레이드되면서 학생들이 원고를 위해 황당한 질문을 던지니 “그런 물건은 존재하지 않는다”는 답변을 내놓기도 하는 등, 초기와 다르게 할루시네이션에 대한 문제점을 스스로 인식하고 있는 듯한 부분도 포착되어, 허무맹랑한 답변을 수집하고자 했던 학생들 입장에서는 역설적으로 어려움을 겪기도 했다고 합니다.

Q. AI 활용이 가장 효과적이었던 부분은 무엇이었나.

<캠퍼스 고민수집단> 팀에서는 AI가 정보 정리와 구조화에 특히 효과적이었다고 평가했습니다. 회의가 길어질 때 녹음본을 AI에 입력하면 핵심 내용을 빠르게 요약할 수 있었고, 목차를 구성할 때도 참고할 수 있었다고 합니다. 또한, 브레인스토밍 과정에서 AI가 예상치 못한 단어들을 제시해 주며 새로운 아이디어를 떠올리는 데 도움이 되기도 했답니다. 상담사 역할을 맡긴 AI가 얼마나 자연스럽게 대화를 이어갈 수 있을지 처음에는 의문이었지만, 실제로 기대 이상으로 역할을 수행하는 모습을 보면서 AI가 상담뿐만 아니라 다양한 분야에서도 활용될 수 있는 가능성을 직접 체감하는 계기가 되었다고 합니다.

특히, 흥미로운 점은 AI가 상담사 역할을 할 때는 '올바른' 답변을 내놓으려는 경향이 강했으나, 질문자로서 사연을 작성할 때는 예시 사연이나 칼럼 등 다양한 레퍼런스를 참고하며 오히려 더 인간적인 글을 만들어냈다는 점입니다. 이를 통해 데이터 입력과 프롬프트 설계 방식에 따라 AI의 결과물이 크게 달라진다는 점을 실감할 수 있었다고 합니다.

<캠퍼스 고민수집단> 과정(2)_ 말투와 내용에 피드백을 주는 'AI 막내 인턴 상담사' 교육과정

<AIInsight> 팀 학생들은 AI가 예상보다 구체적이고 참신한 결과물을 만들어낼 때 흥미를 느꼈다고 합니다. 특히, 키워드 기반으로 AI가 생성한 단어나 문장이 신선한 영감을 줄 때가 많아, 이를 토대로 창의적인 방향으로 발전시킬 수 있었던 점이 유익했다고 합니다. 또한, AI가 만들어낸 그래픽이 지속적인 프롬프트 수정을 거치면서 최종적으로 의도에 완벽하게 부합하는 수준까지 도달했을 때, 가장 큰 성취감을 느꼈다고 합니다.

특정 서류나 공식 문서를 제작하는 과정에서도 AI는 매우 효과적이었는데요, 예를 들어, 가상의 이주자 신고 서류를 만들기 위해 실제 이민 및 행정 절차를 AI에 입력했더니 현실적인 서식이 생성되었고, 이는 프로젝트의 몰입도를 높이는 데 큰 도움이 되었다고 합니다.

<AIInsight> 과정(2)_ 초기 생성이미지에 프로프트를 조정해 도면스케치로 변화시킨 과정 (심예원 학생)

<파워블로거들의 수다> 팀 학생들 또한 AI의 환각 현상이 기존의 사고방식을 확장하는 데 기여했다는 점에서 흥미를 느꼈습니다. 예를 들어, 우리는 일반적으로 헤어드라이기에서 아이스크림을 떠올릴 수 없지만, AI가 만들어낸 엉뚱한 조합이 새로운 제품 아이디어로 발전하기도 했다는 것이죠. 특히 독창적인 이미지 레퍼런스를 만들 때 AI의 효과를 더욱 실감할 수 있었는데요, AI는 예상치 못한 조합과 독특한 비주얼을 빠르게 구현하면서, 창작 과정에서의 시행착오를 줄여주는 동시에 새로운 영감을 얻는 과정 자체를 즐길 수 있도록 해주었다고 합니다.

<파워블로거들의 수다> 과정(2)_ 프롬프트를 토대로 AI가 생성한 상품 이미지

Q. AI의 활용 가능성에 대한 학생들의 반응은 어땠나.

이번 프로젝트를 통해 학생들은 AI의 가능성과 한계를 동시에 체감할 수 있었습니다. 처음에는 AI가 인간의 역할을 대체할 것이라는 우려와 의심이 있었지만, 실제로 활용해보니 AI는 단독으로 완벽한 결과물을 만들어내는 것이 아니라, 인간과 협력할 때 더욱 효과적이라는 점을 깨닫게 되었다고 합니다.

<캠퍼스 고민수집단>의 경우, AI가 상담사의 역할을 수행하는 과정에서 예상보다 자연스럽게 대화를 이어가는 모습을 보며 AI가 단순한 자동 응답기가 아니라, 맥락을 이해하고 반응하는 기술이라는 점을 실감했다고 합니다. AI의 답변이 어느 정도 도움이 되기도 했지만, 질문자의 입장에서 사연을 작성할 때는 보다 인간적인 감성과 스토리텔링이 담긴 글을 생성하는 모습을 보면서, AI의 활용 방식에 따라 결과물이 달라질 수 있음을 흥미롭게 받아들였다고 합니다. 또한, AI를 어떻게 다루는지에 따라 프로젝트의 성패를 좌우할 수 있는 요소로 바라보게 되었다는 점도 중요한 변화였습니다.

<캠퍼스 고민수집단>

<AIInsight>팀은 AI가 제공하는 정보와 그래픽을 기반으로 인간이 조정과 보완을 거치면서 더욱 완성도 높은 결과물을 만들어낼 때, 가장 큰 성취감을 느꼈다고 밝혔습니다. 키워드 기반으로 생성된 문장이나 그래픽이 새로운 영감을 주는 경우가 많았으며, 이를 바탕으로 창의적인 방향으로 발전시키는 과정 자체가 흥미로웠다고 하는데요. AI를 단순한 자동화 도구가 아니라, 인간과 상호작용하며 보완하는 존재로 인식하게 되었다는 점도 이번 프로젝트에서 얻은 중요한 깨달음이었습니다.

<AIInsight>

<파워블로거들의 수다>팀은 AI가 예상치 못한 조합을 생성하며 기존의 사고방식을 확장하는 데 도움을 줄 수 있다는 점에 흥미를 느꼈습니다. 특히, AI의 환각 현상이 기존 개념을 뒤틀어보는 방식으로 창작 과정에서 활용될 수 있음을 경험하며, AI를 단순한 오류 발생 기계가 아니라, 창작 도구로 접근할 수도 있다는 점을 깨달았다고 합니다. 다만, AI가 생성한 정보의 신뢰성을 검토하고 검증하는 과정이 반드시 필요하다는 점도 함께 확인할 수 있었습니다. 

<파워블로거들의 수다>

Q. 이번 프로젝트의 성과 및 의미에 대해 평가한다면. 

이 프로젝트를 통해 학생들은 AI가 창작 과정에서 강력한 보조 도구가 될 수 있으며, 활용 방식에 따라 최종 결과물의 완성도가 크게 달라진다는 점을 깨닫게 되었습니다. AI를 단순한 대체제가 아니라, 인간의 창의력을 확장하는 도구로 접근하는 것이 중요하다는 점을 직접 경험한 것이 가장 큰 성과라고 할 수 있어요.

또한, 학부생들이 단순한 과제물을 넘어 본인들의 디자인 실험을 실제 출간 수준까지 끌어올렸다는 점도 의미가 큽니다. 이를 통해 학생들은 자신의 아이디어가 단순히 학내에 머무르는 것이 아니라, 더 넓은 독자층과 소통할 수 있는 가능성을 확인하며 성취감을 느낄 수 있었습니다.

무엇보다도, 이 시리즈는 대학생 특유의 생생한 아이디어를 그대로 담아냈다는 점에서 가치가 있습니다. 학계나 산업계의 시각에서 정리된 이론이 아니라, 생성형 AI라는 새로운 기술을 바라보는 대학생들의 솔직하고 구체적인 실험을 책의 형태로 기록했다는 점에서 더욱 의미가 크다고 생각합니다.

Q. 또 다른 AI 관련 프로젝트를 기획하고 있나. 

올해도 Graphic Design & Technology(2) 수업에서 ‘생성형 AI’를 주제로 프로젝트를 진행할 계획입니다. 현재 생성형 AI는 빠르게 발전하고 있지만, 여전히 과도기적 단계에 있습니다. 기술이 발전함에 따라 창작 도구로서의 역할과 가능성도 계속해서 변화하고 있으며, 학생들과 함께 이를 기록하고 책으로 아카이빙하는 작업이 의미가 있다고 생각합니다.

Q. 앞으로 AI를 어떻게 교육에 활용할 게획인가. 

앞으로도 AI가 디자인 교육에서 어떻게 활용될 수 있을지 탐구하면서, 기술적 활용뿐만 아니라 AI 윤리 문제, 창작의 주체성과 같은 철학적 고민도 함께 다뤄볼 예정입니다.

더 나아가, 해외 대학과의 협업이나 국제 워크숍을 통해 AI 관련 프로젝트를 확장하는 방안도 모색하고 있습니다. 올해 6월 말에는 일본 치바대학과 협력하여 AI를 접목한 국제 디자인 워크숍을 계획하고 있습니다. AI 시대에 디자이너의 역할이 어떻게 변화할지 탐구하고, 교육과 실험을 통해 그 가능성을 열어가는 것이 목표입니다.

인터뷰어_ 정석원 편집주간
에디터_ 최유진 편집장