게임 그래픽 아티스트의 도구, 스테이블 디퓨전으로 배우는 게임 그래픽 생성 가이드

생성형 인공지능(GAI) 시대에서는 생성형 AI를 통한 게임 그래픽 제작이 이전보다 훨씬 쉬워졌습니다. 국내 게임 업계에서도 생성형 AI 경험이 우대되며, 이 책은 이러한 추세에 발맞춰 스테이블 디퓨전을 사용하여 게임 캐릭터부터 배경, 아이콘까지 다양한 그래픽을 생성하는 방법을 제시합니다. 더불어 ChatGPT와 스테이블 디퓨전을 활용하여 게임용 텍스트 데이터를 생성하여 세계관과 시나리오를 손쉽게 완성하는 방법도 다루고 있습니다. 이 책은 저자가 'Little Land War SRPG'라는 판타지 게임을 직접 개발하면서 얻은 지식을 기반으로 작성되었습니다. 게임 내 모든 캐릭터, 배경, 지도, 무기, 도구 등은 스테이블 디퓨전을 활용하여 제작되었습니다. 이를 통해 게임 그래픽 제작에 대한 이론과 실무를 함께 다루며, 저자가 경험한 실패와 시행착오를 통해 독자들이 자신만의 결과물을 만들 때 발생할 수 있는 문제를 최소화하는 데 도움을 줄 수 있습니다.

*이 책에서는 직접 stable diffusion을 사용하는 것이 아닌 AUTOMATIC1111판 Stable Diffusion web UI를 통해 실습합니다. 책을 따라 하기 위해서는 Windows PC에서 web UI가 동작해야 하며, VRAM이 4GB 이상인 그래픽 카드가 없으면 실습이 어려울 수 있습니다.

추천사

이 책은 스테이블 디퓨전의 세계로 여러분을 안내하는 완벽한 출발점입니다. 기술적인 복잡성을 풀어내고, 스테이블 디퓨전의 기본 설정과 구조에 대해 자세히 설명하여 독자들이 스테이블 디퓨전이라는 도구를 보다 쉽게 사용할 수 있도록 도와줍니다. 특히 프롬프트 기능의 세부적인 사용법을 명확하고 간결하게 제시하며, 작가가 겪은 실패를 공유하여 사용자들이 자신만의 캐릭터와 지형을 만들 때 발생할 수 있는 시행착오를 최소화하는 데 큰 도움이 됩니다.
- 이주영 (EVR 스튜디오 테크니컬 아티스트)

『스테이블 디퓨전으로 만드는 게임 그래픽』은 스테이블 디퓨전 기술을 이용한 게임 그래픽 제작의 실질적인 가이드라인을 제공합니다. 스테이블 디퓨전의 원리와 적용 방법, 그리고 스테이블 디퓨전을 활용한 다양한 게임 장르의 그래픽 예시를 소개합니다. 이 책을 통해 이론과 실무를 효과적으로 결합한 접근법으로 스테이블 디퓨전을 활용하여 더 현실적이고 섬세한 게임 그래픽을 제작할 수 있습니다.
- 윤명식 (메가존클라우드)

이 책을 통해 스테이블 디퓨전을 직접 설치하고 적용해보며, 마치 ‘공각기동대’나 ‘블레이드 러너’의 컨셉 아티스트나 게임 그래픽 디자이너가 된 듯한 경험을 일주일 동안 즐겼습니다. 책은 주로 게임 그래픽에 초점을 맞추고 있지만, 스테이블 디퓨전 활용을 다루며 게임 개발이 아닌 분야에서도 생성형 AI를 실무에 적용하려는 분들에게 강력히 추천하고 싶습니다.
- 김영익 (AWSKRUG)

Part 01 환경 구축과 기초 지식
CHAPTER 1 로컬 환경 구축
1.1 이미지 생성 AI의 폭발적인 보급
1.2 사용하는 소프트웨어
1.3 소프트웨어 설치
1.4 webui-user.bat 실행
1.5 webui-user-my.bat 작성
1.6 webui-user-my.bat 실행
1.7 학습 모델 배치 방법
1.8 학습 모델 추가 확보①
1.9 학습 모델 추가 확보②
1.10 VAE 추가
1.11 업데이트 방법

CHAPTER 2 온라인 환경 구축
2.1 Web UI의 온라인 사용
2.2 Google Colab에서의 이용
2.3 런타임 유형 변경
2.4 Web UI 실행
2.5 파일 트리 확인

CHAPTER 3 기초 지식
3.1 Stable Diffusion에 대하여
3.2 Web UI 설정 및 이미지 생성
3.3 txt2img
3.4 img2img
3.5 Settings
3.6 단계 수에 따른 출력 이미지의 차이점 예시
3.7 프롬프트와 설정의 시행착오

CHAPTER 4 프롬프트 이론
4.1 학습 모델 선정
4.2 프롬프트의 규칙
4.3 프롬프트의 분류
4.4 프롬프트: 그리는 대상
4.5 프롬프트: 화질 향상
4.6 프롬프트: 화풍과 화가
4.7 프롬프트: 시점과 빛
4.8 프롬프트: 세부 조작
4.9 Negative Prompt: 저화질 제외
4.10 Negative Prompt: 서투른 것 제외
4.11 Negative Prompt: 불필요한 것 제외
4.12 이미지에서 프롬프트 얻기
4.13 프롬프트 예시
4.14 실제 게임에서의 화풍 만들기

PART 02 캐릭터 생성
CHAPTER 5 캐릭터 생성
5.1 캐릭터 이미지 생성
5.2 캐릭터 얼굴 이미지를 여러 종류 만들기
5.3 캐릭터에 포즈를 취하게 하기
5.4 캐릭터에 정보 추가
5.5 이미지를 보충하기
5.6 실제 게임 속 캐릭터 만들기
5.3 배타적 제어
5.4 돌고 도는 배타적 제어
5.5 멀티 프로세스 및 멀티 스레드
Column 커널 스레드와 사용자 스레드

CHAPTER 6 캐릭터에 포즈 취하게 하기
6.1 ControlNet
6.2 ControlNet 도입
6.3 모델 입수 및 배치
6.4 ControlNet 사용법
6.5 모델별 간략한 설명
6.6 생성 예제의 공통 설정
6.7 canny 생성 예
6.8 depth 생성 예
6.9 openpose 생성 예
6.10 scribble 생성 예
6.11 손그림으로 이미지 생성하기

CHAPTER 7 캐릭터 학습시키기
7.1 캐릭터 학습
7.2 Web UI에서 LoRA 사용
7.3 학습 준비
7.4 Google Colab에서 학습
7.5 학습 결과 확인
7.6 Control Net과의 조합

PART 03 배경 생성
CHAPTER 8 배경 생성 ①판타지
8.1 배경 이미지 생성
8.2 그림의 내용
8.3 실습
8.4 실제 게임 개발에서 배경 이미지 제작

CHAPTER 9 배경 생성 ②현대
9.1 실습

CHAPTER 10 배경 생성 ③SF
10.1 실습

CHAPTER 11 배경 생성 ④사이버펑크
11.1 실습

PART 04 게임 소재 생성
CHAPTER 12 무기와 도구 생성
12.1 무기와 도구 생성
12.2 밑그림 그리기
12.3 실습: 검 만들기
12.4 실습: 보물상자 만들기
12.5 실습: 물약 만들기
12.6 게임 내 효과 이미지 만들기

CHAPTER 13 아이콘 작성
13.1 아이콘 생성
13.2 밑그림 만들기
13.3 밑그림을 경로로 만들어 소재로 활용하기
13.4 소재를 이용해 아이콘 제작하기

CHAPTER 14 그림지도 생성
14.1 그림지도 생성
14.2 그림지도의 부품 생성하기
14.3 그림지도 배치하기
14.4 그림지도 생성하기
14.5 다시 img2img 적용하기
14.6 Inpaint로 수정하기
14.7 실제 게임 개발에서 지도 작성

CHAPTER 15 UI 부품의 텍스처 생성
15.1 UI 배경 만들기
15.2 UI 프레임 생성
15.3 9Slice용 이미지 만들기
15.4 실제 게임 개발에서 UI 부품 만들기
15.5 실제 게임 개발에서 AI를 사용하지 않은 이미지

PART 05 문장 데이터 생성
CHAPTER 16 ChatGPT 연계 ①이미지에 곁들일 문장 생성
16.1 ChatGPT란?
16.2 배경 이미지에 곁들일 문서 생성하기
16.3 캐릭터 소개글 문장 생성하기①
16.4 캐릭터 소개글 문장 생성하기②

CHAPTER 17 ChatGPT 연계 ②캐릭터 설정과 대화 생성
17.1 캐릭터 설정 생성하기①
17.2 캐릭터 설정 생성하기②
17.3 캐릭터 대화 생성하기