클라우드 이미지 AI는 편합니다. 그런데 쓸 때마다 크레딧이 줄고, 만든 그림이 서버에 올라가는 것도 신경 쓰였습니다.
“내 PC 그래픽카드가 놀고 있는데, 여기서 직접 그리면 안 될까?”
그래서 직접 해봤습니다. 제 Windows PC(RTX 4070 Ti Super 16GB)에 로컬 이미지 AI를 설치해서, 돈 안 들이고 그림을 만들어본 이야기입니다.
로컬 이미지 AI가 뭐예요?
쉽게 말하면 Midjourney나 DALL·E 같은 이미지 생성 AI를 내 컴퓨터 안에 직접 설치해서 돌리는 방식입니다.
대표 도구가 ComfyUI입니다. 화면에 노드(블록)를 연결하는 방식이라 처음엔 복잡해 보이지만, 기본 워크플로우는 템플릿을 불러와 프롬프트만 바꾸면 됩니다.
제가 사용한 조합은 이렇습니다.
- 장비: Windows PC, RTX 4070 Ti Super 16GB VRAM, RAM 64GB
- 실행 도구: ComfyUI
- 모델: SDXL 계열 체크포인트 (Juggernaut XL 등)
- 체감: 1024×1024 한 장에 수십 초 수준, 클라우드 대기열 없이 바로 다시 뽑을 수 있는 게 제일 컸습니다
설치는 생각보다 간단했습니다 – 3단계
1단계: ComfyUI 설치하기
가장 쉬운 건 공식 데스크톱 설치본(comfy.org)이고, 직접 설치하려면 Git으로 받습니다.
git clone https://github.com/comfyanonymous/ComfyUI.git
cd ComfyUI
2단계: 파이썬 환경과 PyTorch 설치하기
NVIDIA 그래픽카드 기준, CUDA용 PyTorch를 먼저 깝니다.
python -m venv venv
venv\Scripts\activate
pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu124
pip install -r requirements.txt
설치 확인:
python -c "import torch; print(torch.cuda.is_available(), torch.cuda.get_device_name(0))"
# True NVIDIA GeForce RTX 4070 Ti SUPER 처럼 나오면 GPU를 잡은 겁니다
3단계: 모델 넣고 실행하기
모델 파일(.safetensors)을 아래 폴더에 넣어야 ComfyUI가 인식합니다.
ComfyUI\models\checkpoints
# 예: juggernautXL_v9.safetensors 를 이 폴더에 복사
실행:
python main.py
# 브라우저에서 http://127.0.0.1:8188 접속
처음엔 “모델 크기가 내 VRAM에 맞을까?”가 제일 헷갈렸습니다. SDXL 모델은 파일이 약 6~7GB 수준이라 16GB VRAM이면 여유 있고, 8GB라면 SD 1.5 계열이나 경량 모델부터 시작하는 게 안전합니다.
직접 해본 재미있는 실험 3가지
1. 카페 인물 사진 만들기
예시 프롬프트:
a cozy cafe portrait of a woman reading a book, soft window light, shallow depth of field, film photography, detailed skin texture
Negative:
blurry, deformed hands, extra fingers, low quality, watermark
결과 (예시):
창가 빛이 얼굴 옆으로 떨어지는 카페 사진이 나왔습니다. 첫 장은 손가락이 어색했지만, Negative에 extra fingers를 넣고 3~4장 더 뽑으니 쓸 만한 장이 골라졌습니다.
한줄평: 한 번에 완벽한 한 장이 아니라, 여러 장 뽑아 고르는 재미가 로컬의 장점입니다. 추가 비용이 없으니 실패해도 부담이 없습니다.
2. 서울 밤거리 풍경 만들기
예시 프롬프트:
rainy night street in Seoul, neon signs in Korean, wet pavement reflections, cinematic, ultra detailed
결과 (예시):
비 오는 밤거리와 네온 반사는 그럴듯하게 나왔지만, 간판 글자는 뭉개졌습니다. AI가 글자를 그리는 건 아직 약하다는 게 바로 보였습니다.
한줄평: 분위기용 배경으로는 충분하고, 글자가 중요한 썸네일 문구는 따로 얹는 게 정답입니다.
3. 같은 그림, 스타일만 바꾸기
예시 프롬프트:
(같은 seed 고정) a mountain lake at sunrise, oil painting style / 다음은 anime style, clean line art 로만 변경
결과 (예시):
seed(랜덤 씨앗 숫자)를 고정하니 구도는 그대로 두고 화풍만 유화→애니메이션으로 바뀌었습니다. 설정값이 숫자로 남으니 재현이 됐습니다.
한줄평: 클라우드에서는 숨겨진 설정이, 로컬에서는 전부 숫자로 보입니다. 이게 ComfyUI를 배우는 재미입니다.
추가로 해본 것 – 프롬프트를 이렇게 바꿨더니
- 손이 망가질 때: Negative 프롬프트에 deformed hands, extra fingers를 기본으로 넣으니 실패율이 줄었습니다.
- 원하는 빛을 말할 때: “good lighting”보다 “soft window light, golden hour”처럼 빛의 방향과 시간을 적으니 결과가 안정됐습니다.
- 사람을 찍을 때: 카메라 말투(film photography, 85mm lens, shallow depth of field)를 붙이니 AI 그림 티가 줄었습니다.
클라우드 이미지 AI와 비교하면 이렇습니다
- 비용: 클라우드는 구독/크레딧 / 로컬은 전기요금 수준, 몇 장을 뽑든 추가 비용 없음
- 속도: 클라우드는 대기열에 따라 다름 / 로컬은 내 GPU 성능이 곧 속도
- 개인정보: 클라우드는 서버 업로드 / 로컬은 내 PC 안에서만 처리, 얼굴 사진도 밖으로 안 나감
- 자유도: 클라우드는 정해진 기능만 / 로컬은 모델·LoRA·워크플로우를 직접 교체 가능
- 진입장벽: 클라우드는 바로 사용 / 로컬은 설치와 모델 관리가 필요
결론은 어제 글과 같습니다. “둘 중 하나”가 아니라 “나눠 쓰기”입니다. 빠른 한 장은 클라우드, 반복 실험과 민감한 소재는 로컬이 편했습니다.
누구에게 추천할까요?
- 이미지 AI 구독료가 아까운데 그래픽카드 좋은 PC가 있는 분
- 썸네일·배경을 반복해서 뽑아야 하는 분
- 얼굴 사진 같은 민감한 소재를 서버에 올리기 싫은 분
반대로, 가끔 한 장만 필요하다면 클라우드가 여전히 편합니다.
마무리
로컬 이미지 AI는 처음 30분이 제일 어렵고, 첫 장이 나오면 그다음부터는 놀이가 됐습니다.
여러분은 AI에게 어떤 그림을 그려달라고 해보고 싶으신가요?
같이 보면 좋은 참조 영상
말로만 듣는 것보다 직접 돌아가는 모습을 보면 훨씬 이해가 빠릅니다. 아래 영상들을 참고했습니다.
1. ComfyUI 완벽 입문 2026 최신판 – 크립토메이지, 설치부터 첫 이미지까지
2. AI 애니메이터 toyxyz의 ComfyUI 클래스 1강 공개 – 강의 목표와 기초
3. ComfyUI 커스텀 워크플로우 맛보기 – toyxyz
영상은 참고용이고, 실제 설정값은 본인 그래픽카드 VRAM과 모델 크기에 맞춰 조정해야 합니다.