사내 GPU 노드 실측 리포트 · 2026-07-14

RTX PRO 6000 96GB
로컬 생성 AI의 천장을 실측하다

이미지 13장 · 영상 3편 · 케이팝 곡 1곡 · 117B급 언어모델 1개를 사내 GPU 노드 한 대에서 직접 돌렸다. 잘 되는 것과 안 되는 것을 가감 없이 그대로 기록한 실측 결과.

FLUX.2-dev · Krea 2 · Z-Image Turbo · Illustrious · Wan 2.2 14B · ACE-Step 3.5B · gpt-oss-120b

GB
단일 GPU VRAM
소비자용 24~32GB의 3~4배
FLUX.2 32B 이미지 1장
20스텝 · 정상 상태 기준
Wan 2.2 14B 영상 1편
720p · 5초 · fp16
tok/s
gpt-oss-120b 추론
117B MoE · 59GiB 상주
01 / IMAGE

이미지 생성 — 4개 모델, 같은 GPU에서

같은 노드, 같은 프롬프트 계열. 모델을 바꾸자 속도·화질·한글 렌더링 결과가 크게 갈렸다. 카드 우상단 숫자는 실제 측정된 생성 시간이다.

FLUX.2-dev

32B · 파라미터 최상위 클래스
생성시간 21초/장 (정상 상태) VRAM 70.5GB 20 스텝
FLUX.2로 생성한 케이팝 무대
36.1초*
케이팝 무대 — 조명·군중 디테일
FLUX.2로 생성한 서울 사이버펑크 골목
24.1초
서울 사이버펑크 — 네온 골목
FLUX.2로 생성한 시네마틱 인물 포트레이트
24.0초
시네마틱 인물 — 필름 톤
FLUX.2로 생성한 한복 퓨처리즘
21.1초
한복 퓨처리즘 — 전통과 SF의 접점
FLUX.2로 생성한 향수 매크로 촬영
21.2초
향수 매크로 — 제품 촬영급 디테일
FLUX.2로 생성한 한글 네온 사인, 오탈자 발생
21.3초
한글 네온 사인 — 한글 오탈자 발생, 정직 기록

* 최초 1장은 모델 로드 시간이 포함되어 36.1초로 측정됨 · 이후 정상 상태 21~24초/장

Krea 2

RedCraft · 2026년 오픈 모델 화제작
생성시간 20초/장 (2K 포함) 8 스텝
Krea 2로 생성한 한글 포스터, 리얼라이브 타이틀 정확 렌더링
20.0초
한글 포스터 — 메인 타이틀 '리얼라이브' 정확 렌더링, FLUX.2가 실패한 지점
Krea 2 darkbrush LoRA로 생성한 아이돌 일러스트
20.0초
다크브러시 아이돌 — 공식 darkbrush LoRA 적용
Krea 2로 생성한 2K 네이티브 랜드스케이프
20.0초
2K 랜드스케이프 — 2048px 네이티브 해상도

Z-Image Turbo

IntoRealism · 체크포인트
생성시간 4~8초/장 — 속도왕 8 스텝
Z-Image Turbo로 생성한 인물 포트레이트
8.0초
인물 포트레이트
Z-Image Turbo로 생성한 스트리트 스냅
4.0초
스트리트 스냅

Illustrious

One obsession v23 체크포인트
생성시간 3~6초/장 커뮤니티 일러스트 톱
Illustrious로 생성한 케이팝 아이돌 일러스트
6.4초
케이팝 아이돌 일러스트
Illustrious로 생성한 한복 판타지 일러스트
3.0초
한복 판타지 일러스트
02 / VIDEO

영상 생성 — Wan 2.2 14B fp16

720p·5초 클립 한 편에 16.5분. 정지 이미지 대비 자릿수가 다른 연산량이 VRAM 82.2GB로 그대로 드러난다.

클립당 16.5분 VRAM 82.2GB 720p · 5초
아이돌 댄스

관절·리듬 일관성 실증

서울 드론 샷

도심 항공뷰 카메라 워크

바람에 날리는 머리카락

오픈소스 인물 표현 최강 실증

03 / AUDIO

음악 생성 — ACE-Step 3.5B

95초 분량 케이팝 곡을 한국어 가사 포함으로 통째로 뽑아내는 데 걸린 시간, 12초.

95초 → 12초 곡 길이 95초 케이팝 트랙
생성 소요 12초 (한국어 가사 포함)
모델 ACE-Step 3.5B

한국어 가사가 실제로 노래에 얹혀 나온다 — 재생해서 직접 확인 (별도 가사 텍스트는 정확도 미검증으로 지면에 옮기지 않음)

04 / LLM

LLM 추론 — gpt-oss-120b

117B MoE(Mixture-of-Experts, 필요한 전문가 서브네트워크만 골라 쓰는 구조) 모델을 통째로 GPU 메모리에 상주시킨 채 돌린 결과.

278 tok/s
생성 속도 (출력 토큰)
6,200 tok/s
프롬프트 처리 속도 (입력)
59 GiB
상주 메모리

117B MoE · 96GB 중 59GiB만 써도 상주 가능 — 이미지·영상 워크로드와 동시 운용 여지가 남는다

05 / MEMORY

왜 96GB인가

생성 AI 모델은 파라미터·활성값·캐시를 한꺼번에 VRAM에 올려야 돌아간다. 소비자용 24~32GB로는 아예 못 돌리는 조합이 있다는 뜻이다.

FLUX.2-dev이미지 · 32B
24GB
32GB
70.5GB
Wan 2.2 14B영상 · fp16
24GB
32GB
82.2GB
gpt-oss-120bLLM · 117B MoE
24GB
32GB
59GB

막대는 96GB 기준 상대 스케일 · 점선은 소비자용 GPU의 24GB / 32GB 한계선

06 / LIMITS

정직한 한계 — 안 되는 것도 그대로 기록한다

실측이라는 말에 책임을 지려면 성공 사례만큼 실패도 남겨야 한다.

01

FLUX.2 한글 렌더링 실패 — 06_hangul_neon 이미지에서 한글 오탈자 발생

02

Wan 2.2 랜드마크 부정확 — 서울 드론 샷에서 남산타워 형상 재현 실패

03

Civitai 갤러리 메타 API 미제공 — meta가 None으로 반환되어 제작자 권장 세팅을 수동 적용

04

Anima 아키텍처 비호환 — 동일 배치에서 실행 오류(exec) 확인

05

일부 리얼리즘 톱 모델 접근 제한 — 로그인 토큰이 필요해 이번 라운드에서 제외