Hondi(혼디) 인프라 분석

국내 AI 서버 구축 비용 분석
— 성능 기준 DeepSeek V4-Flash / V4-Pro

한국의 데이터 관리 법규에 따라 국내 서버 구축이 필수적인 상황을 전제로, 10만 사용자·1인당 하루 15분 이용 시나리오에서 DeepSeek V4-Flash와 V4-Pro의 최소 비용 구축 방안을 분석합니다.

기준 시나리오
10만 사용자 · 1인당 15분/일
전제 조건
국내 데이터관리법 준수(국내 서버 필수)
대상 모델
DeepSeek V4-Flash / V4-Pro
본 문서의 수치는 공개된 하드웨어 사양·시장 가격대와 몇 가지 트래픽 가정을 바탕으로 한 오더-오브-매그니튜드(자릿수) 추정입니다. 실제 벤더 견적, IDC 회선 비용, 인건비에 따라 달라질 수 있습니다.

1. 개요

배경. 혼디는 시민의 민감한 대화·서류 데이터를 다루는 서비스 특성상, 국내 데이터관리법을 준수하려면 해외 API가 아닌 국내에 직접 구축한 서버에서 LLM을 운영해야 합니다. 현재는 해외 LLM API를 경유하는 구조적 한계로 혼디 설계 성능의 약 50%만 발휘하고 있으며, 국내 클러스터에 오픈소스 LLM(DeepSeek V4 계열)을 설치하고 혼디 목적에 맞게 파인튜닝해야 100% 성능이 나옵니다.

전제 조건. 10만 명의 사용자가 1인당 하루 평균 15분씩 혼디를 이용한다고 가정합니다. 이는 이전에 검토했던 '제주 10만 명·하루 10분' 시나리오보다 사용 시간이 1.5배 늘어난 버전입니다.

2. 트래픽 및 자원 추정

항목
일일 활성 사용자100,000명
1인당 일일 사용 시간15분
1인당 평균 질문 횟수15회/일 (10분 기준 10회에서 비례 산정)
평균 입력/출력 토큰1회당 입력 1,000 / 출력 500토큰
일일 총 입력 토큰100,000명 × 15회 × 1,000 = 15억 토큰
일일 총 출력 토큰100,000명 × 15회 × 500 = 7.5억 토큰
월간 총 입력 토큰(30일)450억 토큰
월간 총 출력 토큰(30일)225억 토큰

3. DeepSeek V4-Flash 구축 방안 (최소 비용)

3.1 하드웨어 구성

V4-Flash(총 2,840억 파라미터, 활성 130억)는 단일 서버로도 구동이 가능합니다. INT4 양자화 시 약 140GB VRAM이 필요해 2×H100 80GB, 또는 1×H100(INT4)로도 구동할 수 있지만, 10만 사용자의 실사용 트래픽을 감안하면 4×H100 80GB 구성을 권장합니다. 부가 사양으로 32코어 이상 CPU, 512GB DDR5 메모리, 4TB NVMe SSD가 필요합니다.

3.2 도입·운영 비용 (국내 GPU 서버 호스팅 임대 기준)

항목추산치
H100 80GB 서버 월 임대료(국내)월 400만원 이상부터 시작
4×H100 서버 월 임대료월 1,000만원대 예상
연간 총 비용(임대+운영 인건비 포함)약 5억 ~ 7억원

하드웨어를 직접 구매하는 대신 국내 GPU 서버 호스팅을 임대하면 초기 비용 부담을 크게 줄일 수 있습니다.

4. DeepSeek V4-Pro 구축 방안 (도입 난이도 매우 높음)

4.1 하드웨어 구성

V4-Pro(총 1.6조 파라미터, 활성 490억)는 Flash보다 훨씬 높은 사양을 요구합니다. INT4 양자화만으로도 약 700GB VRAM이 필요해 8×H100 80GB가 최소 사양이며, 실사용을 고려한 권장 사양은 8×B200 또는 16×H200 수준입니다. 단일 서버가 아닌 최소 8대 이상의 GPU가 장착된 고성능 서버 또는 클러스터가 필수적입니다.

4.2 도입·운영 비용 (국내 도입 기준)

항목추산치
8×H100급 클러스터 월 임대료최소 월 3,000만원 이상 예상(국내 공개 요금 부재)
연간 총 비용(임대+전력+냉각+전문 인력)연간 최소 5억원 이상

4.3 도입 타당성

V4-Pro는 하드웨어 비용과 도입 복잡도가 극도로 높아, 10만 사용자 규모에서는 사실상 도입을 권장하기 어렵습니다. V4-Pro 수준의 초고난도 추론이 필요하지 않다면 V4-Flash만으로도 서비스가 충분히 가능합니다.

5. Flash vs Pro 비교 요약

비교 항목V4-Flash (임대)V4-Pro (임대)
최소 GPU 사양2~4×H100 80GB8×H100 80GB
월간 서버 임대료(추정)약 1,000만원 이상약 3,000만원 이상
연간 총 비용(추정)약 5억~7억원약 5억원 이상
도입 난이도보통(서버 1대)매우 높음(대규모 클러스터)
확장성제한적제한적

6. 1인당 월 비용 분석 (V4-Flash 기준)

6.1 API 이용 기준

구분단가(元/백만 토큰)1인당 월 사용량1인당 월 비용(元)
입력 토큰1.5元45만 토큰0.675元
출력 토큰4.5元22.5만 토큰1.0125元
합계(오프피크)--1.6875元 (≈320원)

피크 시간대(09:00~12:00, 14:00~18:00)에는 요금이 오프피크 대비 정확히 2배로 상승해, 1인당 월 비용이 약 640원(3.375元)이 됩니다.

6.2 자체 구축 vs API 비교

비교 항목자체 구축(임대)API(오프피크)
월간 총 비용약 5억~7억원약 3.2억원(추정)
1인당 월 비용약 5,000~7,000원약 320원
초기 투자 비용수억원(서버 임대 보증금 등)0원
10만 사용자 규모에서는 API 방식이 자체 구축 대비 약 1/15~1/20 수준으로 훨씬 저렴합니다. 다만 사용자 수가 늘어나면 자체 구축의 1인당 단가가 API보다 낮아지는 규모의 경제가 발생합니다.

7. 자체 구축 vs API 손익분기점(BEP)

이론적 계산. 자체 구축 월 고정비(중간값 6억원) ÷ API 1인당 월 변동비(320원) = 1,875,000명. 서버 가동률 70%를 적용하면 약 1,312,500명.

해외 사례 환산. 해외 분석 기준 V4-Flash의 자체 구축-API 역전점은 하루 8억 3,100만~14억 5,000만 토큰 처리 규모로 보고됩니다. 1인당 하루 22,500토큰(15분 기준) 사용량으로 환산하면 약 3.7만~6.4만 명의 일일 활성 사용자 규모에서 역전이 발생할 수 있습니다.

종합 판단. 이론적 계산과 해외 사례를 종합하면, 자체 구축이 API 대비 경제성을 확보하는 실질적 규모는 약 55만 명 전후로 판단됩니다. 55만 명 미만에서는 API가, 그 이상에서는 자체 구축 검토가 유리합니다. 단, 이는 하드웨어·IDC·인건비 등 변수가 고정되었을 때의 계산입니다.

8. 최종 권고안

① V4-Flash로 우선 시작

초기 비용과 도입 난이도를 고려할 때, DeepSeek V4-Flash를 국내 GPU 서버 호스팅에 임대해 서비스를 시작하는 것이 현실적인 방안입니다. 월 1,000만원대 서버 임대료로 10만 사용자를 감당할 최소 인프라를 확보할 수 있습니다.

② V4-Pro는 신중 검토

하드웨어 비용과 도입 복잡도가 극도로 높아 10만 사용자 규모에서는 도입을 권장하기 어렵습니다. 초고난도 추론이 필요한 경우가 아니라면 V4-Flash로 충분합니다.

③ 하이브리드 운영 고려

트래픽이 적은 시간대(Off-peak)에는 API를, 피크 타임에는 자체 임대 서버를 가동하는 방식으로 전체 비용을 최적화하는 전략도 병행 검토할 수 있습니다.

중요. 위 손익분기점 분석은 '경제성'만을 고려한 기준입니다. 한국의 데이터관리법으로 인해 경제성과 무관하게 서비스 초기부터 자체 구축이 불가피할 수 있으며, 이 경우 비용보다 법적 준수와 데이터 통제권을 우선해야 합니다.

9. 부록

9.1 가정 및 한계

9.2 이전 시나리오와의 차이

이전에 검토했던 '제주 10만 명·1인당 하루 10분' 시나리오는 동시 접속자 수·GPU 노드 처리량 기준으로 접근해 GPU 서버 하드웨어 구매 비용을 약 6.5~12억원(Flash~Pro)으로 추산했습니다. 이번 15분/일 시나리오는 월간 토큰 소비량과 국내 임대 시세를 기준으로 접근했으며, Flash 연간 약 5~7억원이라는 결과는 앞선 추산과 같은 자릿수 범위에 있습니다.