추론 서비스(IaaS)

Serverless inference pay per traffic

사전 프로비저닝 인스턴스 없음 — 트래픽에 따라 확장, 종료 시 0까지 축소. 토큰·초 단위 과금, 콜드 스타트 수 초.

핵심 강점

추론을 API로 전환

비즈니스에 집중, 인프라는 맡기세요.

⚡

2차 콜드 스타트

요청 시 기동, 상시 가동 없음.

📐

자동 스케일링

동시실행의 탄력성, 피크에서도 끊기지 않음.

🪙

사용량 기반 과금

토큰/초 단위, 유휴 시 비용 0.

🧩

멀티 모델

내장 vLLM 및 주류 오픈 모델.

모델 및 접근

과금 및 접근

과금

토큰/초 단위

세분화된 계량
단위토큰+초
최소유휴 0
통화멀티
예측 가능한 비용.
접근

통합 API

OpenAI 호환
프로토호환
SDK다국어
전환인기 모델
마찰 없는 온보딩.
성능

고처리량

vLLM 가속
엔진vLLM
배치연속
지연낮음
프로덕션급.

추론 비용을 최소화

실제 사용한 컴퓨팅만 지불.

FAQ

FAQ

서버리스 추론은 어떻게 과금되나요?

토큰·런타임 단위 정밀 계량, 요청 없으면 과금 없음.

어떤 모델이 지원되나요?

vLLM와 주류 오픈 모델, 핫스왑 가능.

콜드 스타트 시간은?

수 초 — 버스트성 트래픽에 적합.

서버리스 vs 예약형인가요?

꾸준히 높은 부하 → 예약형, 스파이크형 → 서버리스.

서버리스로 유휴 비용 작별

통합 API에 연결하고 트래픽에 따라 탄력적으로 과금.