推論アズアサービス

Serverless inference pay per traffic

事前プロビジョニング不要—トラフィックで増強、去ればゼロに。トークンと秒で課金、コールドスタートは秒単位。

中核となる強み

推論をAPIに

事業に集中、インフラは任せて。

⚡

秒単位のコールドスタート

リクエストで起動、常時稼働なし。

📐

自動スケーリング

同時実行の弾性、ピークでも落ちない。

🪙

従量課金

トークン/秒、アイドル時はゼロコスト。

🧩

マルチモデル

組み込みのvLLMと主要なオープンモデル。

モデル&アクセス

課金とアクセス

課金

トークン/秒

きめ細かな計測
単位トークン+秒
最小ゼロアイドル
通貨マルチ
予測可能なコスト。
アクセス

統一API

OpenAI互換
プロト互換
SDK多言語
切替ホットモデル
摩擦ゼロのオンボーディング。
性能

高スループット

vLLM高速化
エンジンvLLM
バッチ継続
遅延低
本番グレード。

推論コストを最小化

実際に使った計算だけを支払う。

FAQ

FAQ

Serverless推論はどう課金されますか?

トークンと実行時間で細かく計測、リクエストなしは非課金。

どのモデルに対応?

vLLMと主要オープンモデル、ホットスワップ可能。

コールドスタート時間は?

秒単位—バーストトラフィックに適合。

Serverless対予約は?

安定高負荷→予約、スパイキー→Serverless。

Serverlessでアイドルコストに別れを

統一APIに接続し、トラフィックに応じて弾性的に課金。