Inférence en tant que service

Serverless inference pay per traffic

Aucune instance pré-provisionnée — montez en charge selon le trafic, descendez à zéro quand il s'arrête. Facturé par token et seconde, démarrage à froid en quelques secondes.

Forces clés

Transformez l'inférence en API

Concentrez-vous sur le métier, nous gérons l'infrastructure.

⚡

Démarrage à froid à l'échelle de la seconde

Monté à la demande, pas toujours actif.

📐

Mise à l'échelle automatique

Élastique avec concurrence, sans chute aux pics.

🪙

Payez à l'usage

Par token/seconde ; coût zéro à l'inactif.

🧩

Multi-modèle

vLLM intégré et modèles open-source grand public.

Modèle et accès

Facturation et accès

Facturation

Par token/seconde

Mesure granulaire
Unitétoken+sec
Mininactif zéro
Devisemulti
Coût prévisible.
Accès

API unifiée

Compatible OpenAI
Protocompatible
SDKmultilingue
Basculermodèle populaire
Intégration sans friction.
Perf

Haut débit

accéléré vLLM
MoteurvLLM
Par lotscontinu
Latencefaible
De niveau production.

Réduisez le coût d'inférence au minimum

Payez uniquement le calcul réellement utilisé.

FAQ

FAQ

Comment l'inférence Serverless est-elle facturée ?

Par token et durée d'exécution, finement mesuré ; aucun frais sans requête.

Quels modèles sont pris en charge ?

vLLM et modèles open-source grand public, remplaçables à chaud.

Temps de démarrage à froid ?

Secondes — adapté au trafic erratic.

Serverless vs réservé ?

Charge stable élevée → réservé ; erratic → Serverless.

Dites adieu au coût d'inactivité avec Serverless

Connectez une API unifiée, payez par trafic de façon élastique.