Hyperstack
VM's met 1 tot 8 GPU's op A100 80GB PCIe, H100 PCIe en L40 voor fine-tunen en inferentie, per minuut gefactureerd en zonder kosten voor dataverkeer
We kunnen commissie verdienen als je via de links hieronder koopt. Meer informatie
Serveer open modellen op serverless GPU's die naar nul schalen, op dedicated instances of op beheerde endpoints. Vergelijk gecontroleerde prijzen per GPU-uur, afrekeneenheden en regio's.
Gefactureerd zolang verzoeken draaien, en in staat om naar nul te schalen. Past goed bij wisselend of weinig verkeer; reken op cold starts.
Gefactureerd voor elk uur dat de instance draait. Past goed bij gelijkmatig verkeer en een voorspelbare latentie.
Facturering per seconde telt bij korte taken en autoscaling; facturering per uur rondt gedeeltelijke uren naar boven af.
De modelgewichten plus de KV-cache voor je contextlengte en het aantal gelijktijdige verzoeken moeten in het VRAM passen.
Sommige platforms verkopen toegang tot modellen per miljoen tokens in plaats van GPU-tijd. Deze pagina vergelijkt prijzen per GPU-uur; prijzen per token worden er niet mee vermengd.
Filters matchen een provider als één van zijn vermelde aanbiedingen tegelijk aan elke GPU-, VRAM-, regio-, prijs- en afrekeneenheidvoorwaarde voldoet. De facturering spot, reserved en serverless toont elke provider die die prijsvorm aanbiedt en alleen prijzen op die basis, of “niet gecontroleerd” als we er geen hebben. Lees de volledige methodologie en onze affiliate-toelichting.
Hij laadt een model in het GPU-geheugen en beantwoordt verzoeken via een API, die hij in batches bundelt om de GPU bezig te houden. vLLM en Ollama zijn veelgebruikte open-source voorbeelden.
Dat hangt af van hoe het model wordt geserveerd: API's per token rekenen per miljoen tokens, dedicated endpoints en GPU-instances rekenen per GPU-uur zolang ze draaien, en serverless GPU's rekenen de seconden dat ze werken. De resultaten tonen gecontroleerde prijzen per GPU-uur; de GPU-kostencalculator maakt er een maandschatting van.
Dat hangt af van de benutting. Serverless factureert alleen zolang verzoeken draaien en past dus bij wisselend verkeer; een dedicated GPU factureert elk uur dat hij draait en past dus bij een gelijkmatige belasting. Filter op facturering om beide voor dezelfde GPU te vergelijken.
Je betaalt voor de seconden dat een worker draait in plaats van af te ronden op hele uren, wat korte taken en endpoints die naar nul schalen goedkoper maakt.
Per GPU. Elke GPU-prijs staat in USD per enkele GPU per uur; aanbod voor multi-GPU-nodes wordt gedeeld door het aantal GPU's, en een prijs die je alleen als hele node kunt huren zegt dat erbij (bijvoorbeeld “gehuurd als 8 GPU's”). Opslag, dataverkeer en belastingen zijn niet inbegrepen, tenzij de provider ze meerekent.