NVIDIA L40S
Die NVIDIA L40S ist eine Enterprise- GPU, basiert auf der Ada Lovelace-Architektur und verfügt über 48 GB Speicher mit 864 GB/s Speicherbandbreite und einer TDP von 350 W. Sie liefert 91,6 TFLOPS FP32-Rechenleistung und 362 TFLOPS FP16-Tensor-Leistung. Derzeit bei 11 Anbieter verfügbar, ab 0,34 €/GPU/Stunde, mit einem Marktmedian von 1,02 €/GPU/Stunde über 43 Konfigurationen.

L40S · PCIe-Referenzdesign
Repräsentatives Design. Die Hardware des Anbieters kann abweichen.
Hardware-Spezifikationen
Gleich bei allen Anbietern
Medianpreis über alle Anbieter
12 Angebote von 11 Anbietern
Sortiert nach aufsteigendem Preis. Konfigurationen direkt vergleichen.
| Anbieter | Anzahl | vCPU | RAM | Region | Pro GPU/Std. | Gesamt/Std. | Aktion |
|---|---|---|---|---|---|---|---|
| ×1 | 16 | 62 GB | 0,973 € | 0,97 € | Starten | ||
Bis zu4 €Guthaben | ×4 | 46 | 283 GB | 0,339 € 0,0 % 30T | 1,36 € | Starten | |
| ×1 | 24 | 118 GB | Ab0,384 € +1,3 % 30T | Ab0,38 € | Starten | ||
Novita AIEmpfehlungslink | ×1 | 22 | 125 GB | 0,491 € | 0,49 € | ||
| ×4 | 46 | 283 GB | Ab0,714 € 0,0 % 30T | Ab2,86 € | Starten | ||
| ×2 | 44 | 256 GB | Ab0,825 € +70,3 % 30T | Ab1,65 € | Starten | ||
Bis zu446 €Guthaben | ×1 | 16 | 62 GB | 0,973 € | 0,97 € | Starten | |
| ×1 | 12 | 72 GB | 1,017 € +17,5 % 30T | Ab1,02 € | Starten | ||
Bis zu1 €Guthaben | ×8 | 64 | 1,5 TB | Ab1,107 € -1,1 % 30T | Ab8,86 € | Starten | |
| ×1 | 16 | 180 GB | -- | Ab1,392 € | Ab1,39 € | Starten | |
| ×1 | 8 | 96 GB | 1,470 € -3,3 % 30T | Ab1,47 € | Starten | ||
Sesterce CloudEmpfehlungslink | ×10 | 80 | 1,44 TB | Ab1,472 € 0,0 % 30T | Ab14,72 € | Starten | |
| ×1 | 20 | 60 GB | -- | Ab1,483 € +19,0 % 30T | Ab1,48 € | Starten |
LLMs, die auf die NVIDIA L40S passen
Geschätzter VRAM-Bedarf beliebter Open-Weight-LLMs bei 16 Bit (FP16/BF16), 8 Bit (FP8/INT8) und 4 Bit (INT4/MXFP4), bei 48 GB pro GPU. Gezeigt werden die 12 größten passenden Modelle.
| Modell | Parameter | 16 Bit | 8 Bit | 4 Bit |
|---|---|---|---|---|
| DeepSeek R1 DeepSeek | 671 Mrd. 37 Mrd. aktiv | — Nicht veröffentlicht | 826 GB Zu groß | 481 GB Knapp auf 10× · 19 % übrig |
| DeepSeek V4 Flash DeepSeek | 284 Mrd. | — Nicht veröffentlicht | — Nicht veröffentlicht | 192 GB Passt knapp auf 4× |
| Solar Open2 250B Upstage | 250 Mrd. 15 Mrd. aktiv | 601 GB Zu groß | 330 GB 8× · 54 GB frei | 192 GB 8× · 192 GB frei oder 4× · 19 % übrig |
| Qwen3 235B-A22B Alibaba | 235 Mrd. 22 Mrd. aktiv | 564 GB Knapp auf 10× · 2 % übrig | 310 GB 8× · 74 GB frei | 181 GB 4× · 11 GB frei |
| Laguna-S 2.1 Poolside | 118 Mrd. 8 Mrd. aktiv | 282 GB 8× · 102 GB frei | 155 GB 4× · 37 GB frei | 90 GB 2× · 5,7 GB frei |
| gpt-oss-120b OpenAI | 117 Mrd. 5,1 Mrd. aktiv | — Nicht veröffentlicht | — Nicht veröffentlicht | 78 GB 2× · 18 GB frei |
| Qwen3.6 35B-A3B Alibaba | 35 Mrd. 3 Mrd. aktiv | 86 GB 2× · 9,7 GB frei | 47 GB Passt knapp auf 1× | 28 GB 1× · 20 GB frei |
| Qwen3 32B Alibaba | 32,8 Mrd. | 79 GB 2× · 17 GB frei | 43 GB 1× · 4,8 GB frei | 25 GB 1× · 23 GB frei |
| Gemma 4 31B Google | 31,3 Mrd. | 75 GB 2× · 21 GB frei | 41 GB 1× · 6,7 GB frei | 24 GB 1× · 24 GB frei |
| GLM-4.7 Flash Z.ai | 31,2 Mrd. | 75 GB 2× · 21 GB frei | 41 GB 1× · 6,8 GB frei | 24 GB 1× · 24 GB frei |
| Qwen3.6 27B Alibaba | 27,8 Mrd. | 67 GB 2× · 29 GB frei | 37 GB 1× · 11 GB frei | 21 GB 1× · 27 GB frei |
| Mistral Small 3.2 24B Mistral AI | 24 Mrd. | 58 GB 2× · 38 GB frei | 32 GB 1× · 16 GB frei | 18 GB 1× · 30 GB frei |
Schätzungen: Modellgewichte plus 20 % für KV-Cache und Laufzeit-Overhead, bei kurzen Kontextlängen. Lange Kontexte und große Batches benötigen mehr. Als „knapp“ markierte Zeilen fassen die Gewichte, aber nicht diesen vollen Puffer. Ein ×N-Wert ist der gesamte VRAM über N dieser GPUs und sagt nichts über den Durchsatz der Verbindung aus. Wie wir das schätzen · Stattdessen vom Modell aus starten
Mehr von dieser Seite?
Falsche Daten?






