Server dedicati GPU · NVIDIA Blackwell · a canone mensile

Server dedicato RTX 509032 GB di GDDR7 su bare metal, noleggiato a canone mensile.

Un server dedicato RTX 5090 è una macchina bare metal noleggiata a canone mensile, e la GPU completa viene assegnata al tuo sistema operativo tramite passthrough PCIe. Le macchine più grandi ospitano fino a 4 RTX 5090, e un server completo parte da $472.47 al mese.

  • Passthrough PCIe
  • Porta senza limiti di traffico
  • 4 città
  • Nessun vincolo contrattuale

La RTX 5080 è l'opzione da 16 GB sulla stessa architettura, a partire da $312.67 al mese. Entrambi i prezzi includono processore, memoria, dischi, la porta e un indirizzo IPv4, con la GPU fatturata come voce mensile separata. Scegli la GPU in base alla memoria, poi modifica il resto nel configuratore.

Le due GPU

Server RTX 5090 e RTX 5080, ciascuno con prezzo completo

Entrambe sono GPU GeForce Blackwell con GDDR7, core Tensor di quinta generazione che eseguono FP4, core RT di quarta generazione e codifica hardware AV1. La RTX 5090 ha il doppio dei core CUDA della 5080, il doppio della memoria e un bus a 512 bit con 1.792 GB/s. Se il tuo modello o la tua scena rientra nei 16 GB, la 5080 lo esegue spendendo meno al mese, solo più lentamente.

32 GB GDDR7 · PCIe 5.0 x16 GPU

GeForce RTX 5090

$472.47/mo, complete server

GPU $399/mo, plus the machine:

Intel Xeon E5-2620 v4, 8 cores, 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps

CUDA cores
21,760
Memory bus, bandwidth
512-bit, 1,792 GB/s
Boost clock
2.41 GHz
Board power
575 W
Video engines
3 NVENC, 2 NVDEC
Most per server
4
Machine lines
5
Configure an RTX 5090 server

16 GB GDDR7 · PCIe 5.0 x16 GPU

GeForce RTX 5080

$312.67/mo, complete server

GPU $229/mo, plus the machine:

Intel Xeon Silver 4110, 8 cores, 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps

CUDA cores
10,752
Memory bus, bandwidth
256-bit, 960 GB/s
Boost clock
2.62 GHz
Board power
360 W
Video engines
2 NVENC, 2 NVDEC
Most per server
4
Machine lines
1
Configure an RTX 5080 server

Ogni prezzo corrisponde alla macchina più economica che supporta quella GPU, come la apre il configuratore. Il pulsante apre quella macchina con la GPU già selezionata; processori più veloci, più memoria, dischi più grandi e una porta più rapida vengono quotati lì. Le configurazioni di Bucarest sono fatturate in euro, e il configuratore mostra quel prezzo quando scegli la città.

Collegamento host

Il collegamento PCIe che ogni server RTX 5090 offre alla GPU

Le RTX 5090 e RTX 5080 sono progettate per PCIe 5.0 x16. Le linee di macchine quotate sotto fanno funzionare lo slot GPU a PCIe 3.0 o PCIe 4.0, e la più veloce tra queste è PCIe 4.0. Per alcuni carichi di lavoro questo determina quale macchina acquistare, quindi ecco cosa offre ciascuna alla GPU.

PCIe 5.0 x16what the GPU is built for63 GB/s
PCIe 3.0 x16Intel Xeon E5-2600 v3/v4 and Intel Xeon Silver / Gold15.8 GB/s
PCIe 4.0 x16AMD EPYC31.5 GB/s

Quando il collegamento conta poco

Inferenza con i pesi già nella memoria GPU, codifica video e rendering una volta caricata la scena. I dati attraversano il bus al momento del caricamento e poi restano sulla GPU, quindi un collegamento PCIe 3.0 costa qualche secondo all'avvio e nulla dopo.

Quando conta

Cicli di addestramento che copiano un batch dalla memoria di sistema a ogni passo, render che trasferiscono texture più grandi della memoria GPU e più GPU che suddividono un unico modello. Le GPU GeForce RTX 50 non hanno NVLink, quindi anche il traffico multi-GPU passa dal PCIe. Per questi casi, scegli la macchina con il collegamento più veloce nella tabella sotto.

MachinePCIe link to the GPURTX 5080RTX 5090
Intel Xeon E5-2600 v3/v4from $73.47/mo without a GPUPCIe 3.0not offeredup to 4
Intel Xeon Silver / Goldfrom $83.67/mo without a GPUPCIe 3.0up to 4up to 4
AMD EPYCfrom $217.59/mo without a GPUPCIe 4.0not offeredup to 1
Intel Xeon Gold 3rd gen, DDR4built to order in New York, priced in the configuratorask us in chatnot offeredup to 2
Intel Xeon Gold 4th gen, DDR5built to order in New York, priced in the configuratorask us in chatnot offeredup to 2

I prezzi delle macchine sono la configurazione più economica di ciascuna linea senza GPU. Le linee più recenti costruite su ordinazione sono quotate nel configuratore; chiedici in chat a quale generazione PCIe gira il loro slot GPU prima di ordinare. I server RTX 50 possono essere ordinati in New York, Miami, San Francisco and Bucharest; le macchine di Amsterdam non sono offerte con queste GPU. Data center descrive ogni struttura.

Dimensionamento per l'IA

Quale modello può ospitare un server IA con RTX 5090

Per l'inferenza, la memoria decide per prima. I pesi occupano parametri per byte per parametro, e la GPU richiede da un quarto alla metà in più per la cache KV e il runtime. La tabella applica questa regola a una RTX 5080, una RTX 5090 e una macchina con più 5090.

Model size (weights)RTX 508016 GBRTX 509032 GB2 x RTX 509064 GB4 x RTX 5090128 GB
7-8 billion parameters4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
13-14 billion parameters4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
30-34 billion parameters4-bit: No8-bit: No4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
70 billion parameters4-bit: No8-bit: No4-bit: No8-bit: No4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits

Una RTX 5090: 32 GB

Un modello da 30B a 4 bit o uno da 13B a 8 bit si carica con contesto di riserva, dietro la tua API su Ollama, llama.cpp o vLLM. I core Tensor Blackwell eseguono anche FP4 in modo nativo, che i runtime progettati per questo, come TensorRT-LLM, usano per servire modelli a 4 bit più velocemente.

Più RTX 5090 in una macchina

Le nostre macchine più grandi ne ospitano fino a 4, 128 GB di memoria GPU in totale, che vLLM o llama.cpp suddividono tra i modelli. Due gestiscono un modello da 70B a 4 bit con margine. Per una GPU con più memoria, vedi tutte le GPU che installiamo; per piani modello per modello, server LLM.

Carichi di lavoro

Cosa esegue un server della serie RTX 50 e i suoi limiti

Inferenza LLM privata

Un modello sulla tua macchina, dietro il tuo endpoint. Prompt e output restano su hardware noleggiato a un solo account, e il costo è lo stesso sia che la GPU sia occupata tutto il mese sia che resti inattiva.

Rendering

Blender Cycles renderizza su CUDA o OptiX, e i core RT accelerano il ray tracing in esso e in altri renderer GPU. Installa il sistema operativo richiesto dal tuo renderer e metti in coda i frame durante la notte.

Codifica video

La RTX 5090 ha tre encoder NVENC e la RTX 5080 due, ciascuno in grado di gestire H.264, HEVC e AV1 via hardware. Due decoder NVDEC su ciascuna alleggeriscono il processore dal lato input.

Server di gioco e desktop remoti

Il driver GeForce esegue DirectX, Vulkan e OpenGL come farebbe un desktop. Ospita un server di gioco, una postazione di cloud gaming o una workstation remota con una GPU dedicata alle spalle.

  • Nessuna modalità ECC. Queste sono GPU GeForce. Per esecuzioni di settimane senza checkpoint, o software certificato solo su GPU professionali, scegli una GPU per workstation o data center su server GPU.
  • Nessun NVLink. Più GPU in una macchina comunicano via PCIe. Servire un modello suddiviso tra loro funziona bene; l'addestramento che scambia gradienti a ogni passo scala meno con ogni GPU aggiunta.
  • Il fine-tuning completo di modelli di grandi dimensioni non è possibile. QLoRA su un modello da 7B a 13B sta in 32 GB. Un fine-tuning completo dello stesso modello richiede diverse volte quella memoria.

Consegna e condizioni

Quando è online e cosa include il prezzo mensile

  1. Circa 30 minuti

    Una macchina con la GPU è già montata

    È installata e consegnata senza nulla da aggiungere. Server istantanei elenca ciò che è già montato ora, e quelli possono anche essere noleggiati a ore.

  2. Da 4 a 24 ore

    Installiamo una GPU dal nostro magazzino

    Un tecnico installa la GPU nella macchina che hai configurato, crea l'array di dischi e installa il sistema operativo. Memoria o dischi extra vengono aggiunti nella stessa visita.

  3. Da 5 a 10 giorni lavorativi

    La GPU deve essere acquistata

    Ordiniamo il componente, poi procediamo come sopra. Ti viene comunicato quale dei tre casi si applica prima del pagamento.

Incluso
Processore, memoria, dischi, un indirizzo IPv4 e una porta senza limiti. Il traffico non viene conteggiato in nessuna direzione.
Accesso
Root o amministratore sul tuo sistema operativo, più la console iLO o iDRAC del server su una rete di gestione separata.
Installazione
$29 una tantum per una GPU installata su ordinazione. Una macchina già montata ordinata così com'è non ha costi di installazione personalizzata.
Durata
Mensile per impostazione predefinita, senza contratto. Cicli di 3, 6 e 12 mesi fanno risparmiare fino al 15%.
Supporto
La chat riceve risposta in pochi secondi da un assistente IA che consulta account e server per te. Chiedi di una persona e questa subentra.

Ogni tempistica parte una volta che pagamento e revisione antifrode sono completati. La maggior parte degli ordini si conclude entro un paio d'ore; un primo ordine su un nuovo account può richiedere più tempo.

Specifiche

Specifiche di RTX 5090 e RTX 5080

GPUMemoryBusBandwidthCUDA coresBoostPowerVideo
RTX 509032 GB GDDR7512-bit1,792 GB/s21,7602.41 GHz575 W3 NVENC, 2 NVDEC
RTX 508016 GB GDDR7256-bit960 GB/s10,7522.62 GHz360 W2 NVENC, 2 NVDEC

Dati GPU come pubblicati da NVIDIA per la serie GeForce RTX 50. Prezzi, macchine, città e conteggi per macchina sono letti dal nostro catalogo ordini, quello da cui il checkout fattura.

Risposte

Domande sui server RTX 5090

Quanto costa un server dedicato RTX 5090?

Un server RTX 5090 completo parte da $472.47 al mese: la GPU a $399 più la macchina più economica che la ospita, Intel Xeon E5-2620 v4, 8 cores, 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps. Una GPU installata su richiesta aggiunge un costo di setup una tantum di $29, e non c'è alcun vincolo contrattuale.

Posso noleggiare un server RTX 5090 a ore?

Solo una macchina che ha già la GPU installata e viene presa così com'è: quelle vengono fatturate a ore, con un minimo di un'ora, e la pagina server istantanei elenca quali sono già montati in rack. Una macchina che configuri qui viene costruita per te e fatturata mensilmente, senza vincoli contrattuali.

Esiste una versione server della RTX 5090?

No. NVIDIA vende la RTX 5090 solo come GPU GeForce. Se cerchi una GPU Blackwell che NVIDIA produce anche in versione server, guarda la RTX PRO 6000 Blackwell, con 96 GB di GDDR7 ed ECC. Installiamo anche quella GPU da 96 GB, con prezzi sulla nostra pagina server RTX PRO 6000, e la RTX 5090 in server rack con la GPU completa passata direttamente al sistema.

Posso mettere più di una RTX 5090 in un server?

Sì. Le nostre macchine più grandi ospitano fino a 4 RTX 5090, 128 GB di memoria GPU in totale, e il configuratore mostra il massimo supportato da ciascuna macchina. Ogni GPU è una voce mensile separata, e le GPU comunicano tra loro tramite PCIe.

Un server RTX 5090 è adatto per l'AI?

Per l'inferenza e il fine-tuning QLoRA, sì. I suoi 32 GB ospitano un modello da 30B a 4 bit o uno da 13B a 8 bit con contesto in abbondanza, e due di esse contengono un modello da 70B a 4 bit. Non ha modalità ECC, quindi per lunghi addestramenti senza checkpoint una GPU da data center è la scelta più sicura.

RTX 5090 o RTX 5080: quale server dovrei scegliere?

Scegli in base alla memoria. La RTX 5080 ha 16 GB e 960 GB/s, e un server completo parte da $312.67 al mese; ospita un modello da 8B a 8 bit o uno da 13B a 4 bit. La RTX 5090 ha 32 GB e 1.792 GB/s, per modelli più grandi, scene più pesanti e più encoding simultaneo.

La RTX 5090 ottiene un collegamento PCIe 5.0 completo?

Non sulle macchine di cui pubblichiamo il collegamento. La GPU è PCIe 5.0 x16, e le linee quotate in questa pagina fanno funzionare lo slot a PCIe 3.0 o PCIe 4.0, la più veloce è PCIe 4.0. Per le linee più recenti costruite su ordinazione, chiedici in chat a quale generazione funziona lo slot. Inferenza, encoding e la maggior parte del rendering quasi non se ne accorgono; l'addestramento che trasferisce dati dalla memoria di sistema a ogni passo sì.

La GPU è condivisa o virtualizzata?

No. La macchina è noleggiata a un solo account e la GPU viene passata direttamente al tuo sistema operativo. Non c'è hypervisor, nessun profilo vGPU e nessun time-slicing, e installi il driver NVIDIA e la versione CUDA che preferisci.

Quanto velocemente è online un server RTX 5090?

Circa 30 minuti dopo l'approvazione dell'ordine quando una macchina con la GPU è già montata in rack. Quando installiamo una GPU dal nostro magazzino, considera da 4 a 24 ore; quando deve essere acquistata, da 5 a 10 giorni lavorativi.

Dove si trovano i vostri server RTX 5090?

A New York, Miami, San Francisco and Bucharest, sulla rete proprietaria di Server Room. Le macchine che ospitano le GPU RTX 50 non sono offerte con esse ad Amsterdam.

Configura il tuo server RTX 5090

Scegli la GPU e quante, poi processore, memoria, dischi e città. Il configuratore aggiorna il prezzo a ogni modifica.

Tutte le GPU che installiamo · Server RTX 4090 · Server LLM · Montati in rack adesso