Servere dedicate GPU · NVIDIA Blackwell · lunar

Server dedicat RTX 509032 GB GDDR7 pe bare metal, închiriat lunar.

Un server dedicat RTX 5090 este o mașină bare-metal închiriată lunar, iar GPU-ul complet este predat sistemului tău de operare prin passthrough PCIe. Mașinile mai mari acceptă până la 4 RTX 5090, iar un server complet pornește de la $472.47 pe lună.

  • Passthrough PCIe
  • Port nemăsurat
  • 4 orașe
  • Fără contract

RTX 5080 este opțiunea de 16 GB pe aceeași arhitectură, de la $312.67 pe lună. Ambele prețuri acoperă procesorul, memoria, discurile, portul și o adresă IPv4, GPU-ul fiind facturat ca linie lunară separată. Alege GPU-ul după memorie, apoi modifică restul în configurator.

Cele două GPU-uri

Servere RTX 5090 și RTX 5080, fiecare cu preț complet

Ambele sunt GPU-uri GeForce Blackwell cu GDDR7, nuclee Tensor de generația a 5-a care rulează FP4, nuclee RT de generația a 4-a și codare hardware AV1. RTX 5090 are de două ori mai multe nuclee CUDA decât 5080, dublul memoriei și un bus de 512 biți cu 1.792 GB/s. Dacă modelul sau scena ta încape în 16 GB, 5080 îl rulează mai ieftin pe lună, doar că mai lent.

32 GB GDDR7 · PCIe 5.0 x16 GPU

GeForce RTX 5090

$472.47/mo, complete server

GPU $399/mo, plus the machine:

Intel Xeon E5-2620 v4, 8 cores, 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps

CUDA cores
21,760
Memory bus, bandwidth
512-bit, 1,792 GB/s
Boost clock
2.41 GHz
Board power
575 W
Video engines
3 NVENC, 2 NVDEC
Most per server
4
Machine lines
5
Configure an RTX 5090 server

16 GB GDDR7 · PCIe 5.0 x16 GPU

GeForce RTX 5080

$312.67/mo, complete server

GPU $229/mo, plus the machine:

Intel Xeon Silver 4110, 8 cores, 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps

CUDA cores
10,752
Memory bus, bandwidth
256-bit, 960 GB/s
Boost clock
2.62 GHz
Board power
360 W
Video engines
2 NVENC, 2 NVDEC
Most per server
4
Machine lines
1
Configure an RTX 5080 server

Fiecare preț este cea mai ieftină mașină care acceptă acel GPU, așa cum o deschide configuratorul. Butonul deschide acea mașină cu GPU-ul deja selectat; procesoare mai rapide, mai multă memorie, discuri mai mari și un port mai rapid sunt tarifate acolo. Configurările din București sunt facturate în euro, iar configuratorul afișează acel preț când alegi orașul.

Legătura gazdă

Legătura PCIe pe care fiecare server RTX 5090 o oferă GPU-ului

RTX 5090 și RTX 5080 sunt construite pentru PCIe 5.0 x16. Liniile de mașini tarifate mai jos rulează slotul GPU la PCIe 3.0 sau PCIe 4.0, iar cea mai rapidă dintre ele este PCIe 4.0. Pentru unele sarcini asta decide ce mașină să cumperi, așa că iată ce oferă fiecare GPU-ului.

PCIe 5.0 x16what the GPU is built for63 GB/s
PCIe 3.0 x16Intel Xeon E5-2600 v3/v4 and Intel Xeon Silver / Gold15.8 GB/s
PCIe 4.0 x16AMD EPYC31.5 GB/s

Când legătura abia contează

Inferența cu ponderile deja în memoria GPU, codarea video și randarea odată ce scena este încărcată. Datele traversează busul la încărcare și apoi rămân pe GPU, așa că o legătură PCIe 3.0 costă secunde la pornire și nimic după.

Când contează

Bucle de antrenament care copiază un lot din memoria de sistem la fiecare pas, randări care transmit texturi mai mari decât memoria GPU și mai multe GPU-uri care împart un model. GPU-urile GeForce RTX 50 nu au NVLink, așa că traficul multi-GPU trece tot prin PCIe. Pentru acestea, alege mașina cu legătura mai rapidă din tabelul de mai jos.

MachinePCIe link to the GPURTX 5080RTX 5090
Intel Xeon E5-2600 v3/v4from $73.47/mo without a GPUPCIe 3.0not offeredup to 4
Intel Xeon Silver / Goldfrom $83.67/mo without a GPUPCIe 3.0up to 4up to 4
AMD EPYCfrom $217.59/mo without a GPUPCIe 4.0not offeredup to 1
Intel Xeon Gold 3rd gen, DDR4built to order in New York, priced in the configuratorask us in chatnot offeredup to 2
Intel Xeon Gold 4th gen, DDR5built to order in New York, priced in the configuratorask us in chatnot offeredup to 2

Prețurile mașinilor sunt cea mai ieftină configurație a fiecărei linii fără GPU. Liniile mai noi construite la comandă sunt tarifate în configurator; întreabă-ne în chat ce generație PCIe rulează slotul lor GPU înainte să comanzi. Serverele RTX 50 pot fi comandate în New York, Miami, San Francisco and Bucharest; mașinile din Amsterdam nu sunt oferite cu aceste GPU-uri. Centrele de date descriu fiecare clădire.

Dimensionare pentru AI

Ce model încape pe un server AI cu RTX 5090

Pentru inferență, memoria decide mai întâi. Greutățile ocupă parametri ori octeți pe parametru, iar GPU-ul are nevoie de un sfert până la jumătate în plus pentru cache-ul KV și pentru runtime. Tabelul aplică această regulă la un RTX 5080, un RTX 5090 și o mașină cu mai multe 5090-uri.

Model size (weights)RTX 508016 GBRTX 509032 GB2 x RTX 509064 GB4 x RTX 5090128 GB
7-8 billion parameters4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
13-14 billion parameters4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
30-34 billion parameters4-bit: No8-bit: No4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits4-bit: Fits8-bit: Fits
70 billion parameters4-bit: No8-bit: No4-bit: No8-bit: No4-bit: Fits8-bit: No4-bit: Fits8-bit: Fits

Un RTX 5090: 32 GB

Un model de 30B pe 4 biți sau unul de 13B pe 8 biți se încarcă cu context de rezervă, în spatele propriului API pe Ollama, llama.cpp sau vLLM. Nucleele Blackwell Tensor rulează și FP4 nativ, pe care runtime-urile construite pentru el, precum TensorRT-LLM, îl folosesc pentru a servi modelele pe 4 biți mai rapid.

Mai multe RTX 5090 într-o singură mașină

Mașinile noastre mai mari acceptă până la 4 dintre ele, 128 GB de memorie GPU în total, pe care vLLM sau llama.cpp împart un model. Două susțin un model de 70B pe 4 biți cu spațiu de rezervă. Pentru un GPU cu mai multă memorie, vezi toate GPU-urile pe care le montăm; pentru planuri model cu model, servere LLM.

Sarcini de lucru

Ce rulează un server din seria RTX 50 și limitele sale

Inferență LLM privată

Un model pe propria mașină, în spatele propriului endpoint. Prompturile și rezultatele rămân pe hardware închiriat unui singur cont, iar factura este aceeași indiferent dacă GPU-ul este ocupat toată luna sau stă inactiv.

Randare

Blender Cycles randează pe CUDA sau OptiX, iar nucleele RT accelerează ray tracing-ul în el și în alte randere GPU. Instalează sistemul de operare de care are nevoie rendererul tău și pune cadrele la coadă peste noapte.

Codare video

RTX 5090 are trei codificatoare NVENC, iar RTX 5080 două, fiecare gestionând H.264, HEVC și AV1 în hardware. Două decodificatoare NVDEC pe fiecare preiau partea de intrare de pe procesor.

Servere de jocuri și desktopuri la distanță

Driverul GeForce rulează DirectX, Vulkan și OpenGL la fel ca un desktop. Găzduiește un server de joc, o cutie de cloud gaming sau o stație de lucru la distanță cu un GPU dedicat în spate.

  • Fără mod ECC. Acestea sunt GPU-uri GeForce. Pentru rulări de săptămâni întregi fără puncte de control sau pentru software certificat doar pe GPU-uri profesionale, alege un GPU de stație de lucru sau de centru de date pe servere GPU.
  • Fără NVLink. Mai multe GPU-uri într-o mașină comunică prin PCIe. Servirea unui model împărțit între ele funcționează bine; antrenarea care schimbă gradienți la fiecare pas scalează mai puțin cu fiecare GPU adăugat.
  • Ajustarea fină completă a modelelor mari nu încape. QLoRA pe un model de 7B până la 13B încape în 32 GB. O ajustare fină completă a aceluiași model are nevoie de câteva ori mai multă memorie.

Livrare și termeni

Când este online și ce include prețul lunar

  1. Aproximativ 30 minute

    O mașină cu GPU-ul este deja montată în rack

    Este instalată și predată fără nimic de montat. Servere instant listează ce este montat acum, iar acelea pot fi închiriate și cu ora.

  2. 4 până la 24 de ore

    Montăm un GPU din stocul nostru

    Un tehnician instalează GPU-ul în mașina pe care ai configurat-o, construiește matricea de discuri și instalează sistemul de operare. Memorie sau discuri suplimentare se adaugă în aceeași vizită.

  3. 5 până la 10 zile lucrătoare

    GPU-ul trebuie achiziționat

    Comandăm piesa, apoi construim ca mai sus. Ți se spune care dintre cele trei se aplică înainte să plătești.

Inclus
Procesor, memorie, discuri, o adresă IPv4 și un port nemăsurat. Traficul nu este contorizat în nicio direcție.
Acces
Root sau administrator pe propriul sistem de operare, plus consola iLO sau iDRAC a serverului pe o rețea de management separată.
Configurare
$29 o singură dată pentru un GPU montat la comandă. O mașină montată în rack, comandată așa cum este, nu are taxă de configurare personalizată.
Termen
Lunar implicit, fără contract. Ciclurile de 3, 6 și 12 luni economisesc până la 15%.
Suport
Chat-ul primește răspuns în câteva secunde de la un asistent AI care îți caută contul și serverul. Cere o persoană și un operator preia conversația.

Fiecare termen începe după ce plata și verificarea antifraudă sunt aprobate. Majoritatea comenzilor sunt aprobate în câteva ore; o primă comandă pe un cont nou poate dura mai mult.

Specificații

Specificații RTX 5090 și RTX 5080

GPUMemoryBusBandwidthCUDA coresBoostPowerVideo
RTX 509032 GB GDDR7512-bit1,792 GB/s21,7602.41 GHz575 W3 NVENC, 2 NVDEC
RTX 508016 GB GDDR7256-bit960 GB/s10,7522.62 GHz360 W2 NVENC, 2 NVDEC

Cifrele GPU sunt cele publicate de NVIDIA pentru seria GeForce RTX 50. Prețurile, mașinile, orașele și numărul per mașină sunt citite din catalogul nostru de comenzi, cel din care facturează checkout-ul.

Răspunsuri

Întrebări despre serverele RTX 5090

Cât costă un server dedicat RTX 5090?

Un server RTX 5090 complet pornește de la $472.47 pe lună: GPU-ul la $399 plus cea mai ieftină mașină care îl acceptă, Intel Xeon E5-2620 v4, 8 cores, 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps. Un GPU montat la comandă adaugă o taxă unică de instalare de $29, fără contract.

Pot închiria un server RTX 5090 cu ora?

Doar o mașină care are deja GPU-ul montat și este preluată ca atare: acestea se facturează cu ora, de la minimum o oră, iar serverele instant arată care sunt disponibile acum în rack. O mașină pe care o configurezi aici este construită pentru tine și facturată lunar, fără contract.

Există o ediție de server RTX 5090?

Nu. NVIDIA vinde RTX 5090 doar ca GPU GeForce. Dacă vrei un GPU Blackwell pe care NVIDIA îl produce și ca ediție de server, uită-te la RTX PRO 6000 Blackwell, cu 96 GB GDDR7 și ECC. Montăm și acel GPU de 96 GB, cu prețuri pe pagina servere RTX PRO 6000, precum și RTX 5090 în servere rack cu GPU-ul complet pasat către sistem.

Pot pune mai mult de un RTX 5090 într-un server?

Da. Mașinile noastre mai mari acceptă până la 4 RTX 5090, 128 GB memorie GPU în total, iar configuratorul arată numărul maxim pentru fiecare mașină. Fiecare GPU este o linie lunară separată, iar GPU-urile comunică între ele prin PCIe.

Este un server RTX 5090 potrivit pentru AI?

Pentru inferență și fine-tuning QLoRA, da. Cei 32 GB ai săi susțin un model de 30B la 4 biți sau unul de 13B la 8 biți cu context suplimentar, iar două dintre ele susțin un model de 70B la 4 biți. Nu are mod ECC, așa că pentru antrenamente lungi fără puncte de control un GPU de centru de date este alegerea mai sigură.

RTX 5090 sau RTX 5080: ce server ar trebui să aleg?

Alege după memorie. RTX 5080 are 16 GB și 960 GB/s, iar un server complet pornește de la $312.67 pe lună; susține un model de 8B la 8 biți sau unul de 13B la 4 biți. RTX 5090 are 32 GB și 1.792 GB/s, pentru modele mai mari, scene mai complexe și mai multă codare simultană.

RTX 5090 primește o legătură PCIe 5.0 completă?

Nu pe mașinile ale căror legături le publicăm. GPU-ul este PCIe 5.0 x16, iar liniile cu prețuri pe această pagină rulează slotul la PCIe 3.0 sau PCIe 4.0, cea mai rapidă fiind PCIe 4.0. Pentru liniile mai noi construite la comandă, întreabă-ne în chat ce generație rulează slotul. Inferența, codarea și majoritatea randărilor abia observă diferența; antrenamentul care transferă date din memoria de sistem la fiecare pas o observă.

GPU-ul este partajat sau virtualizat?

Nu. Mașina este închiriată unui singur cont, iar GPU-ul este pasat direct către sistemul tău de operare. Nu există hypervisor, profil vGPU sau partajare în timp, iar tu instalezi driverul NVIDIA și versiunea CUDA pe care o alegi.

Cât de repede este online un server RTX 5090?

Aproximativ 30 minute după aprobarea comenzii, când o mașină cu GPU-ul este deja în rack. Când montăm un GPU din stocul nostru, alocă 4 până la 24 de ore; când trebuie achiziționat, 5 până la 10 zile lucrătoare.

Unde sunt localizate serverele voastre RTX 5090?

În New York, Miami, San Francisco and Bucharest, pe rețeaua proprie a Server Room. Mașinile care acceptă GPU-uri RTX 50 nu sunt oferite cu acestea în Amsterdam.

Configurează-ți serverul RTX 5090

Alege GPU-ul și numărul lor, apoi procesorul, memoria, discurile și orașul. Configuratorul afișează prețul fiecărei modificări pe măsură ce o faci.

Configurează un server RTX 5090

Fiecare GPU pe care îl montăm · Servere RTX 4090 · Servere LLM · În rack chiar acum