Is the RTX PRO 6000 Blackwell the same card as the RTX 6000 Ada?

No, and the names invite the mistake. The RTX 6000 Ada Generation is the previous professional flagship: 48 GB of GDDR6 with ECC on the Ada Lovelace architecture. The RTX PRO 6000 Blackwell has 96 GB of GDDR7 with ECC, twice the memory, on newer silicon. Primcast fits both, and both appear on the page with their own prices so the step between them is a figure rather than a claim.

Why does the RTX PRO 6000 have more memory than an H100 but cost less per month?

Because you are paying for different things. The H100's money is in stacked memory and the read rate that comes with it, plus NVLink for pooling several cards. The RTX PRO 6000's money is in capacity, ray tracing and four video encoders. If the question is whether the model will fit, the cheaper card answers it better. If the question is how many tokens a second at a large batch size, it does not.

Is the graphics card shared with anyone else?

No. One tenant per physical machine, and the card is passed straight through to your own operating system -- no hypervisor, no MIG partition, no vGPU profile, no time-slicing. You install and pin your own driver and CUDA release, and nothing upgrades underneath you.

Can I have two RTX PRO 6000 cards in one machine?

It is a build quoted rather than a checkout option, because the answer depends on the chassis, the physical width of the card and the power budget -- and at up to 600 W each, the power budget is usually what decides it. Note that two cards are two separate memory pools: this part has no NVLink.

How soon can I have an RTX PRO 6000 server?

It depends on whether the card is already fitted, already on the shelf, or has to be bought in, and you are told which before you pay rather than after. Machines racked and ready right now are listed at https://primcast.com/instant.

RTX PRO 6000 Blackwell · 96 GB GDDR7 με ECC

RTX PRO 6000 σε διακομιστή που νοικιάζετε με τον μήνα

Ενενήντα έξι gigabytes GDDR7 με διόρθωση σφαλμάτων σε μία πρόσθετη κάρτα, σε ένα ολόκληρο φυσικό μηχάνημα χωρίς κανέναν άλλον πάνω σε αυτήν. Καμία κάρτα που τοποθετούμε δεν χωράει περισσότερη — ούτε καν τους επιταχυντές. Αυτό που θυσιάζετε για να αποκτήσετε αυτήν την χωρητικότητα είναι ο ρυθμός ανάγνωσης μνήμης και το NVLink, και αυτή η σελίδα το λέει πριν πει οτιδήποτε άλλο.

96 GB, ECC Τέσσερις κωδικοποιητές, AV1 Περασμένο, όχι κομμένο σε φέτες

Πόσο κοστίζει, με το μηχάνημα

Η μεγαλύτερη κάρτα εδώ, και πού βρίσκεται στο τιμολόγιο

Across the 56 cards in the catalogue: RTX PRO 6000 Blackwell 96GB holds 96 GB, no card we fit holds more, and one costs more per month. Read the whole ladder on the whole catalogue, priced.

Ένα H100 είναι ένας επιταχυντής: υπάρχει για να συγκρατεί ένα μοντέλο και να κάνει αριθμητικές πράξεις σε αυτό, και η NVIDIA το τιμολογεί ανάλογα. Η RTX PRO 6000 είναι μια κάρτα σταθμού εργασίας στην οποία τυχαίνει να έχει δοθεί περισσότερη μνήμη από τον επιταχυντή. Αν ολόκληρη η ερώτησή σας είναι αν ταιριάζει , διαβάστε τη στήλη μνήμης και τη στήλη χρημάτων στον παρακάτω πίνακα σε σχέση μεταξύ τους — σε αυτό το ράφι δεν λειτουργούν προς την ίδια κατεύθυνση, και αυτός είναι ο λόγος που υπάρχει αυτή η σελίδα.

Πού βρίσκεται σε σχέση με τις άλλες κάρτες μεγάλης μνήμης που τοποθετούμε

Cheapest complete machine first. Every figure read from the order catalogue when this page was served.
Card	Card memory	The card	Cheapest complete machine
A40	48 GB GDDR6	$499	$572.47
RTX 6000 ADA	48 GB GDDR6 ECC	$625	$698.47
A100 80GB	80 GB HBM2e	$899	$972.47
RTX PRO 6000 Blackwell 96GB	96 GB GDDR7 ECC	$1,299	$1,382.67
H100 80GB	80 GB HBM2e	$1,599	$1,682.67

Κάθε παραπάνω σχήμα διαβάζεται από τον κατάλογο παραγγελιών από τον οποίο προέρχονται οι λογαριασμοί στο ταμείο, τη στιγμή που εμφανίστηκε αυτή η σελίδα. Τίποτα σε αυτήν τη σελίδα δεν είναι πληκτρολογημένο με το χέρι.

Η προδιαγραφή, όπως δημοσιεύεται από την NVIDIA

Blackwell, πυρήνες Tensor πέμπτης γενιάς, πυρήνες RT τέταρτης γενιάς. Στοιχεία από τη σελίδα προϊόντος της NVIDIA για την έκδοση Workstation, που αναφέρονται στον πηγαίο κώδικα αυτής της σελίδας.

RTX PRO 6000 Blackwell 96GB

Architecture

Blackwell

Card memory

96 GB GDDR7 ECC

CUDA cores

24,064

Memory bandwidth

1,792 GB/s

Board power

600 W

Card interface

PCIe Gen 5 x16

Hardware video encoders

4 NVENC, 4 NVDEC, AV1

Error-correcting memory

Yes

Σε τι είναι καλό και σε τι όχι

Η ειλικρινής εκδοχή. Μια τόσο ακριβή κάρτα είναι η λάθος κάρτα τις περισσότερες φορές παρά η σωστή, και οι τέσσερις παράγραφοι παρακάτω είναι αυτές που το καθορίζουν.

Καλός στο: να κρατάει κάτι μεγάλο, ολόκληρο

Ενενήντα έξι gigabytes είναι αρκετά για ένα μοντέλο εβδομήντα δισεκατομμυρίων παραμέτρων με ακρίβεια οκτώ bit με ελεύθερο χώρο για το παράθυρο περιβάλλοντος, και αρκετά για ένα μοντέλο τριάντα δισεκατομμυρίων παραμέτρων σε πλήρη δεκαέξι bit. Μία κάρτα, ένας χώρος διευθύνσεων, χωρίς sharding και χωρίς δεύτερο μηχάνημα για να συμβαδίζεις.

Καλός σε: εργασίες που αφορούν γραφικά ΚΑΙ αριθμητική

Τέσσερις κωδικοποιητές υλικού και τέσσερις αποκωδικοποιητές με AV1, καθώς και πυρήνες τέταρτης γενιάς ray-tracing. Αποδίδει, μετατρέπει και συμπεραίνει στην ίδια πλακέτα. Οι επιταχυντές σε αυτό το ράφι δεν κάνουν κανένα από τα δύο πρώτα — δεν έχουν καθόλου κωδικοποιητή βίντεο.

Κακό σε: εργασία με περιορισμένη μνήμη σε μεγάλη κλίμακα

Η GDDR7 είναι γρήγορη, αλλά δεν είναι stacked memory. Οι A100 και H100 διαβάζουν τα βάρη τους πιο γρήγορα ανά δευτερόλεπτο από αυτήν την κάρτα, και για τη δημιουργία token μεγάλης παρτίδας, αυτός ο ρυθμός ανάγνωσης είναι το ανώτατο όριο, όχι η αριθμητική. Εάν το σημείο συμφόρησης είναι το εύρος ζώνης και όχι η χωρητικότητα, ο μικρότερος επιταχυντής κερδίζει.

Κακό στο: pooling με δεύτερη κάρτα

Δεν υπάρχει NVLink σε αυτό το μέρος. Δύο από αυτά σε ένα μηχάνημα είναι δύο ξεχωριστές ομάδες των 96 GB που επικοινωνούν μέσω της υποδοχής, όχι μία ομάδα των 192 GB. Όταν πραγματικά χρειάζεστε περισσότερα από 96 GB σε έναν χώρο διευθύνσεων, αυτή δεν είναι η κάρτα που σας φέρνει εκεί.

Σε ποιο μηχάνημα μπαίνει και σε ποια σύνδεση φτάνει εκεί;

Αυτή η κάρτα είναι ένα εξάρτημα PCIe Gen 5 και κάθε πλατφόρμα που χρησιμοποιούμε είναι Gen 3 ή Gen 4, επομένως δεν παίρνει ποτέ τον πλήρη δίαυλο για τον οποίο σχεδιάστηκε. Αυτό έχει σημασία για κάποιες εργασίες και για άλλες καθόλου, και η διαφορά αξίζει περισσότερο από τη σιωπή.

Intel Xeon Silver / Gold

RTX PRO 6000 Blackwell 96GB

Slot: PCIe 3.0, 48 lanes per socket. Card: PCIe Gen 5.

A quarter or less of the bus the card was designed for. Worth avoiding when the work crosses the slot every step, and irrelevant once the weights are resident.

AMD EPYC

RTX PRO 6000 Blackwell 96GB

Slot: PCIe 4.0, 128 lanes per socket. Card: PCIe Gen 5.

About half the bus the card was designed for. That costs a training loop streaming batches off the host; it costs an inference server or a transcoder nothing, because the weights are already on the card.

Μόλις τα βάρη εγκατασταθούν στην κάρτα, η υποδοχή είναι αδρανής και η δημιουργία σταματά να έχει σημασία — η οποία περιλαμβάνει κυρίως συμπερασματολογία, περισσότερη απόδοση και όλη την κωδικοποίηση. Έχει σημασία για έναν βρόχο εκπαίδευσης που ρέει μια νέα παρτίδα στην υποδοχή σε κάθε βήμα. Ρωτήστε αν δεν είστε σίγουροι ποιο από τα δύο είστε. Η απάντηση καθορίζει το μηχάνημα, όχι την κάρτα.

Τι χωράει πραγματικά σε 96 GB

Weights only, rounded up. A row counts as fitting when it leaves a fifth of the card’s 96 GB free for the KV cache, the activations and the runtime — which is head-room, not luxury.
Model	16-bit	8-bit	4-bit
7-8 billion parameters	16 GB — fits	8 GB — fits	5 GB — fits
13-14 billion parameters	28 GB — fits	14 GB — fits	8 GB — fits
30-34 billion parameters	68 GB — fits	34 GB — fits	19 GB — fits
70 billion parameters	140 GB — does not fit	70 GB — fits	38 GB — fits

Η ισχύς της μητρικής είναι το άλλο όριο και είναι πραγματικό: η έκδοση Workstation αυτής της κάρτας καταναλώνει έως και 600 W από μόνη της, ενώ η έκδοση Max-Q είναι η ίδια σιλικόνη και τα ίδια 96 GB στα 300 W. Ποιο από τα δύο καταλαμβάνει ένα δεδομένο πλαίσιο εξαρτάται από το πλαίσιο, οπότε ρωτήστε πριν την παραγγελία και όχι μετά.

Πόσο κοστίζει, με το μηχάνημα που μπαίνει μέσα

Η κάρτα είναι ξεχωριστή γραμμή στο τιμολόγιο και το μηχάνημα είναι άλλη μια. Και τα δύο μισά παρακάτω προέρχονται από μία ανάγνωση του καταλόγου παραγγελιών, επομένως η τιμή και οι προδιαγραφές δίπλα της ανήκουν πάντα το ένα στο άλλο.

Read from the order catalogue when this page was served. The card is a separate line; the machine does not get dearer because of what is plugged into it.
Card	The machine it goes in	The card	Complete, per month
RTX PRO 6000 Blackwell 96GB	Intel Xeon Silver / Gold Intel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps · PCIe 3.0	$1,299	$1,382.67 Configure this build →
RTX PRO 6000 Blackwell 96GB	AMD EPYC AMD EPYC 7413 24 CORE 2.65 GHz 128MB L3 CACHE · 32 GB DDR4 · 1 × SATA-SSD 240 GB · 1 Gbps · PCIe 4.0	$1,299	$1,516.59 Configure this build →

Το εύρος ζώνης είναι απεριόριστο και προς τις δύο κατευθύνσεις χωρίς χρέωση εξόδου, περιλαμβάνεται μία διεύθυνση IPv4, δεν υπάρχει σύμβαση και η προεπιλεγμένη διάρκεια είναι ένας μήνας. Για κάθε άλλη κάρτα που τοποθετούμε, και τα ίδια ποσά για όλες, διαβάστε ολόκληρο τον κατάλογο, με τιμή . Για μηχανήματα που είναι έτοιμα σήμερα αντί να κατασκευάζονται κατόπιν παραγγελίας, /instant .

Ερωτήσεις που κάνουν οι άνθρωποι σχετικά με αυτήν την κάρτα

Είναι η ίδια κάρτα γραφικών με την RTX 6000 Ada;

Όχι, και τα ονόματα υπονοούν το λάθος. Η RTX 6000 Ada Generation είναι η προηγούμενη επαγγελματική ναυαρχίδα: 48 GB GDDR6 με ECC στην αρχιτεκτονική Ada Lovelace. Η RTX PRO 6000 Blackwell διαθέτει 96 GB GDDR7 με ECC, διπλάσια μνήμη, σε νεότερες κάρτες γραφικών. Ταιριάζουμε και τα δύο, και εμφανίζονται δίπλα-δίπλα στην παραπάνω σκάλα, επομένως το βήμα μεταξύ τους είναι μάλλον ένας αριθμός παρά ένας ισχυρισμός.

96 GB έναντι 80 GB του H100 — σε τι χρησιμεύει λοιπόν το H100;

Πληρώνετε για διαφορετικά πράγματα. Τα χρήματα της H100 έγκεινται στη στοιβαγμένη μνήμη και στον ρυθμό ανάγνωσης που τη συνοδεύει, καθώς και στο NVLink για την ομαδοποίηση πολλών καρτών σε έναν χώρο διευθύνσεων. Τα χρήματα της RTX PRO 6000 έγκεινται στη χωρητικότητα, την ανίχνευση ακτίνων και τους τέσσερις κωδικοποιητές βίντεο. Αν το ερώτημα είναι αν το μοντέλο ταιριάζει , αυτή η κάρτα το απαντά με περισσότερο χώρο. Αν το ερώτημα είναι πόσα tokens ανά δευτερόλεπτο σε μεγάλο μέγεθος παρτίδας , ο επιταχυντής το απαντά καλύτερα και η σκάλα παραπάνω δείχνει πόσο κοστίζει αυτό.

Είναι η κάρτα κοινή με κάποιον άλλο;

Όχι. Ένας ένοικος ανά φυσικό μηχάνημα και η κάρτα περνάει απευθείας στο δικό σας λειτουργικό σύστημα — χωρίς hypervisor, χωρίς partition MIG, χωρίς προφίλ vGPU, χωρίς time-slicing. Εγκαθιστάτε και καρφιτσώνετε το δικό σας πρόγραμμα οδήγησης και την έκδοση CUDA και τίποτα δεν αναβαθμίζεται από κάτω σας. Αυτό που μετράτε το πρώτο απόγευμα είναι αυτό που κρατάτε.

Μπορώ να έχω δύο από αυτά σε ένα μηχάνημα;

Είναι μια έκδοση που αναφέρουμε και όχι ένα κουτάκι που εσείς τσεκάρετε, επειδή η απάντηση εξαρτάται από το πλαίσιο, το φυσικό πλάτος της κάρτας και το budce power budget — και με ισχύ έως και 600 W η καθεμία, το budce power budget είναι συνήθως αυτό που το καθορίζει. Ρωτήστε και η απάντηση αναφέρει το πλαίσιο, τον αριθμό και τον χρόνο παράδοσης. Σημειώστε ότι δύο κάρτες είναι δύο ξεχωριστές δεξαμενές μνήμης εδώ: αυτό το μέρος δεν έχει NVLink.

Πόσο σύντομα μπορώ να έχω ένα;

Εξαρτάται από το αν η κάρτα είναι ήδη τοποθετημένη, αν βρίσκεται ήδη στο ράφι μας ή αν πρέπει να αγοραστεί — και σας ενημερώνουμε για το ποιο από τα δύο γίνεται πριν πληρώσετε, όχι μετά. Το /instant παραθέτει μηχανήματα σε ράφια και έτοιμα αυτή τη στιγμή. Οτιδήποτε άλλο αναφέρεται με τον πραγματικό χρόνο παράδοσης.