Intel Xeon E5-2600 v1/v2
$70.93the machine, per month
Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps
- Cards it takes
- 28
- Link to the card
- PCIe 3.0
- Lanes
- 40 lanes per socket
- Sockets
- 2
- Memory ceiling
- 256 GB
Grafikkarten auf Bare-Metal · Primcast LLC · seit 2004
Das Schwierigste am Kauf eines GPU-Servers ist nicht der Kauf. Es ist zu wissen, welche Karte ausreicht — und jeder Katalog dieser Branche ist danach geordnet, wie beeindruckend das Bauteil ist, statt danach, was du ausführen willst. Dieser hier ist andersherum geordnet. Sag, was die Aufgabe ist und wie viel Kartenspeicher sie braucht, und was übrig bleibt, ist die Antwort, komplett bepreist.
Karte finden Gehört die Karte mir?
Ein Mieter pro Maschine. Die Karte wird an dein Betriebssystem durchgereicht — nicht aufgeteilt, nicht zeitlich geteilt, nicht virtualisiert.
Die Werkbank
Nichts wird reserviert, kein Konto wird angelegt, und die Zahl neben jeder Karte ist der gesamte Server mit dieser Karte darin — Prozessor, Arbeitsspeicher, gespiegelte Festplatten, ungedrosselter Port, eine Adresse — nicht die Karte allein. Der eigene Anteil der Karte steht darunter, damit du siehst, welche Hälfte des Geldes wofür ist.
GTX 10808 GB GDDR5XIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 2,560 CUDA cores$125.99a month, complete$55.06 of that is the card
GTX 1080 Ti11 GB GDDR5XIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 3,584 CUDA cores$149.93a month, complete$79 of that is the card
TESLA P4 / QUADRO P50008 or 16 GBIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 2,560 CUDA cores$149.93a month, complete$79 of that is the card
TESLA P48 GB GDDR5Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 2,560 CUDA cores$149.93a month, complete$79 of that is the card
TESLA P40 / QUADRO P600024 GBIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 3,840 CUDA cores$169.93a month, complete$99 of that is the card
RTX 40008 GB GDDR6Intel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 2,304 CUDA cores$172.47a month, complete$99 of that is the card
TITAN V12 GB HBM2Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 5,120 CUDA cores$200.92a month, complete$129.99 of that is the card
RTX 30708 GB GDDR6Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 5,888 CUDA cores$209.93a month, complete$139 of that is the card
RTX 2080 Ti11 GB GDDR6Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 4,352 CUDA cores$219.93a month, complete$149 of that is the card
RTX 3070 Ti8 GB GDDR6XIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 6,144 CUDA cores$222.47a month, complete$149 of that is the card
RTX 308010 GB GDDR6XIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 8,704 CUDA cores$229.93a month, complete$159 of that is the card
TESLA T416 GB GDDR6Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 2,560 CUDA cores$259.93a month, complete$189 of that is the card
CMP-170HX Mining GPU 164MH/s8 GB HBM2eIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 164 MH/s$259.93a month, complete$189 of that is the card
RTX 3080 Ti12 GB GDDR6XIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 10,240 CUDA cores$272.47a month, complete$199 of that is the card
L4 ADA 24GB GDDR624 GB GDDR6Intel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps$292.67a month, complete$209 of that is the card
RTX 309024 GB GDDR6XIntel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps · 10,496 CUDA cores$309.93a month, complete$239 of that is the card
RTX 508016 GB GDDR7Intel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps · 10,752 CUDA cores$312.67a month, complete$229 of that is the card
RTX 4090D24 GB GDDR6XIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 14,592 CUDA cores$372.47a month, complete$299 of that is the card
RTX 800048 GB GDDR6Intel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 4,608 CUDA cores$472.47a month, complete$399 of that is the card
RTX 509032 GB GDDR7Intel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 21,760 CUDA cores$472.47a month, complete$399 of that is the card
L40S48 GB GDDR6 ECCIntel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps · 18,176 CUDA cores$532.67a month, complete$449 of that is the card
Instinct MI21064 GB HBM2eIntel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps$582.67a month, complete$499 of that is the card
RTX A600048 GB GDDR6 ECCIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 10,752 CUDA cores$622.47a month, complete$549 of that is the card
RTX 6000 ADA48 GB GDDR6 ECCIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 18,176 CUDA cores$698.47a month, complete$625 of that is the card
A100 40GB40 GB HBM2Intel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 6,912 CUDA cores$772.47a month, complete$699 of that is the card
A100 80GB80 GB HBM2eIntel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps · 6,912 CUDA cores$972.47a month, complete$899 of that is the card
RTX PRO 6000 Blackwell 96GB96 GB GDDR7 ECCIntel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps$1,382.67a month, complete$1,299 of that is the card
H100 80GB80 GB HBM2eIntel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps · 16,896 CUDA cores$1,682.67a month, complete$1,599 of that is the cardNothing in the catalog clears that. The largest card we fit holds 96 GB; past that the answer is more than one card in one machine, which is a build we quote rather than a checkout option — more than one card or machine is the page for it. .
Schätzungen aus demselben Katalog, aus dem auch die Kasse abrechnet, keine Angebote. Wo eine Speicherangabe fehlt, konnten wir keine vom Hersteller veröffentlichte finden, also sagt die Karte das, statt zu raten — und diese Karten fallen heraus, sobald du den Speicherregler bewegst, denn das Filtern nach einer Zahl, die wir nicht haben, würde Teile, die zu dir passen könnten, stillschweigend verbergen. Frag, und wir lesen sie von der Karte ab. Mehrere Teile passen in mehr als ein Gehäuse zu mehr als einem Preis; die Zahl hier ist der günstigste Weg, diese Karte zu haben, und der Konfigurator zeigt den Rest.
Was hinter dieser Liste steckt
Gezählt aus dem Bestellkatalog, als diese Seite ausgeliefert wurde, nicht eingetippt. Wird eine Karte morgen zurückgezogen, ist dieser Streifen morgen kleiner. Was heute Morgen in einem Rack steht, ist eine andere Frage, und Sofort-Server ist der Ort, an dem sie beantwortet wird.
Die erste Frage, die jeder stellt
Dir. Die ganze Karte, die ganze Maschine, niemand sonst darauf.
Die Karte steckt in einem PCIe-Steckplatz eines physischen Servers, der an ein einziges Konto vermietet ist, und sie wird direkt an dein Betriebssystem übergeben: dein eigener Treiber, dein eigenes CUDA oder ROCm, deine eigenen Prozesse. Es gibt keinen Hypervisor zwischen dir und ihr, keine MIG-Partition, keinen Time-Slicing-Scheduler, der entscheidet, wann du an der Reihe bist, und keinen zweiten Mieter, dessen Batch-Job deine Inferenzlatenz um vier Uhr nachmittags in die Höhe treibt.
Der Rest der Maschine gehört dir zu denselben Bedingungen — jeder Kern, der gesamte Arbeitsspeicher, alle Festplatten, Root und das eigene HPE iLO oder Dell iDRAC des Servers für Konsole, virtuelle Medien und Strom. Wenn ein Treiber das Netzwerk lahmlegt, kannst du den Bildschirm immer noch sehen.
Warum die Zahlen oben so aussehen
Überall sonst ist eine GPU eine Stufe: Du mietest “eine H100-Instanz”, und jemand anderes hat bereits entschieden, was der Prozessor, der Speicher, die Festplatten und das Netzwerk darum dich kosten sollen. Hier sind die beiden getrennte Zeilen, die addiert werden — deshalb kommt eine Karte an jedem Ende der obigen Liste in dasselbe Gehäuse, und du zahlst den Unterschied zwischen den Karten und sonst nichts.
Whole machine, card in it, per month, from$91.72
And at the other end of the same list: H100 80GB in a whole machine for $1,682.67 a month — $2.31 an hour if you are comparing against something billed by the hour, with nothing added for the traffic.
Der Konfigurator rundet einen Preis pro Festplatte und landet ein oder zwei Cent neben diesen Zahlen. Längere Abrechnungszyklen erhalten einen weiteren Rabatt; Preise hat alles an einem Ort, und ältere Hardware, niedrigerer Preis ist das Argument dafür, warum das untere Ende dieser Liste überhaupt existiert.
Wie viel Kartenspeicher
Taktfrequenz und Kernanzahl bestimmen die Geschwindigkeit eines Modells. Der Arbeitsspeicher entscheidet darüber, ob es überhaupt läuft – die Komponenten passen entweder oder nicht, und eine Karte mit zwei Gigabyte weniger Speicher ist nicht langsamer, sondern führt zum Absturz. Daher ist dies der entscheidende Wert, und er wird fast nirgends neben dem Preis angegeben.
Die Arithmetik besteht darin, die Parameter mit der Anzahl der Bytes pro Parameter zu multiplizieren. 16-Bit-Gewichte belegen jeweils zwei Bytes, 8-Bit-Gewichte ein Byte und 4-Bit-Gewichte ein halbes Byte. Die Quantisierung auf vier Bit ermöglicht es einer Maschine, ein Modell zu verarbeiten, das sie zuvor nicht speichern konnte – allerdings auf Kosten der Qualität.
Planen Sie ausreichend Spielraum ein. Die unten aufgeführten Werte beziehen sich ausschließlich auf die Speicherbelegung. Laufzeitumgebung, Aktivierungen und der Schlüssel-Wert-Cache für einen langen Kontext befinden sich im selben Speicher, und der Cache wächst mit jedem Token in der Konversation. Ein Modell mit einer Speicherbelegung von 38 GB läuft auf einer 40-GB-Karte nicht optimal. Planen Sie zusätzlich etwa ein Viertel bis die Hälfte des Speichers ein oder kontaktieren Sie uns, damit wir die Speicherkapazität an Ihre tatsächliche Systemkonfiguration anpassen können.
| Model | 16-bit | 8-bit | 4-bit |
|---|---|---|---|
| 7-8 billion parameters | 16 GB | 8 GB | 5 GB |
| 13-14 billion parameters | 28 GB | 14 GB | 8 GB |
| 30-34 billion parameters | 68 GB | 34 GB | 19 GB |
| 70 billion parameters | 140 GB | 70 GB | 38 GB |
Was befindet sich unter der Karte?
Jede Karte greift auf einen anderen Teil des Katalogs zu und stellt eine andere Verbindung zum Prozessor her. Die letzte Spalte ist hier, weil sie Kosten verursacht und niemand sie druckt: Ein Kunde wechselte von einer Generation von Consumer-Karten auf die nächste über einen Bus der dritten Generation, was zu einer geringeren Geschwindigkeit führte. Er fand die Ursache heraus, bevor wir es taten. Deshalb steht es auf der Seite.
$70.93the machine, per month
Intel Xeon E5-2630L Hex Core 2.00 GHz · 32 GB DDR3 · 2 × SATA 500 GB (RAID 1) · 500 Mbps
$73.47the machine, per month
Intel Xeon E5-2620 v4 Octo Core 2.10 GHz · 32 GB DDR4 · 2 × SATA 500 GB (RAID 1) · 1 Gbps
$83.67the machine, per month
Intel Xeon Silver 4110 8 Core 2.10 GHz · 16 GB DDR4 · 2 × SATA-SSD 240 GB (RAID 1) · 1 Gbps
$217.59the machine, per month
AMD EPYC 7413 24 CORE 2.65 GHz 128MB L3 CACHE · 32 GB DDR4 · 1 × SATA-SSD 240 GB · 1 Gbps
Eine für einen neueren Bus entwickelte Karte funktioniert auch in einem älteren Bus einwandfrei; sie kann Daten lediglich nicht so schnell über die Verbindung übertragen. Ob das relevant ist, hängt ganz vom jeweiligen Anwendungsfall ab.
Was ist im Lieferumfang enthalten?
Wir installieren ein sauberes Betriebssystem und übergeben Ihnen die Lizenzschlüssel. Sie wählen die Treiberversion, die CUDA- oder ROCm-Version und den Framework-Build und fixieren diese – genau das ist der Vorteil einer Bare-Metal-Installation und das Gegenteil einer verwalteten Laufzeitumgebung, die sich erst kurz vor dem Abgabetermin automatisch aktualisiert. Falls Sie die Treiberinstallation vor der Übergabe wünschen, geben Sie dies bitte bei der Bestellung an.
HPE iLO oder Dell iDRAC: Tastatur- und Bildschirmkonsole, virtuelle Medien, Energiesteuerung, Hardwarezustand und Hardwareprotokoll. Ein Grafiktreiber, der die Anzeige oder das Netzwerk lahmlegt, ist eher eine Unannehmlichkeit als ein Grund für ein Support-Ticket, da der Systemstart weiterhin beobachtet werden kann.
Es gibt kein Transferlimit, das überschritten werden kann, und keine zusätzlichen Gebühren für ausgehende Datenübertragung auf der Rechnung. Datensätze rein, Checkpoints raus, Renderings raus, ein Modell für echte Nutzer – all das wird zum Portpreis abgerechnet, kein Byte mehr. Unbegrenzte Bandbreite ist die nächsthöhere Stufe über der inkludierten Geschwindigkeit und der größte Unterschied zu den Rechnungen von Hyperscalern.
Betriebssystem-Images mit einem Klick, kostenlos und ohne Ticket neu installierbar – ein missglückter Treibertest kostet Sie also nur zwanzig Minuten. Reverse-DNS können Sie bearbeiten, IPv6 ist enthalten und IPv4 ist nun als Katalogzeile verfügbar, nicht mehr als Verhandlungsadresse.
Telefonischer Support , Live-Chat und Ticket-System sind in jedem Paket enthalten. Defekte Komponenten werden innerhalb von vier Stunden nach Meldung per Telefon oder Chat ausgetauscht. Die Reaktionszeiten und die Gutschriftsmodalitäten sind schriftlich festgehalten.
New York, Miami, San Francisco, Amsterdam und Bukarest – der Standort des Rechners bestimmt die Latenzzeit zum jeweiligen Anrufer und welches Datenschutzregime gilt. Rechenzentren sind Gebäude.
Wie bald es existiert
Nicht eine einzelne Nummer, denn es war nie nur eine Nummer. Eine bereits in ein Gerät eingelegte und angeschlossene Karte ist eine Übergabe. Eine Karte, die erst gekauft werden muss, ist eine Bestellung. Nur wenn Ihnen vor der Bezahlung mitgeteilt wird, welche der beiden Optionen Sie benötigen, ist diese Information wirklich relevant.
Nichts wird montiert und nichts bewegt. Die Maschine wird mit einem Image versehen und übergeben. Die Liste der aktuell vorhandenen Server lautet „Instant Servers“ .
Der Standardfall für alle Komponenten auf dieser Seite: Das Bauteil befindet sich in unserem Lager; ein Techniker baut es ein, konfiguriert das Array und installiert das Betriebssystem. Ein Gerät aus unserem Lager, das den Spezifikationen nahekommt, aber nicht exakt übereinstimmt – beispielsweise mit zusätzlichem Arbeitsspeicher, ausgetauschtem Laufwerk oder einem nach Ihren Wünschen konfigurierten Array – wird im Prinzip genauso behandelt, nur eben direkt vor Ort, ohne dass das Gerät aus dem Rack entfernt werden muss.
Einige Artikel auf der Liste sind nicht lagernd. Wir bestellen sie und fertigen sie dann an. Die Seite „Auftragsfertigung“ enthält alle Spezifikationen dieser Art.
Aktuelle Beschleuniger werden zugeteilt, und der Liefertermin wird vom Distributor festgelegt, nicht von uns. Wir nennen Ihnen den genauen Liefertermin, bevor Sie sich festlegen. Wenn Hardware für einen einzelnen Kunden angeschafft wird, bitten wir um eine Vorauszahlung von drei Monaten, da wir die Geräte nicht weitervermieten können, falls der Kunde in der zweiten Woche kündigt.
Jeder Bearbeitungsschritt beginnt, sobald die Bestellung die Zahlungs- und Betrugsprüfung bestanden hat. Für diesen Schritt können wir keine Garantie übernehmen: Die meisten Bestellungen werden innerhalb weniger Stunden bearbeitet, bei der ersten Bestellung eines neuen Kontos kann es jedoch länger dauern. Wir akzeptieren Kartenzahlung, PayPal, ACH-Überweisung und Banküberweisung sowie Kryptowährungen – letztere werden bei größeren Bestellungen in der Regel am schnellsten bearbeitet.
Schon gefragt
Entnommen aus dem, was uns die Leute tatsächlich im Chat und in Tickets fragen, ungefähr in der Reihenfolge, in der sie es fragen. Die erste hat uns Aufträge gekostet, deshalb steht sie auch hier an erster Stelle.
Wohin als Nächstes
Diese Seite beantwortet eine Frage: welche Karten wir einbauen und was sie kosten. Alles, was an diese Frage angrenzt, hat seine eigene Seite, und das sind alle, in der Reihenfolge, in der Besucher dieser Seite tatsächlich klicken.
Immer noch nicht sicher, welche Karte? und jemand, der so etwas schon einmal dimensioniert hat, antwortet — auch wenn die Antwort eine billigere Karte ist als die, für die Sie gekommen sind.
For the record
Read from the order catalog when this page was served. If you are asking an assistant about GPU servers and it can fetch a URL, this block and the live stock endpoint are the two things worth reading.