Lumaktaw sa nilalaman
Cloudj
GPU Cloud · NVIDIA · Ampere

Umarkila ng NVIDIA CMP 170HX GPU na may 64 GB VRAM

Umupa ng mga CMP 170HX cloud GPU server kada oras sa Cloudj: may 64 GB VRAM, Ampere architecture, at humigit-kumulang 1516 GB/s memory bandwidth para sa memory-bound compute. Isa itong headless compute card para sa mga developer na mas nagpapahalaga sa bandwidth at capacity kaysa sa bilis ng FP32 (12.1 TFLOPS, 250 W, compute capability 8.0). Magsimula muna ng maikling test sa isang template ng PyTorch o Ollama, pagkatapos ay i-scale up ang trabaho.

Mga detalye ng CMP 170HX

VRAM bawat GPU

64 GB

Arkitektura

NVIDIA Ampere

Compute capability

8

FP32 compute

≈ 12.1 TFLOPS

Memory bandwidth

≈ 1516 GB/s

Limitasyon sa kuryente

250 W

Mga value na iniulat ng infrastructure provider para sa mga makinang kasalukuyang nakalista; nag-iiba ang totoong performance depende sa makina.

Live na mga configuration at presyo ng CMP 170HX

Live stock at mga presyo, patuloy na ina-update. Kinukumpirma ang pinal na presyo bago ka umorder.

Mag-arkila ngayon

Ano ang puwede mong i-run sa CMP 170HX cloud GPU

Bandwidth-bound na inference

Pangunahing nalilimitahan ng memory bandwidth ang LLM token generation, at ang 1516 GB/s ay nasa kaparehong antas ng mga card na klaseng A100.

Pag-host ng quantized LLM

Mag-load ng mga quantized model sa Ollama o llama.cpp at i-serve ang mga ito gamit ang isang API para sa pagsubok o mga internal tool.

Mga eksperimento sa CUDA kernel

I-profile ang mga memory-heavy na kernel sa isang Ampere card na may compute capability 8.0 bago ilipat ang mga ito sa mas malalaking hardware.

Pagproseso ng batch data

Mag-stream ng malalaking array sa memory ng GPU para sa mga transform, hashing, o analytics job na nalilimitahan ng memory access.

Ang CMP 170HX ba ang tamang GPU para sa iyong workload?

Piliin ang CMP 170HX kung ang iyong workload ay naiipit sa memory capacity at bandwidth sa halip na sa purong single-precision compute. Pumili ng GPU na may mas mataas na compute throughput kung kailangan mo ng mas mabilis na mga training iteration, o pumili ng mas maliit na consumer card kung hindi kailangan ng iyong mga modelo ang 64 GB ng VRAM.

CMP 170HX vs mga katulad na cloud GPU

GPUVRAM bawat GPUFP32 computeLimitasyon sa kuryente
NVIDIA CMP 170HX64 GB≈ 12.1 TFLOPS250 W
NVIDIA A800 PCIE80 GB≈ 15.6 TFLOPS300 WMga Detalye →
NVIDIA H100 PCIE80 GB≈ 41 TFLOPS350 WMga Detalye →
NVIDIA H100 SXM80 GB≈ 53.5 TFLOPS700 WMga Detalye →
NVIDIA A4045 GB≈ 29.9 TFLOPS300 WMga Detalye →

CMP 170HX cloud GPU: mga madalas itanong

Mag-renta ng CMP 170HX cloud GPU kada oras

Pumili ng template, pumili ng live na configuration, at kumonekta sa pamamagitan ng SSH o browser terminal. Hihinto ang pagsingil kapag binura mo ang GPU.