GPU Cloud · NVIDIA · Ampere

Sewa GPU NVIDIA A100 PCIE mengikut jam

NVIDIA A100 PCIE ialah GPU pusat data yang dibina berdasarkan senibina Ampere, dilengkapi 40 GB VRAM dan had kuasa 250 W. Ia menyampaikan kira-kira 15.6 TFLOPS pengiraan titik terapung standard dan lebar jalur memori kira-kira 1313 GB/s, serta menyokong keupayaan pengiraan CUDA 8.0. Pada ONIE, anda boleh menyewa perkakasan ini dengan bil per jam, akses SSH, dan templat sedia untuk PyTorch/CUDA, vLLM, Ollama, dan ComfyUI.

Spesifikasi

VRAM bagi setiap GPU

40 GB

Seni bina

NVIDIA Ampere

Keupayaan pengiraan

8.0

Pengiraan FP32

≈ 15.6 TFLOPS

Lebar jalur memori

≈ 1,313 GB/s

Had kuasa

250 W

Nilai yang dilaporkan oleh pembekal infrastruktur untuk mesin yang disenaraikan pada masa ini; prestasi sebenar berbeza mengikut mesin.

Konfigurasi yang tersedia

Ketersediaan dan harga secara langsung, dikemas kini secara berterusan. Harga akhir disahkan sebelum anda membuat pesanan.

Memuatkan harga secara langsung…

Kegunaan A100 PCIE

Inferens Model Bahasa Besar

Hidangkan model bahasa menggunakan vLLM atau Ollama, dengan memanfaatkan kapasiti VRAM 40 GB dan lebar jalur memori kira-kira 1313 GB/s untuk penjanaan token.

Penalaan Halus Pembelajaran Mendalam

Jalankan tugas latihan dan penalaan halus dalam PyTorch/CUDA pada senibina pusat data Ampere dengan keupayaan pengiraan 8.0.

Penjanaan Imej Resolusi Tinggi

Laksanakan aliran kerja resapan yang kompleks dalam ComfyUI yang memerlukan memori lebih banyak daripada yang disediakan oleh kad pengguna.

Pengkomputeran Saintifik dan Data

Proses simulasi dan tugas analitik data yang intensif memori dengan menggunakan kira-kira 15.6 TFLOPS kuasa pengiraan.

Adakah ini GPU yang sesuai untuk anda?

Pilih A100 PCIE 40 GB apabila beban kerja anda melebihi had memori GPU pengguna dan memerlukan perkakasan pusat data berlebar jalur tinggi. Pilih GPU pengguna yang lebih kecil untuk inferens ringan, atau naik taraf ke model pusat data dengan VRAM lebih tinggi jika model tanpa kuantisasi atau saiz batch anda melebihi 40 GB.

Bandingkan dengan GPU serupa

GPUVRAM bagi setiap GPUSeni binaPengiraan FP32Dari / jamButiran
A100 PCIE40 GBAmpere≈ 15.6 TFLOPS—
A100 SXM440 GBAmpere≈ 15.6 TFLOPS—Butiran
Q RTX 800045 GBTuring≈ 11.9 TFLOPS—Butiran
A800 PCIE80 GBAmpere≈ 15.6 TFLOPS—Butiran

Soalan lazim

Adakah A100 PCIE sesuai untuk inferens dan penalaan halus LLM?

Ya, VRAM 40 GB dan lebar jalur memori kira-kira 1313 GB/s menjadikannya sesuai untuk menghoskan dan menala halus model sederhana hingga besar yang tidak muat pada kad pengguna. Anda boleh melaksanakan beban kerja dengan cepat menggunakan templat vLLM, Ollama, atau PyTorch/CUDA yang telah dikonfigurasi.

Bagaimana A100 PCIE 40 GB berbanding dengan peringkat GPU lain?

Sebagai kad Ampere pusat data, ia menawarkan lebar jalur memori dan VRAM yang jauh lebih tinggi berbanding GPU stesen kerja atau pengguna standard. Jika saluran paip latihan atau inferens anda memerlukan kapasiti memori yang lebih besar, pertimbangkan varian GPU pusat data yang lebih besar.

Bagaimana saya menyambung dan mengkonfigurasi instans saya pada ONIE?

Setiap penyewaan termasuk akses SSH penuh untuk pengurusan terus melalui baris arahan. Anda juga boleh melancarkan instans dengan templat sedia untuk PyTorch/CUDA, vLLM, Ollama, atau ComfyUI untuk mula bekerja serta-merta.

Bagaimana bil berfungsi untuk A100 PCIE?

Instans pada ONIE menggunakan bil per jam, membolehkan anda membayar hanya untuk tempoh GPU pusat data anda aktif.

Sewa A100 PCIE mengikut jam

Cipta akaun, pilih konfigurasi dan sambung melalui SSH. Bil berhenti apabila anda memadam GPU.

Sewa A100 PCIE

Semua GPU →