GPU Cloud · NVIDIA · Turing

Sewa GPU NVIDIA RTX 2070S mengikut jam

NVIDIA RTX 2070S ialah GPU segmen pengguna yang dibina atas seni bina Turing dengan VRAM 8 GB dan keupayaan pengiraan 7.5. Dalam contoh ONIE, ia memberikan kira-kira 8.8 TFLOPS prestasi titik terapung standard dan kira-kira 366 GB/s lebar jalur memori dalam had kuasa 210 W. Anda boleh melancarkannya dengan bil per jam, akses SSH penuh, dan templat sedia ada termasuk PyTorch/CUDA, vLLM, Ollama, dan ComfyUI.

Spesifikasi

VRAM bagi setiap GPU

8 GB

Seni bina

NVIDIA Turing

Keupayaan pengiraan

7.5

Pengiraan FP32

≈ 8.8 TFLOPS

Lebar jalur memori

≈ 366 GB/s

Had kuasa

210 W

Nilai yang dilaporkan oleh pembekal infrastruktur untuk mesin yang disenaraikan pada masa ini; prestasi sebenar berbeza mengikut mesin.

Konfigurasi yang tersedia

Ketersediaan dan harga secara langsung, dikemas kini secara berterusan. Harga akhir disahkan sebelum anda membuat pesanan.

Memuatkan harga secara langsung…

Kegunaan RTX 2070S

Inferens LLM Ringkas

Jalankan model bahasa kecil yang dikuantisasi menggunakan templat Ollama atau vLLM dalam had kapasiti VRAM 8 GB.

Prototaip dan Nyahpepijat PyTorch

Bangunkan dan uji kod pembelajaran mendalam pada GPU Turing dengan keupayaan pengiraan 7.5 sebelum beralih ke perkakasan yang lebih besar.

Penjanaan Imej Ringan

Hasilkan imej dengan ComfyUI menggunakan saluran paip resapan standard yang muat dengan selesa dalam memori 8 GB.

Beban Kerja Pengiraan GPU

Laksanakan aplikasi CUDA tersuai dengan memanfaatkan kira-kira 8.8 TFLOPS pengiraan ketepatan tunggal dan kira-kira 366 GB/s lebar jalur memori.

Adakah ini GPU yang sesuai untuk anda?

Pilih RTX 2070S untuk pembangunan, nyahpepijat, dan tugasan inferens ringan yang muat dalam VRAM 8 GB. Beralih kepada GPU dengan memori yang lebih besar dan keupayaan pengiraan yang lebih tinggi untuk melatih model besar, atau pilih kad pengguna berkuasa rendah untuk ujian skrip asas.

Bandingkan dengan GPU serupa

GPUVRAM bagi setiap GPUSeni binaPengiraan FP32Dari / jamButiran
RTX 2070S8 GBTuring≈ 8.8 TFLOPS—
GTX 10808 GBPascal≈ 7.8 TFLOPS—Butiran
Q RTX 40008 GBTuring≈ 7.7 TFLOPS—Butiran
RTX 20708 GBTuring≈ 7.7 TFLOPS—Butiran

Soalan lazim

Adakah RTX 2070S sesuai untuk inferens LLM atau penalaan halus?

Dengan VRAM 8 GB dan kira-kira 366 GB/s lebar jalur memori, RTX 2070S mampu mengendalikan inferens untuk model bahasa kecil yang dikuantisasi melalui Ollama atau vLLM. Penalaan halus penuh atau menjalankan model yang lebih besar memerlukan GPU dengan VRAM yang lebih banyak.

Bolehkah saya menggunakan GPU ini untuk penjanaan imej dengan ComfyUI?

Boleh. ONIE menyediakan templat ComfyUI sedia ada yang berjalan pada RTX 2070S. VRAM 8 GB menyokong aliran kerja resapan standard, namun saluran paip yang lebih berat dengan beberapa ControlNet akan lebih sesuai pada GPU berkapasiti memori yang lebih tinggi.

Bagaimanakah seni bina Turing memberi kesan kepada keserasian perisian?

RTX 2070S menyokong keupayaan pengiraan CUDA 7.5, yang serasi dengan templat PyTorch/CUDA standard. Namun, beban kerja yang memerlukan ciri seni bina terkini daripada generasi yang lebih baharu harus dilaksanakan pada GPU seni bina yang lebih baharu.

Bagaimanakah saya menyambung dan bagaimanakah bil berfungsi di ONIE?

Contoh dibil mengikut jam untuk tempoh mesin anda aktif. Anda boleh menyambung terus melalui SSH atau melancarkan templat pra-konfigurasi untuk PyTorch/CUDA, vLLM, Ollama, dan ComfyUI.

Sewa RTX 2070S mengikut jam

Cipta akaun, pilih konfigurasi dan sambung melalui SSH. Bil berhenti apabila anda memadam GPU.

Sewa RTX 2070S

Semua GPU →