GPU Cloud · NVIDIA · Ampere

ເຊົ່າ GPU NVIDIA RTX A6000 ເປັນລາຍຊົ່ວໂມງ

NVIDIA RTX A6000 ເປັນ GPU ສຳລັບ workstation ສະຖາປັດຕະຍະກຳ Ampere ທີ່ມີ VRAM 48 GB ແລະ compute capability 8.6. ມັນໃຫ້ປະສິດທິພາບການຄຳນວນ single-precision ປະມານ 36.1 TFLOPS ແລະ ແບນວິດໜ່ວຍຄວາມຈຳປະມານ 651 GB/s ພາຍໃນພະລັງງານ 300 W. ໃນ ONIE ທ່ານສາມາດນຳໃຊ້ກາດນີ້ດ້ວຍການຄິດເງິນເປັນລາຍຊົ່ວໂມງ, ການເຂົ້າເຖິງ SSH ເຕັມຮູບແບບ ແລະ template ທີ່ຕັ້ງຄ່າໄວ້ລ່ວງໜ້າ.

ຂໍ້ມູນຈຳເພາະ

VRAM ຕໍ່ GPU

48 GB

ສະຖາປັດຕະຍະກຳ

NVIDIA Ampere

ຄວາມສາມາດໃນການຄຳນວນ (Compute capability)

8.6

ການຄຳນວນ FP32

≈ 36.1 TFLOPS

ແບນວິດໜ່ວຍຄວາມຈຳ

≈ 651 GB/s

ຂີດຈຳກັດພະລັງງານ

300 W

ຄ່າທີ່ຜູ້ໃຫ້ບໍລິການໂຄງສ້າງພື້ນຖານລາຍງານສຳລັບເຄື່ອງທີ່ແສດງຢູ່ໃນປັດຈຸບັນ; ປະສິດທິພາບຕົວຈິງອາດແຕກຕ່າງກັນໄປຕາມແຕ່ລະເຄື່ອງ.

ການຕັ້ງຄ່າທີ່ມີໃຫ້ບໍລິການ

ສະຕັອກ ແລະ ລາຄາອັບເດດແບບສົດຢ່າງຕໍ່ເນື່ອງ. ລາຄາສຸດທ້າຍຈະຖືກຢືນຢັນກ່ອນທ່ານສັ່ງຊື້.

ກຳລັງໂຫຼດລາຄາແບບສົດ…

RTX A6000 ເໝາະສຳລັບຫຍັງ

ການ Inference ດ້ວຍ LLM

ຮັນໂມເດວ LLM ຂະໜາດໃຫຍ່ດ້ວຍ template vLLM ຫຼື Ollama ໂດຍໃຊ້ປະໂຫຍດຈາກຄວາມຈຸໜ່ວຍຄວາມຈຳ 48 GB ເພື່ອຮອງຮັບນ້ຳໜັກ ແລະ context ຂະໜາດໃຫຍ່.

ການ Fine-Tuning ດ້ວຍ Deep Learning

ຝຶກ ແລະ fine-tune neural network ດ້ວຍ PyTorch/CUDA ໂດຍບໍ່ມີຂໍ້ຜິດພາດ out-of-memory ເລື້ອຍໆ ຍ້ອນ VRAM ຂອງ workstation ທີ່ມີຄວາມຈຸຫຼາຍ.

ຂັ້ນຕອນການເຮັດວຽກສ້າງຮູບພາບ

ຮັນ diffusion pipeline ທີ່ຊັບຊ້ອນ ແລະ custom node graph ໃນ ComfyUI ໂດຍຮັກສາ checkpoint ຫຼາຍໂຕໃຫ້ໂຫຼດຢູ່ໃນບັບເຟີ 48 GB.

ການ Rendering ແລະ Simulation ສຳລັບ Workstation

ປະມວນຜົນ scene ທີ່ໜັກ ແລະ ວຽກງານການຄຳນວນທີ່ໄດ້ປະໂຫຍດຈາກສະຖາປັດຕະຍະກຳ Ampere ແລະ ແບນວິດໜ່ວຍຄວາມຈຳປະມານ 651 GB/s.

ນີ້ເປັນ GPU ທີ່ເໝາະສົມກັບທ່ານບໍ?

ເລືອກ RTX A6000 ເມື່ອວຽກງານຂອງທ່ານເກີນຂີດຈຳກັດໜ່ວຍຄວາມຈຳຂອງ GPU ສຳລັບຜູ້ບໍລິໂພກ ແລະ ຕ້ອງການ VRAM 48 GB ສຳລັບໂມເດວ ຫຼື batch size ທີ່ໃຫຍ່ຂຶ້ນ. ເລືອກ GPU ສຳລັບຜູ້ບໍລິໂພກທີ່ນ້ອຍກວ່າ ສຳລັບ inference ທີ່ເບົາ ຫຼື ເລືອກສະຖາປັດຕະຍະກຳໃໝ່ກວ່າ ຫຼື GPU ສຳລັບ datacenter ຖ້າ workflow ຂອງທ່ານຕ້ອງການແບນວິດໜ່ວຍຄວາມຈຳສູງກວ່າປະມານ 651 GB/s.

ປຽບທຽບກັບ GPU ທີ່ຄ້າຍກັນ

GPUVRAM ຕໍ່ GPUສະຖາປັດຕະຍະກຳການຄຳນວນ FP32ເລີ່ມຕົ້ນ / ຊົ່ວໂມງລາຍລະອຽດ
RTX A600048 GBAmpere≈ 36.1 TFLOPS—
A4045 GBAmpere≈ 29.9 TFLOPS—ລາຍລະອຽດ
RTX 3090 Ti24 GBAmpere≈ 36.4 TFLOPS—ລາຍລະອຽດ
H100 PCIE80 GBHopper≈ 41 TFLOPS—ລາຍລະອຽດ

ຄຳຖາມທີ່ພົບເລື້ອຍ

RTX A6000 ເໝາະສຳລັບການ inference ແລະ fine-tuning LLM ບໍ?

ແມ່ນແລ້ວ, VRAM 48 GB ຂອງມັນເໝາະສົມຫຼາຍສຳລັບການໂຮສ ແລະ fine-tune ໂມເດວຂະໜາດໃຫຍ່ທີ່ບໍ່ສາມາດໃສ່ໃນ GPU ສຳລັບຜູ້ບໍລິໂພກທົ່ວໄປໄດ້. ທ່ານສາມາດເລີ່ມໃຊ້ງານໄດ້ທັນທີດ້ວຍ template vLLM, Ollama ຫຼື PyTorch/CUDA ທີ່ພ້ອມໃຊ້ໃນ ONIE.

ກາດ workstation Ampere ນີ້ປຽບທຽບກັບ GPU ລຸ້ນໃໝ່ກວ່າ ຫຼື ໃຫຍ່ກວ່າແນວໃດ?

RTX A6000 ໃຫ້ບັບເຟີໜ່ວຍຄວາມຈຳ 48 GB ຂະໜາດໃຫຍ່ ພ້ອມ compute capability 8.6 ແລະ ການຄຳນວນປະມານ 36.1 TFLOPS. ຖ້າວຽກງານຂອງທ່ານຈຳກັດດ້ວຍການຄຳນວນ ຫຼື ແບນວິດຫຼາຍກວ່າຄວາມຈຸຂອງໜ່ວຍຄວາມຈຳ, ກາດ workstation ລຸ້ນໃໝ່ກວ່າ ຫຼື GPU ສຳລັບ datacenter ຈະໃຫ້ throughput ທີ່ສູງກວ່າ.

ຈະເຊື່ອມຕໍ່ ແລະ ຈັດການ instance RTX A6000 ໄດ້ແນວໃດ?

ທຸກ instance ໃນ ONIE ໃຫ້ການເຂົ້າເຖິງ SSH ໂດຍກົງ ເພື່ອຄວບຄຸມສະພາບແວດລ້ອມຂອງທ່ານໄດ້ຢ່າງເຕັມທີ່. ທ່ານຍັງສາມາດເປີດໃຊ້ template ທີ່ສ້າງໄວ້ແລ້ວສຳລັບ PyTorch/CUDA, vLLM, Ollama ແລະ ComfyUI ເພື່ອຂ້າມຂັ້ນຕອນການຕັ້ງຄ່າດ້ວຍຕົນເອງ.

ການຄິດເງິນສຳລັບ RTX A6000 ເຮັດວຽກແນວໃດ?

ການເຊົ່າໃນ ONIE ໃຊ້ການຄິດເງິນເປັນລາຍຊົ່ວໂມງ ເຊິ່ງໃຫ້ທ່ານຈ່າຍສະເພາະໄລຍະເວລາທີ່ instance ເປີດໃຊ້ງານຢູ່.

ເຊົ່າ RTX A6000 ເປັນຊົ່ວໂມງ

ສ້າງບັນຊີ, ເລືອກການຕັ້ງຄ່າ ແລະ ເຊື່ອມຕໍ່ຜ່ານ SSH. ການຄິດໄລ່ຄ່າບໍລິການຈະຢຸດເມື່ອທ່ານລຶບ GPU.

ເຊົ່າ RTX A6000

GPU ທັງໝົດ →