GPU Cloud · NVIDIA · Blackwell

ಗಂಟೆಯ ಆಧಾರದ ಮೇಲೆ NVIDIA RTX 5090 GPU ಬಾಡಿಗೆಗೆ ಪಡೆಯಿರಿ

NVIDIA RTX 5090 ಎಂಬುದು ONIE ನಲ್ಲಿ ಬೇಡಿಕೆಯ ಮೇರೆಗೆ ಬಾಡಿಗೆಗೆ ಲಭ್ಯವಿರುವ Blackwell ವಾಸ್ತುಶಿಲ್ಪದ ಗ್ರಾಹಕ GPU ಆಗಿದೆ. ಇದು 32 GB VRAM, ಸುಮಾರು 1454 GB/s ಮೆಮೊರಿ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಮತ್ತು ಸುಮಾರು 107.6 TFLOPS FP32 ಕಂಪ್ಯೂಟ್ ಕಾರ್ಯಕ್ಷಮತೆಯನ್ನು ಒದಗಿಸುತ್ತದೆ. CUDA compute capability 12.0 ಮತ್ತು 575 W TDP ಹೊಂದಿರುವ ಇದು ಬೇಡಿಕೆಯ ಕಂಪ್ಯೂಟ್ ಮತ್ತು AI ಕೆಲಸದ ಹೊರೆಗಳಿಗಾಗಿ ರೂಪಿಸಲಾಗಿದೆ.

ವಿವರಣೆಗಳು

ಪ್ರತಿ GPUಗೆ VRAM

32 GB

ಆರ್ಕಿಟೆಕ್ಚರ್

NVIDIA Blackwell

ಕಂಪ್ಯೂಟ್ ಸಾಮರ್ಥ್ಯ

12.0

FP32 ಕಂಪ್ಯೂಟ್

≈ 107.6 TFLOPS

ಮೆಮೊರಿ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್

≈ 1,454 GB/s

ಪವರ್ ಮಿತಿ

575 W

ಪ್ರಸ್ತುತ ಪಟ್ಟಿಮಾಡಲಾದ ಯಂತ್ರಗಳಿಗೆ ಮೂಲಸೌಕರ್ಯ ಒದಗಿಸುವವರು ವರದಿ ಮಾಡಿದ ಮೌಲ್ಯಗಳು; ನಿಜವಾದ ಕಾರ್ಯಕ್ಷಮತೆ ಯಂತ್ರದಿಂದ ಯಂತ್ರಕ್ಕೆ ಬದಲಾಗುತ್ತದೆ.

ಲಭ್ಯವಿರುವ ಸಂರಚನೆಗಳು

ನೇರ ಸ್ಟಾಕ್ ಮತ್ತು ಬೆಲೆಗಳು, ನಿರಂತರವಾಗಿ ನವೀಕರಿಸಲಾಗುತ್ತದೆ. ಆರ್ಡರ್ ಮಾಡುವ ಮೊದಲು ಅಂತಿಮ ಬೆಲೆಯನ್ನು ದೃಢೀಕರಿಸಲಾಗುತ್ತದೆ.

ನೇರ ಬೆಲೆಗಳನ್ನು ಲೋಡ್ ಮಾಡಲಾಗುತ್ತಿದೆ…

RTX 5090 ಯಾವುದಕ್ಕೆ ಒಳ್ಳೆಯದು

ಸ್ಥಳೀಯ LLM ಇನ್‌ಫರೆನ್ಸ್

vLLM ಅಥವಾ Ollama ಟೆಂಪ್ಲೇಟ್‌ಗಳನ್ನು ಬಳಸಿ ಭಾಷಾ ಮಾದರಿಗಳನ್ನು ಚಲಾಯಿಸಿ, ವೇಗದ ಟೋಕನ್ ಉತ್ಪಾದನೆಗಾಗಿ 32 GB VRAM ಮತ್ತು ಸುಮಾರು 1454 GB/s ಮೆಮೊರಿ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಅನ್ನು ಬಳಸಿಕೊಳ್ಳಿ.

ಚಿತ್ರ ಮತ್ತು ವೀಡಿಯೊ ಉತ್ಪಾದನೆ

32 GB ಮೆಮೊರಿ ಸಾಮರ್ಥ್ಯದೊಳಗೆ ಆರಾಮವಾಗಿ ಹೊಂದುವ ಸಂಕೀರ್ಣ ಡಿಫ್ಯೂಷನ್ ಪೈಪ್‌ಲೈನ್‌ಗಳಿಗಾಗಿ ComfyUI ವರ್ಕ್‌ಫ್ಲೋಗಳನ್ನು ನಿಯೋಜಿಸಿ.

ಮಾದರಿ ಫೈನ್-ಟ್ಯೂನಿಂಗ್ ಮತ್ತು ತರಬೇತಿ

ಸುಮಾರು 107.6 TFLOPS FP32 ಕಂಪ್ಯೂಟ್ ಮತ್ತು CUDA compute capability 12.0 ಜೊತೆಗೆ ನ್ಯೂರಲ್ ನೆಟ್‌ವರ್ಕ್‌ಗಳನ್ನು ಫೈನ್-ಟ್ಯೂನ್ ಮಾಡಲು PyTorch/CUDA ಟೆಂಪ್ಲೇಟ್ ಬಳಸಿ.

GPU-ವೇಗವರ್ಧಿತ ರೆಂಡರಿಂಗ್

Blackwell ವಾಸ್ತುಶಿಲ್ಪ ಮತ್ತು ಹೆಚ್ಚಿನ ಮೆಮೊರಿ ಥ್ರೂಪುಟ್‌ನಿಂದ ಪ್ರಯೋಜನ ಪಡೆಯುವ ತೀವ್ರ ರೆಂಡರಿಂಗ್ ಮತ್ತು ಸಿಮ್ಯುಲೇಶನ್ ಕಾರ್ಯಗಳನ್ನು ನಿರ್ವಹಿಸಿ.

ನಿಮಗೆ ಇದು ಸರಿಯಾದ GPU ಆಗಿದೆಯೇ?

ನಿಮ್ಮ ಕೆಲಸದ ಹೊರೆಗಳಿಗೆ 32 GB VRAM ಮತ್ತು Blackwell ಗ್ರಾಹಕ ವಾಸ್ತುಶಿಲ್ಪದ ಹೆಚ್ಚಿನ ಮೆಮೊರಿ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಅಗತ್ಯವಿದ್ದಾಗ RTX 5090 ಆಯ್ಕೆಮಾಡಿ. ನಿಮ್ಮ ಮಾದರಿಗಳು 32 GB ಮೆಮೊರಿಯನ್ನು ಮೀರಿದರೆ, ದೊಡ್ಡ ವರ್ಕ್‌ಸ್ಟೇಷನ್ ಅಥವಾ ಡೇಟಾಸೆಂಟರ್ GPU ಪರಿಗಣಿಸಿ, ಆದರೆ ಸಣ್ಣ ಗ್ರಾಹಕ GPUಗಳು ಹಗುರ ಇನ್‌ಫರೆನ್ಸ್ ಮತ್ತು ಮೂಲ ಅಭಿವೃದ್ಧಿಗೆ ಹೆಚ್ಚು ಸೂಕ್ತ.

ಇದೇ ರೀತಿಯ GPUಗಳೊಂದಿಗೆ ಹೋಲಿಸಿ

GPUಪ್ರತಿ GPUಗೆ VRAMಆರ್ಕಿಟೆಕ್ಚರ್FP32 ಕಂಪ್ಯೂಟ್ಪ್ರತಿ ಗಂಟೆಗೆ ಆರಂಭವಿವರಗಳು
RTX 509032 GBBlackwell≈ 107.6 TFLOPS—
RTX 5090D32 GBBlackwell≈ 107.6 TFLOPS—ವಿವರಗಳು
RTX 409024 GBAda Lovelace≈ 81.4 TFLOPS—ವಿವರಗಳು
RTX 6000Ada48 GBAda Lovelace≈ 81.4 TFLOPS—ವಿವರಗಳು

ಪದೇ ಪದೇ ಕೇಳಲಾಗುವ ಪ್ರಶ್ನೆಗಳು

RTX 5090 LLM ಇನ್‌ಫರೆನ್ಸ್ ಮತ್ತು ಫೈನ್-ಟ್ಯೂನಿಂಗ್‌ಗೆ ಸೂಕ್ತವೇ?

ಹೌದು, 32 GB VRAM ಮತ್ತು ಸುಮಾರು 1454 GB/s ಮೆಮೊರಿ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಮಧ್ಯಮ ಗಾತ್ರದ ಭಾಷಾ ಮಾದರಿಗಳನ್ನು ಸರ್ವ್ ಮಾಡಲು ಮತ್ತು ಫೈನ್-ಟ್ಯೂನ್ ಮಾಡಲು ಇದನ್ನು ಚೆನ್ನಾಗಿ ಹೊಂದಿಸುತ್ತದೆ. vLLM, Ollama ಅಥವಾ PyTorch/CUDA ಗಾಗಿ ಸಿದ್ಧ ಟೆಂಪ್ಲೇಟ್‌ಗಳನ್ನು ಬಳಸಿ ONIE ನಲ್ಲಿ ತ್ವರಿತವಾಗಿ ಪ್ರಾರಂಭಿಸಬಹುದು.

RTX 5090 ಸಣ್ಣ ಗ್ರಾಹಕ GPUಗಳು ಅಥವಾ ದೊಡ್ಡ ಡೇಟಾಸೆಂಟರ್ GPUಗಳಿಗೆ ಹೋಲಿಸಿದರೆ ಹೇಗಿದೆ?

32 GB VRAM ಮತ್ತು CUDA compute capability 12.0 ಜೊತೆಗೆ, RTX 5090 ಹಿಂದಿನ ಗ್ರಾಹಕ ಮಾದರಿಗಳಿಗಿಂತ ಹೆಚ್ಚಿನ ಮೆಮೊರಿ ಸಾಮರ್ಥ್ಯ ಮತ್ತು ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ನೀಡುತ್ತದೆ. ಆದರೆ ನಿಮ್ಮ ಕೆಲಸದ ಹೊರೆಗೆ ಒಂದೇ ಕಾರ್ಡ್‌ನಲ್ಲಿ 32 GB VRAM ಗಿಂತ ಹೆಚ್ಚು ಅಗತ್ಯವಿದ್ದರೆ, ನೀವು ವರ್ಕ್‌ಸ್ಟೇಷನ್ ಅಥವಾ ಡೇಟಾಸೆಂಟರ್ GPU ಆಯ್ಕೆಮಾಡಬೇಕು.

ನನ್ನ RTX 5090 ಇನ್‌ಸ್ಟೆನ್ಸ್‌ಗೆ ಹೇಗೆ ಸಂಪರ್ಕಿಸುವುದು ಮತ್ತು ಯಾವ ಸಾಫ್ಟ್‌ವೇರ್ ಮೊದಲೇ ಇನ್‌ಸ್ಟಾಲ್ ಆಗಿದೆ?

ನೀವು SSH ಪ್ರವೇಶದ ಮೂಲಕ ನೇರವಾಗಿ ನಿಮ್ಮ ಇನ್‌ಸ್ಟೆನ್ಸ್‌ಗೆ ಸಂಪರ್ಕಿಸಬಹುದು. ತಕ್ಷಣ ಕೆಲಸ ಆರಂಭಿಸಲು ONIE PyTorch/CUDA, vLLM, Ollama ಮತ್ತು ComfyUI ಸೇರಿದಂತೆ ಸಿದ್ಧ ಟೆಂಪ್ಲೇಟ್‌ಗಳನ್ನು ಒದಗಿಸುತ್ತದೆ.

ONIE ನಲ್ಲಿ RTX 5090 ಬಾಡಿಗೆಗೆ ಬಿಲ್ಲಿಂಗ್ ಹೇಗೆ ಕೆಲಸ ಮಾಡುತ್ತದೆ?

ನಿಮ್ಮ GPU ಸಕ್ರಿಯವಾಗಿರುವ ಅವಧಿಗೆ ಇನ್‌ಸ್ಟೆನ್ಸ್‌ಗಳಿಗೆ ಪ್ರತಿ ಗಂಟೆಯ ಆಧಾರದ ಮೇಲೆ ಬಿಲ್ ಮಾಡಲಾಗುತ್ತದೆ.

RTX 5090 ಅನ್ನು ಗಂಟೆಯ ದರದಲ್ಲಿ ಬಾಡಿಗೆಗೆ ಪಡೆಯಿರಿ

ಖಾತೆ ರಚಿಸಿ, ಸಂರಚನೆಯನ್ನು ಆಯ್ಕೆಮಾಡಿ ಮತ್ತು SSH ಮೂಲಕ ಸಂಪರ್ಕಿಸಿ. GPU ಅಳಿಸಿದಾಗ ಬಿಲ್ಲಿಂಗ್ ನಿಲ್ಲುತ್ತದೆ.

RTX 5090 ಬಾಡಿಗೆಗೆ ಪಡೆಯಿರಿ

ಎಲ್ಲಾ GPUಗಳು →