GPU Cloud · NVIDIA · Blackwell

ਘੰਟੇ ਦੇ ਹਿਸਾਬ ਨਾਲ NVIDIA RTX PRO 6000 S GPU ਕਿਰਾਏ 'ਤੇ ਲਓ

NVIDIA RTX PRO 6000 S ਇੱਕ Blackwell ਆਰਕੀਟੈਕਚਰ ਵਾਲਾ ਵਰਕਸਟੇਸ਼ਨ GPU ਹੈ, ਜਿਸ ਵਿੱਚ 96 GB VRAM ਅਤੇ compute capability 12.0 ਹੈ। ਇਹ 600 W ਪਾਵਰ ਸੀਮਾ ਵਿੱਚ ਲਗਭਗ 93.6 TFLOPS ਮਿਆਰੀ ਫਲੋਟਿੰਗ-ਪੁਆਇੰਟ ਕੰਪਿਊਟ ਅਤੇ ਲਗਭਗ 1396 GB/s ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ। ONIE 'ਤੇ ਤੁਸੀਂ ਇਹ ਉੱਚ-ਮੈਮੋਰੀ ਵਰਕਸਟੇਸ਼ਨ ਕਾਰਡ ਪ੍ਰਤੀ ਘੰਟਾ ਬਿਲਿੰਗ ਅਤੇ ਪੂਰੀ SSH ਪਹੁੰਚ ਨਾਲ ਕਿਰਾਏ 'ਤੇ ਲੈ ਸਕਦੇ ਹੋ।

ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ

ਹਰ GPU ਲਈ VRAM

96 GB

ਆਰਕੀਟੈਕਚਰ

NVIDIA Blackwell

ਕੰਪਿਊਟ ਸਮਰੱਥਾ

12.0

FP32 ਕੰਪਿਊਟ

≈ 93.6 TFLOPS

ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ

≈ 1,396 GB/s

ਪਾਵਰ ਸੀਮਾ

600 W

ਇਹ ਮੁੱਲ ਇਸ ਵੇਲੇ ਸੂਚੀਬੱਧ ਮਸ਼ੀਨਾਂ ਲਈ ਬੁਨਿਆਦੀ ਢਾਂਚਾ ਪ੍ਰਦਾਤਾ ਵੱਲੋਂ ਦਿੱਤੇ ਗਏ ਹਨ; ਅਸਲ ਕਾਰਗੁਜ਼ਾਰੀ ਹਰ ਮਸ਼ੀਨ ਅਨੁਸਾਰ ਵੱਖਰੀ ਹੋ ਸਕਦੀ ਹੈ।

ਉਪਲਬਧ ਸੰਰਚਨਾਵਾਂ

ਸਟਾਕ ਅਤੇ ਕੀਮਤਾਂ ਲਗਾਤਾਰ ਅੱਪਡੇਟ ਹੁੰਦੀਆਂ ਰਹਿੰਦੀਆਂ ਹਨ। ਆਰਡਰ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ ਅੰਤਿਮ ਕੀਮਤ ਦੀ ਪੁਸ਼ਟੀ ਕੀਤੀ ਜਾਂਦੀ ਹੈ।

ਲਾਈਵ ਕੀਮਤਾਂ ਲੋਡ ਹੋ ਰਹੀਆਂ ਹਨ…

RTX PRO 6000 S ਕਿਸ ਲਈ ਵਧੀਆ ਹੈ

ਵੱਡੇ ਭਾਸ਼ਾ ਮਾਡਲ ਇਨਫ਼ਰੈਂਸ

ਪਹਿਲਾਂ ਤੋਂ ਸੰਰਚਿਤ vLLM ਜਾਂ Ollama ਟੈਂਪਲੇਟਾਂ ਦੀ ਵਰਤੋਂ ਕਰਕੇ 96 GB VRAM ਪੂਲ ਦੇ ਅੰਦਰ ਵੱਡੇ ਮਾਡਲ ਆਰਾਮ ਨਾਲ ਚਲਾਓ।

ਡੀਪ ਲਰਨਿੰਗ ਫਾਈਨ-ਟਿਊਨਿੰਗ

PyTorch ਵਿੱਚ ਲਗਭਗ 1396 GB/s ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ ਅਤੇ compute capability 12.0 ਨਾਲ ਜਟਿਲ ਨਿਊਰਲ ਨੈੱਟਵਰਕਾਂ ਨੂੰ ਟ੍ਰੇਨ ਅਤੇ ਅਨੁਕੂਲ ਬਣਾਓ।

ਉੱਚ-ਰੈਜ਼ੋਲਿਊਸ਼ਨ ਜਨਰੇਟਿਵ ਮੀਡੀਆ

ComfyUI ਵਿੱਚ ਵਿਸਥਾਰਿਤ ਤਸਵੀਰਾਂ ਅਤੇ ਵੀਡੀਓ ਬਣਾਓ, ਅਤੇ ਇੱਕੋ ਸਮੇਂ ਕਈ ਭਾਰੀ ਚੈੱਕਪੌਇੰਟ ਮੈਮੋਰੀ ਵਿੱਚ ਲੋਡ ਰੱਖੋ।

ਵਰਕਸਟੇਸ਼ਨ ਗ੍ਰਾਫਿਕਸ ਅਤੇ ਸਿਮੂਲੇਸ਼ਨ

ਲਗਭਗ 93.6 TFLOPS ਸਿੰਗਲ-ਪ੍ਰੀਸੀਜ਼ਨ ਪ੍ਰਦਰਸ਼ਨ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਮੰਗ ਵਾਲੇ ਵਰਕਸਟੇਸ਼ਨ ਕੰਪਿਊਟ ਕੰਮ ਅਤੇ ਸਪੇਸ਼ੀਅਲ ਸਿਮੂਲੇਸ਼ਨ ਚਲਾਓ।

ਕੀ ਇਹ ਤੁਹਾਡੇ ਲਈ ਸਹੀ GPU ਹੈ?

ਜਦੋਂ ਤੁਹਾਡੇ ਕੰਮ ਨੂੰ 96 GB ਮੈਮੋਰੀ ਅਤੇ Blackwell ਆਰਕੀਟੈਕਚਰ ਦੀਆਂ ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ ਦੀ ਲੋੜ ਹੋਵੇ, ਪਰ ਤੁਸੀਂ ਡੇਟਾਸੈਂਟਰ-ਸ਼੍ਰੇਣੀ GPU 'ਤੇ ਨਾ ਜਾਣਾ ਚਾਹੁੰਦੇ ਹੋ, ਤਾਂ RTX PRO 6000 S ਚੁਣੋ। ਜੇ ਤੁਹਾਡੇ ਮਾਡਲ ਛੋਟੀ ਮੈਮੋਰੀ ਵਿੱਚ ਫਿੱਟ ਹੁੰਦੇ ਹਨ, ਤਾਂ ਕੰਜ਼ਿਊਮਰ ਜਾਂ ਹੇਠਲੀ ਸ਼੍ਰੇਣੀ ਦਾ ਵਰਕਸਟੇਸ਼ਨ ਕਾਰਡ ਵਧੇਰੇ ਕਿਫ਼ਾਇਤੀ ਹੈ, ਜਦਕਿ ਬਹੁਤ ਵੱਡੀਆਂ ਮਲਟੀ-ਨੋਡ ਟ੍ਰੇਨਿੰਗ ਨੌਕਰੀਆਂ ਲਈ ਵੱਧ ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ ਵਾਲਾ ਸਮਰਪਿਤ ਡੇਟਾਸੈਂਟਰ GPU ਢੁਕਵਾਂ ਹੋ ਸਕਦਾ ਹੈ।

ਮਿਲਦੇ-ਜੁਲਦੇ GPU ਨਾਲ ਤੁਲਨਾ ਕਰੋ

GPUਹਰ GPU ਲਈ VRAMਆਰਕੀਟੈਕਚਰFP32 ਕੰਪਿਊਟਸ਼ੁਰੂਆਤੀ / ਘੰਟਾਵੇਰਵੇ
RTX PRO 6000 S96 GBBlackwell≈ 93.6 TFLOPS—
RTX PRO 6000 Max-Q96 GBBlackwell≈ 119 TFLOPS—ਵੇਰਵੇ
RTX PRO 6000 WS96 GBBlackwell≈ 119 TFLOPS—ਵੇਰਵੇ
RTX 6000D84 GBBlackwell≈ 77.6 TFLOPS—ਵੇਰਵੇ

ਅਕਸਰ ਪੁੱਛੇ ਜਾਂਦੇ ਸਵਾਲ

ਕੀ RTX PRO 6000 S ਵੱਡੇ ਭਾਸ਼ਾ ਮਾਡਲ ਇਨਫ਼ਰੈਂਸ ਅਤੇ ਫਾਈਨ-ਟਿਊਨਿੰਗ ਲਈ ਢੁਕਵਾਂ ਹੈ?

ਹਾਂ, 96 GB VRAM ਸਮਰੱਥਾ ਅਤੇ ਲਗਭਗ 1396 GB/s ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ ਇਸਨੂੰ ਉਹਨਾਂ ਵੱਡੇ ਭਾਸ਼ਾ ਮਾਡਲਾਂ ਲਈ ਚੰਗਾ ਬਣਾਉਂਦੀ ਹੈ ਜੋ ਆਮ ਕੰਜ਼ਿਊਮਰ ਕਾਰਡਾਂ ਦੀ ਮੈਮੋਰੀ ਸੀਮਾ ਤੋਂ ਵੱਧ ਹਨ। ਤੁਸੀਂ ONIE 'ਤੇ vLLM, Ollama ਜਾਂ PyTorch ਲਈ ਤਿਆਰ ਟੈਂਪਲੇਟਾਂ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਜਲਦੀ ਡਿਪਲੌਇ ਕਰ ਸਕਦੇ ਹੋ।

ਇਹ GPU ਛੋਟੇ ਵਰਕਸਟੇਸ਼ਨ ਜਾਂ ਵੱਡੇ ਡੇਟਾਸੈਂਟਰ GPUs ਨਾਲ ਕਿਵੇਂ ਤੁਲਨਾ ਕਰਦਾ ਹੈ?

96 GB VRAM ਵਾਲਾ Blackwell ਵਰਕਸਟੇਸ਼ਨ GPU ਕੰਜ਼ਿਊਮਰ GPUs ਅਤੇ ਪਿਛਲੀ ਪੀੜ੍ਹੀ ਦੇ ਵਰਕਸਟੇਸ਼ਨ ਕਾਰਡਾਂ ਨਾਲੋਂ ਕਾਫ਼ੀ ਵੱਧ ਮੈਮੋਰੀ ਦਿੰਦਾ ਹੈ, ਜਿਸ ਨਾਲ ਵੱਡੇ ਬੈਚ ਸਾਈਜ਼ ਅਤੇ ਅਨ-ਕੁਆਂਟਾਈਜ਼ਡ ਵੇਟਸ ਵਰਤੇ ਜਾ ਸਕਦੇ ਹਨ। ਪੂਰੇ ਡੇਟਾਸੈਂਟਰ GPUs ਆਮ ਤੌਰ 'ਤੇ ਵੱਡੇ ਪੈਮਾਨੇ ਦੀ ਟ੍ਰੇਨਿੰਗ ਲਈ ਵੱਧ ਮੈਮੋਰੀ ਬੈਂਡਵਿਡਥ ਦਿੰਦੇ ਹਨ, ਜਦਕਿ ਜੇ ਤੁਹਾਡਾ ਕੰਮ 96 GB ਸਮਰੱਥਾ ਦਾ ਪੂਰਾ ਇਸਤੇਮਾਲ ਨਹੀਂ ਕਰਦਾ ਤਾਂ ਛੋਟੇ GPU ਬਿਹਤਰ ਹਨ।

ONIE 'ਤੇ ਕਿਹੜੇ ਸਾਫਟਵੇਅਰ ਟੈਂਪਲੇਟ ਅਤੇ ਪਹੁੰਚ ਦੇ ਤਰੀਕੇ ਸ਼ਾਮਲ ਹਨ?

ਹਰ ਇੰਸਟੈਂਸ ਵਿੱਚ ਸਿੱਧੀ SSH ਪਹੁੰਚ ਸ਼ਾਮਲ ਹੈ, ਤਾਂ ਜੋ ਤੁਸੀਂ ਆਪਣਾ ਵਾਤਾਵਰਣ ਲੋੜ ਅਨੁਸਾਰ ਸੰਰਚਿਤ ਕਰ ਸਕੋ। ONIE CUDA ਨਾਲ PyTorch, vLLM, Ollama ਅਤੇ ComfyUI ਲਈ ਵਰਤੋਂ ਵਿੱਚ ਆਸਾਨ ਟੈਂਪਲੇਟ ਵੀ ਦਿੰਦਾ ਹੈ, ਜੋ compute capability 12.0 ਵਾਲੇ ਵਰਕਫਲੋ ਨੂੰ ਸਮਰਥਨ ਦਿੰਦੇ ਹਨ।

RTX PRO 6000 S ਲਈ ਬਿਲਿੰਗ ਕਿਵੇਂ ਕੰਮ ਕਰਦੀ ਹੈ?

ONIE 'ਤੇ ਕਿਰਾਏ ਪ੍ਰਤੀ ਘੰਟਾ ਬਿਲਿੰਗ 'ਤੇ ਅਧਾਰਿਤ ਹਨ। ਤੁਸੀਂ ਸਿਰਫ਼ ਉਸ ਸਮੇਂ ਲਈ ਭੁਗਤਾਨ ਕਰਦੇ ਹੋ ਜਦੋਂ ਤੁਹਾਡਾ ਇੰਸਟੈਂਸ ਚਾਲੂ ਹੁੰਦਾ ਹੈ, ਜਿਸ ਨਾਲ ਇਹ ਛੋਟੇ ਟੈਸਟ ਸੈਸ਼ਨਾਂ ਅਤੇ ਲੰਬੇ ਵਰਕਸਟੇਸ਼ਨ ਕੰਪਿਊਟ ਕੰਮਾਂ ਦੋਵਾਂ ਲਈ ਵਿਹਾਰਕ ਬਣਦਾ ਹੈ।

RTX PRO 6000 S ਨੂੰ ਘੰਟੇ ਦੇ ਹਿਸਾਬ ਨਾਲ ਕਿਰਾਏ ’ਤੇ ਲਓ

ਖਾਤਾ ਬਣਾਓ, ਸੰਰਚਨਾ ਚੁਣੋ ਅਤੇ SSH ਰਾਹੀਂ ਜੁੜੋ। GPU ਮਿਟਾਉਣ ’ਤੇ ਬਿਲਿੰਗ ਬੰਦ ਹੋ ਜਾਂਦੀ ਹੈ।

RTX PRO 6000 S ਕਿਰਾਏ ’ਤੇ ਲਓ

ਸਾਰੇ GPU →