GPU Cloud · NVIDIA · Turing

NVIDIA RTX 2060 GPU മണിക്കൂർ അടിസ്ഥാനത്തിൽ വാടകയ്ക്ക് എടുക്കുക

ONIE-ലെ NVIDIA RTX 2060 ഒരു Turing ആർക്കിടെക്ചർ കൺസ്യൂമർ GPU ആണ്. ഇതിൽ 12 GB VRAM ഉണ്ട്, 130 W TDP ആണ്. ഏകദേശം 6.5 TFLOPS സിംഗിൾ-പ്രിസിഷൻ കമ്പ്യൂട്ടും ഏകദേശം 268 GB/s മെമ്മറി ബാൻഡ്‌വിഡ്ത്തും CUDA compute capability 7.5 ഉം ഇത് നൽകുന്നു. ഇൻസ്റ്റൻസുകളിൽ SSH ആക്സസ്, മണിക്കൂർ അടിസ്ഥാനത്തിലുള്ള ബില്ലിംഗ്, PyTorch/CUDA, ComfyUI, Ollama, vLLM എന്നിവയ്ക്കുള്ള മുൻകൂട്ടി ക്രമീകരിച്ച ടെംപ്ലേറ്റുകൾ എന്നിവ ലഭ്യമാണ്.

സ്പെസിഫിക്കേഷനുകൾ

ഓരോ GPU-ക്കും VRAM

12 GB

ആർക്കിടെക്ചർ

NVIDIA Turing

കംപ്യൂട്ട് കപ്പാസിറ്റി

7.5

FP32 കംപ്യൂട്ട്

≈ 6.5 TFLOPS

മെമ്മറി ബാൻഡ്‌വിഡ്ത്ത്

≈ 268 GB/s

പവർ പരിധി

130 W

ഇപ്പോൾ ലിസ്റ്റ് ചെയ്തിരിക്കുന്ന മെഷീനുകൾക്കായി ഇൻഫ്രാസ്ട്രക്ചർ ദാതാവ് നൽകിയ മൂല്യങ്ങളാണിവ; യഥാർത്ഥ പ്രകടനം ഓരോ മെഷീനിലും വ്യത്യാസപ്പെടാം.

ലഭ്യമായ കോൺഫിഗറേഷനുകൾ

തത്സമയ സ്റ്റോക്കും വിലകളും തുടർച്ചയായി അപ്‌ഡേറ്റ് ചെയ്യപ്പെടുന്നു. ഓർഡർ ചെയ്യുന്നതിന് മുമ്പ് അന്തിമ വില സ്ഥിരീകരിക്കപ്പെടും.

തത്സമയ വിലകൾ ലോഡ് ചെയ്യുന്നു…

RTX 2060 ഏതിനൊക്കെ അനുയോജ്യമാണ്

എൻട്രി-ലെവൽ ഇമേജ് ജനറേഷൻ

12 GB VRAM-നുള്ളിൽ സൗകര്യപ്രദമായി ഒതുങ്ങുന്ന ComfyUI വർക്ക്ഫ്ലോകളും സാധാരണ ഡിഫ്യൂഷൻ മോഡലുകളും പ്രവർത്തിപ്പിക്കുക.

ചെറിയ ഭാഷാ മോഡൽ ഇൻഫറൻസ്

ഭാരം കുറഞ്ഞ ടെക്സ്റ്റ് ജനറേഷൻ ജോലികൾക്കായി Ollama അല്ലെങ്കിൽ vLLM ഉപയോഗിച്ച് ക്വാണ്ടൈസ് ചെയ്തതോ ചെറിയതോ ആയ ഭാഷാ മോഡലുകൾ വിന്യസിക്കുക.

PyTorch പ്രോട്ടോടൈപ്പിംഗും ഡീബഗ്ഗിംഗും

വലിയ ഇൻസ്റ്റൻസുകളിലേക്ക് മാറുന്നതിന് മുമ്പ് Turing ആർക്കിടെക്ചർ കാർഡിൽ CUDA കോഡ് എഴുതുക, പരീക്ഷിക്കുക, ഡീബഗ് ചെയ്യുക.

ചെറിയ തോതിലുള്ള മോഡൽ പരിശീലനം

PyTorch/CUDA ടെംപ്ലേറ്റ് ഉപയോഗിച്ച് മിതമായ വലുപ്പത്തിലുള്ള ന്യൂറൽ നെറ്റ്‌വർക്കുകളും മെഷീൻ ലേണിംഗ് പൈപ്പ്‌ലൈനുകളും പരിശീലിപ്പിക്കുക.

ഇത് നിങ്ങൾക്ക് അനുയോജ്യമായ GPU ആണോ?

എൻട്രി-ലെവൽ കൺസ്യൂമർ കാർഡുകൾ നൽകുന്നതിനേക്കാൾ കൂടുതൽ മെമ്മറി നിങ്ങളുടെ ജോലിക്ക് ആവശ്യമുള്ളപ്പോൾ, പുതിയ ആർക്കിടെക്ചറുകളുടെ ഉയർന്ന കമ്പ്യൂട്ട് ത്രൂപുട്ട് ആവശ്യമില്ലെങ്കിൽ, 12 GB RTX 2060 തിരഞ്ഞെടുക്കുക. വലിയ പരിശീലനത്തിന് പുതിയ തലമുറയിലേക്കോ വർക്ക്സ്റ്റേഷൻ GPU-ലേക്കോ അപ്‌ഗ്രേഡ് ചെയ്യുക, അല്ലെങ്കിൽ നിങ്ങളുടെ ജോലിക്ക് കുറഞ്ഞ VRAM മതിയെങ്കിൽ ചെറിയ GPU തിരഞ്ഞെടുക്കുക.

സമാന GPU-കളുമായി താരതമ്യം ചെയ്യുക

GPUഓരോ GPU-ക്കും VRAMആർക്കിടെക്ചർFP32 കംപ്യൂട്ട്മണിക്കൂറിന് മുതൽവിശദാംശങ്ങൾ
RTX 206012 GBTuring≈ 6.5 TFLOPS—
GTX TITAN X12 GBMaxwell≈ 6.8 TFLOPS—വിശദാംശങ്ങൾ
GTX 1070 Ti8 GBPascal≈ 7.4 TFLOPS—വിശദാംശങ്ങൾ
RTX 2060S8 GBTuring≈ 7.5 TFLOPS—വിശദാംശങ്ങൾ

പതിവായി ചോദിക്കുന്ന ചോദ്യങ്ങൾ

LLM ഇൻഫറൻസിന് RTX 2060 അനുയോജ്യമാണോ?

12 GB VRAM-ഉം ഏകദേശം 268 GB/s മെമ്മറി ബാൻഡ്‌വിഡ്ത്തും ഉള്ളതിനാൽ, Ollama അല്ലെങ്കിൽ vLLM വഴി ചെറിയതും ക്വാണ്ടൈസ് ചെയ്തതുമായ ഭാഷാ മോഡലുകൾ ഇതിന് കൈകാര്യം ചെയ്യാനാകും. വലിയ മോഡലുകൾക്കോ ഉയർന്ന ത്രൂപുട്ടുള്ള സർവിംഗിനോ കൂടുതൽ മെമ്മറിയും ഉയർന്ന ബാൻഡ്‌വിഡ്ത്തും ഉള്ള GPU ആവശ്യമാണ്.

Turing ആർക്കിടെക്ചർ ഏത് സോഫ്റ്റ്‌വെയർ അനുയോജ്യതയാണ് നൽകുന്നത്?

RTX 2060 CUDA compute capability 7.5 പിന്തുണയ്ക്കുന്നു, ഇത് PyTorch/CUDA ടെംപ്ലേറ്റിൽ ഉൾപ്പെടുന്ന സാധാരണ ഫ്രെയിംവർക്കുകൾ പ്രവർത്തിപ്പിക്കുന്നു. പിന്നീടുള്ള ആർക്കിടെക്ചറുകളിൽ അവതരിപ്പിച്ച ചില പുതിയ ഡാറ്റാ ടൈപ്പുകൾക്ക് ഇതിന് ഹാർഡ്‌വെയർ പിന്തുണയില്ലെന്ന് ശ്രദ്ധിക്കുക.

ഈ 12 GB RTX 2060 മറ്റ് കൺസ്യൂമർ GPU-കളുമായി എങ്ങനെ താരതമ്യം ചെയ്യുന്നു?

12 GB മെമ്മറി ശേഷി, കുറഞ്ഞ മെമ്മറിയുള്ള കൺസ്യൂമർ വേരിയന്റുകളെക്കാൾ വലിയ മോഡലുകളും ബാച്ച് സൈസുകളും ഉൾക്കൊള്ളാൻ ഇതിനെ അനുവദിക്കുന്നു, എന്നാൽ ഏകദേശം 6.5 TFLOPS കമ്പ്യൂട്ട് പുതിയ തലമുറയിലെ കാർഡുകളെക്കാൾ മിതമാണ്.

ONIE-ൽ ബില്ലിംഗും ഇൻസ്റ്റൻസ് ആക്സസും എങ്ങനെയാണ് പ്രവർത്തിക്കുന്നത്?

ഇൻസ്റ്റൻസുകൾക്ക് മണിക്കൂർ അടിസ്ഥാനത്തിൽ ബില്ലിംഗ് ഈടാക്കുന്നു. SSH വഴി നേരിട്ട് കണക്ട് ചെയ്യാം, അല്ലെങ്കിൽ PyTorch/CUDA, vLLM, Ollama, ComfyUI എന്നിവയ്ക്കുള്ള മുൻകൂട്ടി ക്രമീകരിച്ച ടെംപ്ലേറ്റുകളിലേക്ക് നേരിട്ട് ലോഞ്ച് ചെയ്യാം.

RTX 2060 മണിക്കൂർ അടിസ്ഥാനത്തിൽ വാടകയ്ക്ക് എടുക്കുക

ഒരു അക്കൗണ്ട് സൃഷ്ടിക്കുക, കോൺഫിഗറേഷൻ തിരഞ്ഞെടുക്കുക, SSH വഴി കണക്ട് ചെയ്യുക. GPU ഡിലീറ്റ് ചെയ്യുമ്പോൾ ബില്ലിംഗ് നിർത്തും.

RTX 2060 വാടകയ്ക്ക് എടുക്കുക

എല്ലാ GPU-കളും →