NVIDIA L40S GPU በሰዓት ይከራዩ
NVIDIA L40S ይህ Ada Lovelace የመረጃ ማዕከል GPU ሲሆን በONIE ላይ ለደመና ኪራይ ይገኛል። 45 GB VRAM፣ ወደ 73.3 TFLOPS ነጠላ-ትክክለኛነት ማስላት እና ወደ 626 GB/s የማህደረ ትውስታ ባንድዊድዝ በ350 W የኃይል ወሰን ውስጥ ያቀርባል። CUDA compute capability 8.9 ን ይደግፋል፤ ይህ ኢንስታንስ ከፍተኛ የAI ስልጠና፣ ኢንፈረንስ እና የግራፊክስ ሥራዎችን ያስተናግዳል፤ በሰዓት ክፍያም ይከፈላል።
ዝርዝር መግለጫዎች
በእያንዳንዱ GPU VRAM
አርክቴክቸር
ኮምፒውት ካፓቢሊቲ (Compute capability)
FP32 ኮምፒውት
የማህደረ ትውስታ ባንድዊድዝ
የኃይል ገደብ
እሴቶቹ አሁን በዝርዝር የቀረቡ ማሽኖች ላይ በመሠረተ ልማት አቅራቢው የተገለጹ ናቸው፤ ትክክለኛው አፈጻጸም ከማሽን ወደ ማሽን ይለያያል።
ይገኛሉ ያሉ ውቅሮች
የቀጥታ ክምችትና ዋጋዎች፣ ያለማቋረጥ የሚዘምኑ። የመጨረሻው ዋጋ ትዕዛዝ ከማስገባትዎ በፊት ይረጋገጣል።
የቀጥታ ዋጋዎችን በመጫን ላይ…
L40S ለምን ይጠቅማል
Large Language Model ኢንፈረንስ
በ45 GB የማህደረ ትውስታ አቅም ውስጥ፣ vLLM እና Ollama የመሳሰሉ ዝግጁ ቴምፕሌቶችን በመጠቀም የተቀነሰ ወይም ሙሉ ትክክለኛነት ያላቸውን ቋንቋ ሞዴሎች ያሰማሩ።
Generative ምስል ሥራ ፍሰቶች
የAda Lovelace አርክቴክቸርን በመጠቀም በ ComfyUI ውስብስብ የdiffusion ፓይፕላይኖችን እና የባች ማመንጨት ሥራዎችን ያሂዱ።
Deep Learning Fine-Tuning
ወደ 73.3 TFLOPS ማስላትን በመጠቀም በPyTorch/CUDA አካባቢዎች ኒውራል ኔትወርኮችን እና LoRA adapters ን ያስተካክሉ።
የመረጃ ማዕከል ግራፊክስ እና ሬንደሪንግ
ወደ 626 GB/s የማህደረ ትውስታ ባንድዊድዝ ያለው የመረጃ ማዕከል GPU በመጠቀም headless ሬንደሪንግ እና ማስመሰል ሥራዎችን ያከናውኑ።
ለእርስዎ ትክክለኛው GPU ነው?
ሥራዎ 45 GB VRAM እና የመረጃ ማዕከል አስተማማኝነት ሲፈልግ ከመደበኛ የሸማች ካርዶች ባሻገር L40S ን ይምረጡ። ሞዴሎችዎ ባነሰ ማህደረ ትውስታ የሚገጥሙ ከሆነ ትንሽ የworkstation ወይም የሸማች GPU የበለጠ ኢኮኖሚያዊ ነው፤ ትላልቅ ያልተቀነሱ መሠረታዊ ሞዴሎች ደግሞ ከፍተኛ የማህደረ ትውስታ አቅም ያለው የመረጃ ማዕከል GPU ይፈልጋሉ።
ከተመሳሳይ GPUዎች ጋር ያወዳድሩ
በተደጋጋሚ የሚጠየቁ ጥያቄዎች
NVIDIA L40S ለLLM ኢንፈረንስ እና ለfine-tuning ተስማሚ ነው?
አዎ፤ በ45 GB VRAM እና CUDA compute capability 8.9 L40S ለመካከለኛ እስከ ትላልቅ ቋንቋ ሞዴሎች አገልግሎት እና ለparameter-efficient fine-tuning በሚገባ ተስማሚ ነው። ኢንስታንሶችን ቅድመ-ውቅር በተደረገላቸው vLLM፣ Ollama ወይም PyTorch/CUDA ቴምፕሌቶች ማስጀመር ይችላሉ።
L40S ከሸማች GPUs ወይም ከትላልቅ የመረጃ ማዕከል GPUs ጋር እንዴት ይነፃፀራል?
L40S ከመደበኛ የሸማች Ada Lovelace ካርዶች የበለጠ VRAM ይሰጣል፤ ስለዚህ ትላልቅ የሞዴል ክብደቶችን ያለ offloading መያዝ ይችላል። ሆኖም ከከፍተኛ-ማህደረ ትውስታ፣ ማስላት-ብቻ ከሆኑ የመረጃ ማዕከል GPUs ያነሰ የማህደረ ትውስታ ባንድዊድዝ አለው፤ እነዚህ ደግሞ ለትላልቅ memory-bound ስልጠና ሥራዎች ይመረጣሉ።
በONIE ላይ የL40S ኢንስታንሴን እንዴት ላገናኝና ላዋቅረው?
ኢንስታንሱ እንደተነሳ ወደ አካባቢዎ ሙሉ SSH መዳረሻ ያገኛሉ። ወዲያውኑ ለመስራት PyTorch/CUDA፣ ComfyUI፣ vLLM እና Ollamaን ጨምሮ ዝግጁ ቴምፕሌቶችን መምረጥ ይችላሉ።
ለL40S ክፍያ እንዴት ይሰራል?
ONIE ለሁሉም የL40S ኪራዮች በሰዓት ክፍያ ይጠቀማል። ኢንስታንሱ ለእርስዎ የተመደበበትን ጊዜ ብቻ ይከፍላሉ።
L40Sን በሰዓት ይከራዩ
መለያ ይፍጠሩ፣ ውቅር ይምረጡ እና በSSH ያገናኙ። GPUውን ሲሰርዙ ክፍያው ይቆማል።
L40S ይከራዩ