NVIDIA H100 SXM GPU በሰዓት ይከራዩ
NVIDIA H100 SXM ለ Hopper ስነ-ህንፃ የተዘጋጀ የዳታ ማዕከል GPU ሲሆን 80 GB VRAM እና 700 W የኃይል ወሰን አለው። ወደ 53.5 TFLOPS መደበኛ የነጥብ ተንሳፋፊ ስሌት እና ወደ 2869 GB/s የማስታወሻ ባንድዊድዝ ያቀርባል፤ CUDA compute capability 9.0ን ይደግፋል። በONIE ላይ በሰዓት ክፍያ፣ ሙሉ SSH መዳረሻ እና ለ PyTorch/CUDA፣ vLLM፣ Ollama እና ComfyUI ዝግጁ ቴምፕሌቶች ይከራዩት።
ዝርዝር መግለጫዎች
በእያንዳንዱ GPU VRAM
አርክቴክቸር
ኮምፒውት ካፓቢሊቲ (Compute capability)
FP32 ኮምፒውት
የማህደረ ትውስታ ባንድዊድዝ
የኃይል ገደብ
እሴቶቹ አሁን በዝርዝር የቀረቡ ማሽኖች ላይ በመሠረተ ልማት አቅራቢው የተገለጹ ናቸው፤ ትክክለኛው አፈጻጸም ከማሽን ወደ ማሽን ይለያያል።
ይገኛሉ ያሉ ውቅሮች
የቀጥታ ክምችትና ዋጋዎች፣ ያለማቋረጥ የሚዘምኑ። የመጨረሻው ዋጋ ትዕዛዝ ከማስገባትዎ በፊት ይረጋገጣል።
የቀጥታ ዋጋዎችን በመጫን ላይ…
H100 SXM ለምን ይጠቅማል
የትላልቅ ቋንቋ ሞዴል (LLM) ኢንፈረንስ
የ80 GB VRAM አቅምና ወደ 2869 GB/s የማስታወሻ ባንድዊድዝ በመጠቀም በvLLM ወይም Ollama ቴምፕሌቶች አማካይነት ከፍተኛ ፍላጎት ያላቸውን የቋንቋ ሞዴሎች ወደ ምርት ያሰማሩ።
Deep Learning Fine-Tuning
የHopper ስነ-ህንፃና CUDA compute capability 9.0ን በመጠቀም፣ አስቀድመው በተዋቀሩ PyTorch/CUDA አካባቢዎች የነርቭ ኔትወርኮችን ያሰለጥኑ እና ያስተካክሉ።
High-Throughput Batch Processing
በ700 W የዳታ ማዕከል ቅርጽ ውስጥ ወደ 53.5 TFLOPS የስሌት አፈጻጸም ጥቅም የሚያገኙ ከባድ የመረጃ ማቀናበርና የማስመሰል ስራዎችን ያከናውኑ።
ከባድ የ AI ሚዲያ ማመንጨት የስራ ፍሰቶች
ውስብስብ የComfyUI የሥራ ሂደቶችንና ዲፊዥን ሞዴሎችን በትላልቅ ባች መጠኖች ያሂዱ፤ ሁሉም በ80 GB የማስታወሻ ገንዳ ውስጥ በምቾት ይገባሉ።
ለእርስዎ ትክክለኛው GPU ነው?
የስልጠና ወይም የኢንፈረንስ ስራዎችዎ 80 GB ከፍተኛ ባንድዊድዝ ያለው የዳታ ማዕከል ማስታወሻና Hopper ስነ-ህንፃ ባህሪያት ሲፈልጉ H100 SXMን ይምረጡ። ለቀላል ልማት ወይም አነስተኛ ሞዴሎች አነስተኛ የስራ ጣቢያ ወይም የተጠቃሚ GPU የበለጠ ተግባራዊ ሲሆን፣ አንድ ምሳሌ ሙሉ ሞዴልዎን በ80 GB VRAM ውስጥ ማስገባት ካልቻለ ደግሞ አዲስ ወይም ከፍተኛ አቅም ያለው የዳታ ማዕከል GPU ይመረጣል።
ከተመሳሳይ GPUዎች ጋር ያወዳድሩ
በተደጋጋሚ የሚጠየቁ ጥያቄዎች
H100 SXM ለLLM ማስተካከልና ኢንፈረንስ ተስማሚ ነው?
አዎ፣ 80 GB VRAMው እና ወደ 2869 GB/s የማስታወሻ ባንድዊድዝ ለትላልቅ የቋንቋ ሞዴሎች ማቅረብና ማስተካከል ሁለቱንም ተስማሚ ያደርገዋል። በONIE ላይ ለvLLM፣ Ollama ወይም PyTorch/CUDA ዝግጁ ቴምፕሌቶችን በመጠቀም ወዲያውኑ መጀመር ይችላሉ።
የSXM ስሪት ከዝቅተኛ ኃይል ካላቸው የዳታ ማዕከል ወይም የስራ ጣቢያ GPUዎች ጋር እንዴት ይነጻጸራል?
H100 SXM በ700 W የሙቀት ዲዛይን ኃይል ይሰራል፤ ስለዚህ ከPCIe የዳታ ማዕከል ስሪቶችና ከስራ ጣቢያ ካርዶች የበለጠ የስሌት አፈጻጸምና የማስታወሻ ባንድዊድዝ ማቆየት ይችላል። የስራ ጫናዎ ወደ 53.5 TFLOPS ስሌት ወይም 80 GB ማስታወሻ ካልደረሰ አነስተኛ GPU በቂ ሊሆን ይችላል።
CUDA compute capability 9.0 ምን የሶፍትዌር ተኳኋኝነት ይሰጣል?
Compute capability 9.0 ለNVIDIA Hopper ስነ-ህንፃ መመሪያዎችና ባህሪያት የሃርድዌር ድጋፍ እንዳለ ያመለክታል። አስቀድመው የተዋቀሩ የPyTorch/CUDA ቴምፕሌቶቻችን ያለ በእጅ የአሽከርካሪ ማዋቀር ይህንን ሃርድዌር ለመጠቀም ዝግጁ ሆነው ይመጣሉ።
በONIE ላይ ክፍያና የምሳሌ መዳረሻ እንዴት ይሰራል?
ምሳሌዎች ለኪራይዎ ጊዜ በሰዓት ክፍያ ይከፈላቸዋል። ከተሰማሩ በኋላ በSSH መዳረሻ ወደ አካባቢዎ በቀጥታ መገናኘት ወይም እንደ ComfyUI ያሉ አስቀድመው የተጫኑ መሳሪያዎችን መጠቀም ይችላሉ።
H100 SXMን በሰዓት ይከራዩ
መለያ ይፍጠሩ፣ ውቅር ይምረጡ እና በSSH ያገናኙ። GPUውን ሲሰርዙ ክፍያው ይቆማል።
H100 SXM ይከራዩ