GPU 租用平台怎麼選?七個評估指標完整指南 - 戰國策集團
365天全年無休服務專線 0800-003-191

GPU 租用平台怎麼選?七個評估指標與台灣行情完整指南

「GPU 租用平台」這個詞在 Google 上幾乎沒有認真寫過的中文內容——多數文章只回答「GPU 主機是什麼」或「多少錢」,卻沒有人講清楚「怎麼挑一個平台」這件事本身該看哪些指標。這篇不比價格,比的是評估架構:拿到一份報價單之後,你該追問哪七件事,才不會簽了約才發現規格跟想像的不一樣。

先講結論:台灣機房、規格透明到「幾張卡、什麼型號、多少記憶體」層級、最短租期與提前解約條款、SLA 賠償是否有實際條文、含不含電力頻寬——這五件事沒問清楚,價格再便宜都可能是陷阱。以下逐項拆開講。

指標一:機房在哪裡,決定的不只是延遲

GPU 租用平台常見的機房選項有台灣本地機房、香港、新加坡,或美西雲端服務商的資料中心。訓練型工作負載(跑一個晚上、幾天甚至幾週的批次任務)對延遲不敏感,機房在哪裡影響不大;但如果你的用途是高併發推理服務——也就是要把模型包成 API 給使用者即時呼叫——機房距離直接反映在使用者等待時間上。台灣使用者打到美西機房,一來一回的網路延遲就可能吃掉幾十毫秒,疊加模型本身的推論時間,體驗會明顯變差。

機房地點還牽涉法規與資安:金融、醫療、政府相關專案,資料是否能出境往往有明確規範,選到海外機房的平台,可能從一開始就不符合你的專案要求。租用前先確認清楚,比事後才發現要重新搬遷划算。

指標二:規格要問到「型號 + 記憶體 + 互連方式」,不是只看「幾張卡」

「一張 GPU」這句話資訊量太少。同樣講「一張卡」,可能是消費級的 RTX 5090,也可能是資料中心級的 H100 80GB HBM3;同樣講「八卡機」,用 NVLink 900GB/s 全互連的 SXM5 架構,跟用 PCIe 互連但沒有 NVLink 的機型,多卡協作效率可以差到數倍。評估平台時,至少要問清楚三件事:

  • GPU 型號與顯存規格——例如 H100 80GB、H800,或更高階的 H200(HBM 顯存 141GB)
  • 多卡互連方式——有沒有 NVLink,還是純 PCIe
  • 主機的 CPU 與記憶體配置——例如搭配 AMD EPYC 第五代處理器、96 核心、1024GB 記憶體的主機,跟陽春的消費級主機板,在資料前處理與 I/O 吞吐上表現完全不同

規格模糊的報價單,通常代表對方自己也講不清楚後台實際配置,這是一個危險訊號。

指標三:MIG 切分卡——用得到嗎,平台有沒有提供

如果你的用量沒有大到需要整張卡——例如只是跑推論服務、生圖,或做小規模實驗——多數平台不會告訴你,其實可以只租四分之一張卡。這是透過 NVIDIA 的 MIG(Multi-Instance GPU)技術把一張實體 GPU 切分成多個獨立算力區塊,每個區塊有自己的顯存與運算資源,彼此互不干擾。市場行情裡,MIG 1/4 卡(約 20GB 顯存)月租大約 NT$15,000 起,是輕量需求最划算的入手方式,但不是每個平台都提供這個選項——很多平台只賣整卡或整機,逼你為用不到的算力付錢。挑平台時,直接問「有沒有 GPU 切分卡方案」,是很快篩掉選項的方法。

指標四:合約條件——最短租期、解約金、含稅與否

GPU 租用平台的合約細節,常常是報價單上看不到、簽約前才會被提起的部分:

  • 最短租期——常見門檻是 3 個月,短於這個天數多半沒有月租優惠,只能走時租
  • 提前解約金——中途解約要不要賠錢、賠多少,是議約時容易被忽略的條款
  • 報價是否含稅——企業採購務必確認「含稅」還是「未稅」,兩者實際負擔可能差 5%
  • 電力與頻寬是否內含——月租費裡有沒有包含機房電力,以及基本的網路頻寬(例如 100Mb/s 雙向、可 boost 到 1Gb/s),或是另外計費

把這幾項列成清單,逐條對照每家平台的報價單,比只看「月租多少錢」一個數字準確得多。

指標五:SLA 是一句話,還是一份有賠償條文的文件

「我們保證 99.9% 可用率」這句話,如果合約裡沒有寫清楚「達不到會怎麼賠」,就只是行銷話術,不是承諾。正式的 SLA 應該包含:可用率的計算方式、故障通報與回應時間、賠償機制(通常是依停機時數退還部分月租)。評估平台時,直接要求看 SLA 條文全文,而不是聽業務口頭保證。

七個指標一次比較

指標 該問的問題 警訊
機房地點 台灣本地還是海外?延遲如何? 不主動說明機房位置
GPU 規格 型號、顯存、互連方式為何? 只講「高階顯卡」不講型號
切分方案 有沒有 MIG 切分卡選項? 只能整卡整機租用
合約條件 最短租期、解約金、含稅與否? 合約條款不願提前提供
SLA 有沒有具體賠償條文? 只有口頭保證,無書面條文
服務模式 自助式還是有工程團隊代管? 沒有中文技術支援管道
隱藏成本 頻寬、儲存、資料搬遷另外收費嗎? 報價單刻意不列附加費用
GPU 租用平台怎麼選七大評估指標示意圖

指標六:自助部署還是有人幫你搞定

平台的服務模式大致分兩種:自助式(self-service),你自己在後台選規格、刷卡、拿到帳號密碼自己裝環境;代管式(managed),平台的工程團隊協助環境部署、軟體安裝,甚至後續的監控與故障排除都由對方負責。兩者沒有絕對的好壞,差別在於你的團隊有沒有內部的維運人力。如果公司裡沒有專職的 MIS 或 DevOps,選一家願意協助部署、支援中文溝通的平台,省下的時間成本,往往比省下的月租費更值錢;如果團隊本身技術能力強、只是缺硬體,純自助式平台通常單價更低,適合這種情況。

指標七:報價單裡的「隱藏成本」怎麼揪出來

低價報價單常見的幾個陷阱:頻寬另計(基本方案給的頻寬很低,稍微上量就要加購)、儲存空間另計(模型檔案跟資料集動輒數百 GB,超出方案內建額度後每 GB 都要收費)、技術支援另計(基本方案只有工單系統,電話或即時支援要升級方案才有)、資料搬遷費(合約到期或要換平台時,把資料搬出來可能被收一筆可觀的出站費用)。拿到報價單時,直接請對方列出「這個價格之外,還有哪些情況會產生額外費用」,比自己猜測更有效率。

不同用途,適合的平台配置也不一樣

選平台前,先想清楚你的工作負載屬於哪一種:大規模訓練(70B 級模型全參數訓練,需要八卡叢集與 NVLink 全互連)、小規模微調(7B–13B 模型的 LoRA 或全參數微調,雙卡到四卡通常足夠)、高併發推理(要對外提供 API 服務,重視延遲與機房位置,可能需要多節點分散部署),還是個人研究自用(不追求速度,MIG 切分卡或單卡時租就能滿足)。同一份需求規格清單,拿去問三家不同平台,得到的建議差異,往往就是平台專業度的最直接體現。

三個常見情境,示範怎麼套用這七個指標

光看指標清單還是有點抽象,直接用三種常見的團隊需求走一遍:

情境一:AI 客服新創,要對外提供即時 API
這種用途最在意機房地點跟 SLA——使用者在等回應,延遲直接影響體驗,而服務一旦掛掉就是真金白銀的營收損失。優先選台灣本地機房、有書面 SLA 賠償條款的平台,規格上通常單卡或雙卡搭配 MIG 切分就夠應付初期流量,等用戶量成長再擴充,不需要一開始就租八卡叢集。

情境二:大學實驗室,做模型訓練研究
延遲不是重點,重點是合約彈性成本可預測性。研究計畫常有經費核銷的截止日,建議優先確認最短租期、能不能配合計畫期程調整,以及報價單是否含稅、方便編列預算。規格上依模型大小抓,7B 到 13B 的訓練通常雙卡到四卡足夠,不用一開始就衝八卡規格。

情境三:行銷代理商,批次生成大量圖像素材
這類工作負載是間歇性的——有案子的時候大量跑圖,沒案子的時候用量趨近於零。這種情境下,時租選項切分卡方案比長約更划算,不需要為了少數幾個尖峰月份綁一整年合約,平常淡季改用 MIG 切分卡維持基本產能即可。

台灣 GPU 租用平台的實際行情

以目前市場行情,H100 等級的 GPU 主機月租價格帶大致落在:MIG 1/4 卡約 NT$15,000、單卡(80GB)約 NT$50,000、雙卡約 NT$100,000、四卡約 NT$200,000、八卡約 NT$350,000,時租約 NT$120/小時。這個價格帶可以做為評估其他平台報價是否合理的基準——明顯偏離這個區間的報價,不論偏高或偏低,都值得多問一句「為什麼」。

常見問題

GPU租用平台跟AWS、GCP這類雲端服務商差在哪裡?

差別在計價模式跟彈性。雲端服務商的GPU執行個體是隨用隨付,開關很自由,但長期算下來單價偏高;台灣在地GPU租用平台多走月租或年約,單價明顯較低,只是彈性不如雲端隨開隨關。判斷標準很簡單,短期測試或用量忽高忽低選雲端,長期穩定跑訓練或推論服務選在地月租平台,通常更省錢,也方便問到中文技術支援。

GPU主機一定要簽長約才能租嗎?

不一定,多數平台都有時租選項,適合短期做POC驗證環境相容性。但時租換算成月費通常比月租貴不少,行情大約每小時NT$120起。建議先用時租跑一到兩週,確認驅動、框架版本都相容之後,再轉月租或年約,年約通常還能拿到更多折扣,最短租期常見門檻是3個月。

怎麼確認平台講的GPU規格是真的,不是灌水?

最直接的方法是要求對方提供實際系統資訊截圖,或在簽約前開放遠端登入跑nvidia-smi指令,直接看到GPU型號、顯存大小、是否有NVLink互連。正式簽約前的POC測試期就是驗證真偽的最佳時機,千萬別跳過。如果平台不願意提供這些資訊,或報價單上只寫「高階顯卡」而不講型號,這通常是警訊,代表對方自己後台配置也講不清楚。

GPU算力租用跟GPU主機租用是同一件事嗎?

本質上是同一件事,差別只在說法角度。算力租用強調你買到的是運算能力本身,主機租用則是從硬體設備的角度來說,兩者指的都是租一台配有GPU的伺服器來跑運算工作,例如模型訓練或推論。挑平台時不用糾結名詞,重點還是回到規格、機房、合約條件這幾項實際指標上去比較。

新創公司剛起步,適合租用GPU還是直接自購?

用量還在驗證階段、資金有限的新創,租用幾乎都是更划算的選擇,不用一次投入數十萬到數百萬買硬體,也省下機房、電力、維護的麻煩。等業務成長到用量穩定,能明確算出三年總持有成本比租用便宜,再考慮自購比較合理。戰國策集團的GPU主機方案支援單卡到多卡彈性升級,剛好符合這種從小規模開始、逐步擴充的成長路徑。

MIG切分卡是什麼,什麼情況適合用?

MIG是NVIDIA提供的技術,能把一張實體GPU切分成多個獨立算力區塊,各自有專屬顯存與運算資源,彼此互不干擾。如果你的用量不大,例如只是跑推論服務、生圖或小規模實驗,不需要整張卡,租MIG 1/4卡通常就夠用,市場行情月租約NT$15,000起,是最划算的入門方案。不是每個平台都提供切分卡選項,挑平台時直接問清楚有沒有這個方案,能很快篩掉只能整卡整機出租的選項。

GPU租用平台的機房地點重要嗎,該怎麼選?

重要程度取決於你的用途。跑訓練型批次任務對延遲不敏感,機房在台灣、香港或美西差異不大;但如果是對外提供即時API的推理服務,機房距離直接反映在使用者等待時間上,選台灣本地機房能明顯降低延遲。另外金融、醫療、政府相關專案常有資料不得出境的規範,選到海外機房可能一開始就不符合要求,租用前務必先問清楚機房實際位置。

租GPU主機常見的隱藏成本有哪些要注意?

最常被忽略的四項是頻寬另計、儲存空間另計、技術支援升級才有、以及合約到期後的資料搬遷出站費。基本方案給的頻寬額度通常偏低,模型檔案跟資料集動輒數百GB,超額後每GB都要收費,換平台時搬資料也可能被收一筆可觀費用。拿到報價單時,直接請對方列出這個價格之外還有哪些情況會產生額外費用,比自己事後才發現划算得多。

SLA寫99.9%可用率就代表有保障嗎?

不一定,如果合約裡沒有寫清楚達不到會怎麼賠,那句話就只是行銷用語,不是真正的承諾。正式的SLA應該包含可用率計算方式、故障通報與回應時間、以及具體的賠償機制,通常是依停機時數退還部分月租。評估平台時要直接索取SLA條文全文來看,而不是聽業務口頭保證,戰國策集團的GPU主機方案就提供99.9%的書面SLA條款,可以直接比對其他平台是否有同等級的白紙黑字承諾。

台灣GPU主機租用行情大概是多少錢?

以H100等級主機來看,目前市場行情大致是MIG 1/4卡月租約NT$15,000、單卡80GB約NT$50,000、雙卡約NT$100,000、四卡約NT$200,000、八卡約NT$350,000,時租約每小時NT$120。這個區間可以當作評估其他報價是否合理的基準,明顯偏高或偏低的報價都值得多問一句原因,例如是不是規格灌水或藏有其他隱藏費用。

延伸閱讀

戰國策 GPU 主機・戰國策 AI 伺服器

NVIDIA H100 GPU 主機(GPU Server)台灣機房直供:MIG 切分卡月租 NT$15,000 起、2 小時部署、99.9% SLA、24 小時中文支援。從單卡到八卡叢集,大規模訓練、小規模微調、高併發推理與個人研究自用,一次到位。

👉 查看 GPU 主機方案與即時報價:gpu.nss.com.tw
LINE:@119m|電話:0800-003-191

               

戰國策 AI-SEO 優化服務,保證進 Google 第一頁,並讓AI主動引用你的網站!現在提供免費 AI-SEO 網站健檢資安、SEO、AI 能見度完整報告。免費健檢我的網站

邀請你免費加入我們的LINE社群 : 【戰國策戰勝學院】,和一群真正想搞懂商業、提升營收的老闆一起成長!