Amazon Bedrock 定價
定價概觀
Amazon Bedrock 是一項全受管服務,可透過單一 API 提供各種高效能基礎模型 (FM) 選擇,並隨附建置具有安全性、隱私和負責任 AI 的生成式 AI 應用程式所需的廣泛功能。
使用 Amazon Bedrock 後,您將需支付模型推論和自訂費用。您有兩個定價計劃可供選擇進行推論:1.隨選和批次:此模式可讓您以依用量計費方式使用 FM,而無需作出任何以時間為基礎的期限承諾。2.佈建輸送量:此模式可讓您佈建足夠的輸送量來滿足應用程式的效能需求,以換取以時間為基礎的期限承諾。
定價模式
進階工具
定價詳細資訊
定價取決於模式、供應商和模型。請選擇模型供應商以查看詳細定價。
Amazon Bedrock 提供 Anthropic、Meta、Mistral AI 和 Amazon 等領先 AI 供應商提供的精選基礎模型 (FM),相較於隨需推論定價,能夠以低一半的價格獲得批次推論。請參閱此處的模型清單。
-
AI21 Labs
-
Amazon
-
Anthropic
-
Cohere
-
Meta Llama
-
Mistral AI
-
Stability AI
-
自訂模型匯入
-
AI21 Labs
-
AI21 Labs
隨需定價
AI21 Labs 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 Jamba 1.5 Large 0.002 USD 0.008 USD Jamba 1.5 Mini 0.0002 USD 0.0004 USD Jurassic-2 Mid 0.0125 USD 0.0125 USD Jurassic-2 Ultra 0.0188 USD 0.0188 USD Jamba-Instruct 0.0005 USD 0.0007 USD -
Amazon
-
Amazon
-
Anthropic
-
Anthropic
隨需和批次定價
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3.5 Sonnet**
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3.5 Haiku
0.001 USD
0.005 USD
0.0005 USD
0.0025 USD
Claude 3 Opus*
0.015 USD
0.075 USD
0.0075 USD
0.0375 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 2.1
0.008 USD
0.024 USD
無
無
Claude 2.0
0.008 USD
0.024 USD
無
無
Claude Instant
0.0008 USD
0.0024 USD
無
無
*目前可在美國西部 (奧勒岡) 區域使用 Claude 3 Opus **Claude 3.5 Sonnet 的價格適用於每個版本的 Claude 3.5 Sonnet (v1 和 v2) – Claude 3.5 Sonnet v2 目前在美國西部 (奧勒岡) 區域提供 區域:歐洲 (倫敦)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD 0.0075 USD Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD 0.000625 USD
區域:歐洲 (蘇黎世)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3.5 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:南美洲 (聖保羅)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:加拿大 (中部)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:亞太地區 (孟買)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:亞太地區 (雪梨)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:亞太地區 (東京)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude Instant
0.0008 USD
0.0024 USD
無
無
Claude 2.0/2.1
0.008 USD
0.024 USD
無
無
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
Claude 3.5 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
區域:亞太地區 (新加坡)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude Instant
0.0008 USD
0.0024 USD
0.0004 USD
0.0012 USD
Claude 2.0/2.1
0.008 USD
0.024 USD
0.004 USD
0.012 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
Claude 3.5 Sonnet
0.003 USD
0.015 USD
無
無
區域:歐洲 (巴黎)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
區域:歐洲 (法蘭克福)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude Instant
0.0008 USD
0.0024 USD
無
無
Claude 2.0/2.1
0.008 USD
0.024 USD
無
無
Claude 3 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3.5 Sonnet
0.003 USD
0.015 USD
0.0015 USD
0.0075 USD
Claude 3 Haiku
0.00025 USD
0.00125 USD
0.000125 USD
0.000625 USD
區域:亞太地區 (首爾)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3.5 Sonnet
0.003 USD
0.015 USD
無
無
Claude 3 Haiku
0.00025 USD
0.00125 USD
無
無
區域:美國東部 (俄亥俄)
Anthropic 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 每 1,000 個輸入字符的定價 (批次) 每 1,000 個輸出字符的定價 (批次) Claude 3.5 Sonnet
0.003 USD
0.015 USD
無
無
Claude 3 Haiku
0.00025 USD
0.00125 USD
無
無
佈建輸送量定價
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
Anthropic 模型 每個模型每小時價格,
無承諾每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾 Claude Instant
44.00 USD 39.60 USD
22.00 USD
Claude 2.0/2.1
70.00 USD 63.00 USD
35.00 USD
Anthropic 模型 每個模型每小時價格,
無承諾每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾 Claude Instant
44.00 USD 39.60 USD
22.00 USD
Claude 2.0/2.1
70.00 USD 63.00 USD
35.00 USD
區域:亞太區域 (東京)
Anthropic 模型 每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾 Claude Instant
53.00 USD
29.00 USD
Claude 2.0/2.1
86.00 USD
48.00 USD
區域:歐洲 (法蘭克福)
Anthropic 模型 每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾 Claude Instant
49.00 USD
27.00 USD
Claude 2.0/2.1
79.00 USD
44.00 USD
請聯絡您的 AWS 客戶團隊,以取得有關模型單元的更多詳細資訊。
-
Cohere
-
Cohere
隨需定價
Cohere 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 Command 0.0015 USD 0.0020 USD Command-Light 0.0003 USD 0.0006 USD Command R+ 0.0030 USD 0.0150 USD Command R 0.0005 USD 0.0015 USD Embed – 英文 0.0001 USD 不適用 Embed – 多語言 0.0001 USD 不適用 自訂定價 (微調)
Cohere 模型 訓練 1,000 個字符的定價 每月儲存每個自訂模型的定價 根據自訂模型每小時每模型單元推斷的定價 (無承諾佈建輸送量定價) Cohere Command
0.004 USD
1.95 USD
49.50 USD
Cohere Command-Light 0.001 USD 1.95 USD
8.56 USD *訓練的字符總數 = 訓練資料語料庫中的字符數量 x 時期數
佈建輸送量定價
Cohere 模型 每個模型每小時價格,
無承諾每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾
Cohere Command
49.50 USD 39.60 USD
23.77 USD
Cohere Command – Light 8.56 USD 6.85 USD
4.11 USD Embed – 英文 7.12 USD 6.76 USD
6.41 USD Embed – 多語言 7.12 USD 6.76 USD
6.41 USD 請聯絡您的 AWS 客戶或銷售團隊,以取得有關模型單元的更多詳細資訊。
-
Meta Llama
-
Meta Llama
Llama 3.2
隨需和批次定價
Llama 3.1
隨需和批次定價
模型自訂定價 (微調)
佈建輸送量定價
Llama 3
隨需定價
Llama 2
隨需定價
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
Meta 模型 每 1,000 個輸入字符的定價 每 1,000 個輸出字符的定價 Llama 2 Chat (130 億)
0.00075 USD
0.001 USD
Llama 2 Chat (700 億) 0.00195 USD
0.00256 USD 模型自訂定價 (微調)
Meta 模型 訓練 1,000 個字符的定價 每月儲存每個自訂模型* 的定價 根據自訂模型每小時 1 個模型單元推斷的定價 (無承諾佈建輸送量定價) Llama 2 預先訓練 (130 億)
0.00149 USD
1.95 USD
23.50 USD
Llama 2 預先訓練 (700 億) 0.00799 USD
1.95 USD 23.50 USD *自訂模型儲存 = 1.95 USD
佈建輸送量定價
Meta 模型 每個模型單元每小時定價,1 個月承諾 每個模型單元每小時定價,6 個月承諾 Llama 2 預先訓練及 Chat (130 億)
21.18 USD
13.08 USD
Llama 2 預先訓練 (700 億) 21.18 USD
13.08 USD *Llama 2 預先訓練模型僅在自訂後的佈建輸送量中可用。
請聯絡您的 AWS 客戶或銷售團隊,以取得有關模型單元的更多詳細資訊。
-
Mistral AI
-
Mistral AI
-
Stability AI
-
Stability AI
隨需定價
Stability AI 模型 每張生成影像的價格 Stable Image Core 0.04 USD SD3 Large 0.08 USD Stable Image Ultra 0.14 USD Stability AI 提供的上一代影像模型依影像定價,具體取決於步驟數和影像解析度。
Stability AI 模型 影像解析度 生成每張標準品質影像的定價 (<=50 個步驟) 生成每張標準品質影像的定價 (> 50 個步驟) SDXL 1.0 最多 1024 x 1024 0.04 USD 0.08 USD 佈建輸送量定價
Stability AI 模型 每個模型單元每小時定價,1 個月承諾* 每個模型單元每小時定價,6 個月承諾* SDXL 1.0
49.86 USD
46.18 USD
*包括基本和自訂模型的推論
請聯絡您的 AWS 客戶或銷售團隊,以取得有關模型單元的更多詳細資訊。
目前,Amazon Bedrock 上的 Stability AI 模型不支援模型自訂 (微調)。
-
自訂模型匯入
-
自訂模型匯入
-
Llama
-
多模態 Llama
-
Mistral
-
Mixtral
-
Flan
-
Llama
-
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
自訂模型單位版本 v1.0 每個自訂模型單元每分鐘的價格* 0.0785 USD 每個自訂模型單元每月儲存成本 1.95 USD 託管模型所需的自訂模型單元取決於多種因素,尤其是模型架構、模型參數計數和關聯內容長度。所需自訂模型單元的準確數量將在匯入時確定。做為參考,Llama 3.1 8B 128K 模型需要 2 個自訂模型單元,Llama 3.1 70B 128k 模型需要 8 個自訂模型單元。 *以 5 分鐘時段計費 -
多模態 Llama
-
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
自訂模型單位版本 v1.0 每個自訂模型單元每分鐘的價格* 0.0785 USD 每個自訂模型單元每月儲存成本 1.95 USD 託管模型所需的自訂模型單元取決於多種因素,尤其是模型架構、模型參數計數和關聯內容長度。所需自訂模型單元的準確數量將在匯入時確定。做為參考,Llama 3.2 11B 128K 模型需要 4 個自訂模型單元。 *以 5 分鐘時段計費 -
Mistral
-
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
自訂模型單位版本 v1.0 每個自訂模型單元每分鐘的價格* 0.0785 USD 每個自訂模型單元每月儲存成本 1.95 USD 託管模型所需的自訂模型單元取決於多種因素,尤其是模型架構、模型參數計數和關聯內容長度。所需自訂模型單元的準確數量將在匯入時確定。做為參考,Mistral 7B 32K 模型需要 1 個自訂模型單元。 *以 5 分鐘時段計費 -
Mixtral
-
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
自訂模型單位版本 v1.0 每個自訂模型單元每分鐘的價格* 0.0785 USD 每個自訂模型單元每月儲存成本 1.95 USD 託管模型所需的自訂模型單元取決於多種因素,尤其是模型架構、模型參數計數和關聯內容長度。所需自訂模型單元的準確數量將在匯入時確定。做為參考,Mixtral 8x7B 32K 模型需要 4 個自訂模型單元。 *以 5 分鐘時段計費 -
Flan
-
區域:美國東部 (維吉尼亞北部) 及美國西部 (奧勒岡)
自訂模型單位版本 v1.0 每個自訂模型單元每分鐘的價格* 0.0785 USD 每個自訂模型單元每月儲存成本 1.95 USD 託管模型所需的自訂模型單元取決於多種因素,尤其是模型架構、模型參數計數和關聯內容長度。所需自訂模型單元的準確數量將在匯入時確定。做為參考,Flan-T5 XL 512 模型需要 1 個自訂模型單元。 *以 5 分鐘時段計費
隨需推論定價:
從第一次成功調用開始,模型副本處於作用中期間,系統會以 5 分鐘時段計費。每個模型副本的最大輸送量和並行限制取決於輸入/輸出權杖組合、硬體類型、模型大小、架構、推論最佳化等因素,並在模型匯入工作流程期間確定。Bedrock 會視乎您的用量模式自動調整模型副本數目。如果在 5 分鐘期間內沒有調用,Bedrock 會縮減規模至零,並在您調用模型時重新擴展。重新擴展備份時,視乎機型大小,您可能會遇到冷啟動持續時間 (數十秒)。如果您的推論磁碟區持續超過單一模型副本的並行限制,Bedrock 也會擴展模型副本數目。注意:每個帳戶每個匯入模型預設最多可透過 Service Quotas 增加 3 個模型副本。
-
定價進階工具 (詳細資訊)
-
Amazon Bedrock 防護機制
-
模型評估
-
Amazon Bedrock 防護機制
-
Amazon Bedrock 防護機制
防護機制政策*
每 1000 個文字單元的價格**
內容過濾器
0.75 USD
拒絕主題
1 USD
情境依據檢查***
0.1 USD
敏感資訊過濾器 (個人身份識別資訊 (Personally Identifiable Information, PII))
0.1 USD
敏感資訊過濾器 (標準表達式)
免費
文字過濾器
免費
隨需定價
* 每個防護機制政策皆為選用,可以根據您的應用程式需求啟用。將根據防護機制中使用的政策類型計費。例如,如果設定了內容過濾器和拒絕主題防護機制,則僅會收取這兩個政策的費用,而不會收取與敏感資訊過濾器相關的費用。
** 一個文字單元最多可包含 1000 個字元。如果文字輸入超過 1000 個字元,則會視為多個文字單元處理,每個單元將包含至多 1000 個字元。例如,如果文字輸入包含 5600 個字元,則將收取 6 個文字單元的費用。***情境依據檢查使用參考來源和查詢,來判斷模型回應是否以來源為依據並且與查詢相關。計費的文字單位總數依據來源、查詢和模型回應相結合的所有字元來計算。
防護機制不支援影像和嵌入。
-
模型評估
-
模型評估
透過您選擇的模型進行推論需要收取模型評估費用。自動生成的演算法分數為免費提供。對於您自帶工作團隊的人工評估,您需要支付評估中的模型推論費用,以及每完成一項人工任務 0.21 USD 的費用。
型號
每 1,000 個輸入字符的定價
每 1,000 個輸出字符的定價
每項人工任務的價格
選擇用於評估的模型
根據選擇的模型
根據選擇的模型
0.21 USD
定價範例
-
AI21 Labs
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 AI21 的 Jurassic-2 Mid 模型將輸入文字的 10,000 個字符輸入結果,總結為 2000 個字符的輸出結果。
產生的總成本 = 10,000 個字符/1000 * 0.0125 USD + 2000 個字符/1000 * 0.0125 USD = 0.15 USD
-
Amazon
隨需定價
應用程式開發人員針對 Amazon Bedrock 每小時發出下列 API 呼叫:要求 Amazon Titan Text Lite 模型將輸入文字的 2000 個字符輸入結果,總結為 1000 個字符的輸出結果。
每小時產生的總成本 = 2000 個字符/1000 * 0.0003 USD + 1000 個字符/1000 * 0.0004 USD = 0.001 USD。
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 Amazon Titan 影像產生器模型產生 1000 個 1024 x 1024 大小的標準品質映像。
產生的總成本 = 1000 個映像 * 每個映像 0.01 USD = 10 USD
自訂 (微調和持續預先訓練) 定價
應用程式開發人員使用 1000 個影像/文字配對自訂 Amazon Titan 影像產生模型。訓練後,開發人員會使用自訂模型佈建輸送量 1 小時來評估模型的效能。微調的模型會儲存 1 個月。評估後,開發人員會使用佈建輸送量 (1 個月使用期) 來託管自訂模型。
每月微調成本為:微調訓練 (0.005 * 500 * 64 USD),其中 0.005 USD 是每張看到之影像的定價,500 是步驟數,64 是批次大小 + 每月自訂模型儲存 (1.95 USD) + 1 小時自訂模型推論 (21 USD) = 160 + 1.95 + 21 USD = 182.95 USD
佈建輸送量定價
應用程式開發人員購買兩個 Amazon Titan Text Express 模型單元,且其文字摘要使用案例的期限為 1 個月。
每月產生的總成本 = 2 個模型單元 * 18.40 USD/小時 * 24 小時 * 31 天 = 27,379.20 USD
應用程式開發人員購買一個基礎 Amazon Titan 影像產生器模型的模型單元,且使用期限為 1 個月。
產生的總成本 = 1 個模型單元 * 16.20 USD * 24 小時 * 31 天 = 12,052.80 USD
-
Anthropic
隨需定價
應用程式開發人員針對美國西部 (奧勒岡) 地區的 Amazon Bedrock 發出下列 API 呼叫:要求 Anthropic 的 Claude 模型將輸入文字的 11,000 個字符輸入結果,總結為 4000 個字符的輸出結果。
產生的總成本 = 11,000 個字符/1000 * 0.008 USD + 4000 個字符/1000 * 0.024 USD = 0.088 USD + 0.096 USD = 0.184 USD
佈建輸送量定價
應用程式開發人員在美國西部 (奧勒岡) 地區購買一個 Anthropic Claude Instant 的模型單元:
每月產生的總成本 = 1 個模型單元 * 39.60 USD * 24 小時 * 31 天 = 29,462.40 USD
-
Cohere
隨需定價
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 Cohere 的 Command 模型將輸入文字的 6000 個字符輸入結果,總結為 2000 個字符的輸出結果。
產生的總成本 = 6000 個字符/1,000 * 0.0015 USD + 2000 個字符/1,000 * 0.0020 USD = 0.013 USD
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 Cohere 的 Command - Light 模型將輸入文字的 6000 個字符輸入結果,總結為 2000 個字符的輸出結果。
產生的總成本 = 6000 個字符/1000 * 0.0003 USD + 2000 個字符/1000 * 0.0006 USD = 0.003 USD
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 Cohere 的 Embed English 或 Embed Multilingual 模型產生 10,000 個字符輸入結果的嵌入。
產生的總成本 = 10,000 個字符/1000 * 0.0001 USD = 0.001 USD
自訂 (微調) 定價
應用程式開發人員使用 1000 個資料字符自訂 Cohere Command 模型。訓練後,使用自訂模型佈建輸送量 1 小時來評估模型的效能。微調的模型會儲存 1 個月。評估後,開發人員會使用佈建輸送量 (1 個月使用期) 來託管自訂模型。
微調每月產生的成本為:微調訓練 (0.004 USD * 1000) + 每月自訂模型儲存 (1.95 USD) + 1 小時自訂模型推論 (49.50 USD) = 55.45 USD
自訂模型的佈建輸送量 (1 個月使用期) 產生的每月成本 = 39.60 USD
佈建輸送量定價
應用程式開發人員購買一個 Cohere Command 模型單元,且其文字摘要使用案例的期限為 1 個月。
每月產生的總成本 = 1 個模型單元 * 39.60 USD * 24 小時 * 31 天 = 29,462.40 USD
-
Meta Llama
隨需定價
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 Meta 的 Llama 2 Chat (130 億) 模型將輸入文字的 2000 個字符輸入結果,總結為 500 個字符的輸出結果。
產生的總成本 = 2000 個字符/1000 * 0.00075 USD + 500 個字符/1000 * 0.001 USD = 0.002 USD
自訂 (微調) 定價
應用程式開發人員使用 1000 個資料字符自訂 Llama 2 預先訓練 (700 億) 模型。訓練後,使用自訂模型佈建輸送量 1 小時來評估模型的效能。微調的模型會儲存 1 個月。評估後,開發人員會使用佈建輸送量 (1 個月使用期) 來託管自訂模型。
微調每月產生的成本為:微調訓練 (0.00799 USD * 1000) + 每月自訂模型儲存 (1.95 USD) + 1 小時自訂模型推論 (23.50 USD) = 33.44 USD
自訂模型的佈建輸送量 (1 個月使用期) 產生的每月成本 = 21.18 USD
佈建輸送量定價
應用程式開發人員購買一個 Meta Llama 2 模型單元,且其文字摘要使用案例的期限為 1 個月。
每月產生的總成本為 1 個模型單元 * 21.18 USD * 24 小時 * 31 天 = 15,757.92 USD
-
Mistral AI
隨需定價
應用程式開發人員針對 Amazon Bedrock 每小時發出下列 API 呼叫:要求 Mistral 7B 模型將輸入文字的 2000 個字符輸入結果,總結為 1000 個字符的輸出結果。
每小時產生的總成本 = 2000 個字符/1000 * 0.00015 USD + 1000 個字符/1000 * 0.0002 USD = 0.0005 USD
應用程式開發人員針對 Amazon Bedrock 每小時發出下列 API 呼叫:要求 Mixtral 8x7B 模型將輸入文字的 2000 個字符輸入結果,總結為 1000 個字符的輸出結果。
每小時產生的總成本 = 2000 個字符/1000 * 0.00045 USD + 1000 個字符/1000 * 0.0007 USD = 0.0016 USD
應用程式開發人員針對 Amazon Bedrock 每小時發出下列 API 呼叫:要求 Mistral 大型模型將輸入文字的 2000 個字符輸入結果,總結為 1000 個字符的輸出結果。
每小時產生的總成本 = 2000 個字符/1000 * 0.008 USD + 1000 個字符/1000 * 0.024 USD = 0.04 USD
-
Stability AI
隨需定價
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 SDXL 模型產生 512 x 512 大小、步長為 70 的映像 (高品質)。
產生的總成本 = 1 個映像 * 每個映像 0.036 USD = 0.036 USD
應用程式開發人員針對 Amazon Bedrock 發出下列 API 呼叫:要求 SDXL 1.0 模型產生 1024 x 1024 大小、步長為 70 的映像 (高品質)。
產生的總成本 = 1 個映像 * 每個映像 0.08 USD = 0.08 USD
佈建輸送量定價
應用程式開發人員購買一個 SDXL 1.0 模型單元,且使用期為 1 個月。
產生的總成本 = 1 * 49.86 USD * 24 小時 * 31 天 = 37,095.84 USD
-
模型評估
模型評估範例 1︰
隨需定價
應用程式開發人員在美國東部 (維吉尼亞北部) AWS 區域使用 Anthropic Claude 2.1 和 Anthropic Claude Instant,提交資料集進行人工模型評估。資料集包含 50 個提示,開發人員需要 1 名工作者對每個提示回應集進行評分 (可在建立評估任務時設定為「每個提示的工作者」參數)。
此評估任務中將有 50 項任務 (每位工作者每個提示回應組為 1 項任務)。50 個提示共計為 5000 個輸入字符,相關的回應共計 15000 個字符 (使用 Anthropic Claude Instant) 和 20000 個字符 (使用 Anthropic Claude 2.1)。
此模型評估任務會產生下列費用:項目 輸入字符數 每 1,000 個輸入字符的定價 輸入成本 輸出字符數 每 1,000 個輸出字符的定價 輸出成本 人工任務數目 每項人工任務的價格 人工任務的成本 總計 Claude Instant Inference 5000 0.0008 USD 0.004 USD 15,000 0.0024 USD 0.036 USD 0.04 USD Claude 2.1 Inference 5000 0.008 USD 0.04 USD 20,000 0.024 USD 0.48 USD 0.52 USD 人工任務 50 0.21 USD 10.50 USD 10.50 USD 總計 11.06 USD 模型評估範例 2︰
隨需定價
應用程式開發人員在美國東部 (維吉尼亞北部) AWS 區域使用 Anthropic Claude 2.1 和 Anthropic Claude Instant,提交資料集進行人工模型評估。
資料集包含 50 個提示,開發人員需要 2 名工作者對每個提示回應集進行評分 (可在建立評估任務時設定為「每個提示的工作者」參數)。此評估任務中將有 100 項任務 (每位工作者每個提示回應組為 1 項任務:2 個工作者 x 50 個快速回應集 = 100 個人工任務)。
50 個提示共計為 5000 個輸入字符,相關的回應共計 15000 個字符 (使用 Anthropic Claude Instant) 和 20000 個字符 (使用 Anthropic Claude 2.1)。
此模型評估任務會產生下列費用:
項目 輸入字符數 每 1,000 個輸入字符的定價 輸入成本 輸出字符數 每 1,000 個輸出字符的定價 輸出成本 人工任務數目 每項人工任務的價格 人工任務的成本 總計 Claude Instant Inference 5000 0.0008 USD 0.0040 USD 15000 0.0024 USD 0.036 USD 0.04 USD Claude 2.1 Inference 5000 0.008 USD 0.0400 USD 20,000 0.024 USD 0.48 USD 0.52 USD 人工任務 100 0.21 USD 21.00 USD 21.00 USD 總計 21.56 USD -
Amazon Bedrock 防護機制
範例 1:客戶支援聊天機器人
一名應用程式開發人員建立了一個客戶支援聊天機器人,並使用內容過濾器封鎖有害內容和拒絕主題,以過濾不想要的查詢和回應。
聊天機器人每小時提供 1000 個用戶查詢。每個使用者查詢的平均輸入長度為 200 個字元,並接收 1500 個字元的 FM 回應。
每個 200 個字元的使用者查詢對應於 1 個文字單元。
每個 1500 個字元的 FM 回應對應於 2 個文字單元。
每小時處理的文字單元 = (1 + 2) * 1000 個查詢 = 3000 個文字單元
內容過濾器和拒絕主題每小時產生的總成本 = 3000 * (0.75 USD + 1.00 USD) /1000 = 5.25 USD範例 2:呼叫中心轉錄摘要
一名應用程式開發人員建立了一個應用程式,以彙總使用者與客服人員之間的聊天記錄。它使用敏感信息過濾器編輯 10,000 個對話的生成摘要中的個人身分識別資訊 (PII)。
每個生成的摘要平均有 3500 個字元,對應於 4 個文字單元。
總結 10,000 次對話所產生的總成本 = 10000 * 4 * (0.1/1000 USD) = 4 USD項目 輸入字符數 每 1,000 個輸入字符的定價 輸入成本 輸出字符數 每 1,000 個輸出字符的定價 輸出成本 人工任務數目 每項人工任務的價格 人工任務的成本 總計 Claude Instant Inference 5000 0.0008 USD 0.004 USD 15,000 0.0024 USD 0.036 USD 0.04 USD Claude 2.1 Inference 5000 0.008 USD 0.04 USD 20,000 0.024 USD 0.48 USD 0.52 USD 人工任務 100 0.21 USD 21.00 USD 21.00 USD 總計 21.56 USD -
自訂模型匯入
定價範例:應用程式開發人員匯入自訂的 Llama 3.1 類型模型,大小採用 8B 參數,在 us-east-1 區域的序列長度為 128K 並在 1 個月之後刪除模型。這需要 2 個自訂模型單元。因此,每分鐘價格將為 0.1570 USD,因為需要 2 個自訂模型單元。2 個自訂模型單元的模型儲存成本為每月 3.90 USD。
匯入模型無需費用。第一次成功調用為上午 8:03,此時計量開始。5 分鐘計量時段為上午 8:03 至上午 8:07;上午 8:07 至上午 8:11 等。如果在任何 5 分鐘期間至少有一次調用,該時段將視為作用中進行計費。如果在上午 8:07 至上午 8:11 之間沒有調用,計量將於上午 8:11 停止。在這種情況下,如下所示計費:0.1570 USD * 5 分鐘 * 3 個五分鐘時段 = 2.355 USD。