跳過導航到主內容
Calnex LogoCalnex
AI 工具

AI Token 計數器

估算 GPT-4、GPT-3.5 和 Claude 的 token 數量和 API 費用。支援英文和 CJK 文字的精確 token 計數。

參數

基於模型分詞估算 token 數。

結果

預計代幣0

基於字元分析的近似令牌計數

其他結果 (5)
字元數0

Total characters (0 CJK, 0 non-CJK)

字數統計0
GPT-4 成本(輸入)$0.000000

$10.00 per 1M input tokens

GPT-3.5 Turbo 成本(輸入)$0.000000

$0.50 per 1M input tokens

克勞德十四行詩成本(輸入)$0.000000

$3.00 per 1M input tokens

點解揀 AI Token 計數器

AI 令牌計數器可估算文字中用於 GPT-4、GPT-3.5 Turbo 和 Claude Sonnet 等大型語言模型的令牌數量。它區分英文文字(每個標記約 4 個字元)和 CJK 字元(每個標記約 1.5 個字元)以提供更準確的估計,併計算每個模型的近似 API 成本。

  • ✓透過 CJK 字元偵測進行準確的標記估計
  • ✓GPT-4、GPT-3.5 和 Claude Sonnet 的即時成本計算
  • ✓字元和字數統計
  • ✓支援混合語言文本分析

使用步驟

  1. 1將提示、文件或對話文字貼到輸入區域。
  2. 2該工具會自動偵測 CJK 字元並套用不同的標記化比率。
  3. 3根據英語每個標記大約 4 個字元和 CJK 每個標記大約 1.5 個字元來檢查估計的標記計數。
  4. 4檢查每個受支援模型的估計 API 成本。
  5. 5使用結果來預算您的 API 使用情況或最佳化提示長度。

常見問題 (FAQ)

代幣估算的準確度如何?

對於英文文本,估計使用每個標記大約 4 個字元;對於 CJK 文本,每個標記使用大約 1.5 個字元。來自特定模型標記器(例如 GPT 的 tiktoken)的實際標記數量可能會存在 5-15% 的差異,但這為預算目的提供了可靠的近似值。

為什麼 CJK 字元的計數不同?

在大多數 LLM 分詞器中,中文、日文和韓文字元通常需要每個字元更多的標記,因為它們被編碼為多位元組 UTF-8 序列,並且在用於建立標記詞彙表的訓練資料中不太常見。

這些價格是最新的嗎?

使用的價格為 GPT-4,輸入代幣為 10/100 萬美元,GPT-3.5 Turbo,輸入代幣為 0.50 美元/100 萬美元,Claude Sonnet,輸入代幣為 3/100 萬美元。請務必查看官方 OpenAI 和 Anthropic 定價頁面,以了解最新的價格。

這也計算輸出令牌嗎?

不可以。此工具僅估計輸入(提示)標記。輸出令牌通常更昂貴,並且取決於模型響應的長度,而模型響應的長度無法提前預測。

我可以將其用於任何語言模型嗎?

雖然該工具顯示了特定模型的成本,但對於大多數基於 Transformer 的語言模型(包括 Llama、Gemini 和 Mistral)來說,標記估計本身是合理的近似值,因為它們使用類似的標記化策略。

權威參考資料

OpenAI Tokenizer

睇來源

OpenAI Pricing

睇來源

Anthropic Pricing

睇來源