Token计算器
精准计算文本Token数量，支持GPT-4、Claude、Gemini等不同模型的Tokenizer
计算器界面
交互式计算器即将上线
功能特点
- ✓ 支持OpenAI GPT-4o、GPT-4、GPT-3.5-turbo等全系列模型
- ✓ 支持Anthropic Claude 3.5 Sonnet、Claude 3 Opus、Claude 3 Haiku
- ✓ 支持Google Gemini Pro、Gemini Ultra等模型
- ✓ 实时显示Token数量、字符数、单词数
- ✓ 支持中英文混合文本计算
使用步骤
- 选择目标AI模型
- 粘贴或输入文本内容
- 查看Token数量统计结果
- 复制结果或导出报告
常见问题
什么是Token？
Token是AI模型处理文本的基本单位。一个Token可能是一个词、一个字符或一个子词。例如，英文单词"hello"通常是1个Token，中文汉字通常是1-2个Token。
为什么不同模型的Token计算方式不同？
不同AI厂商使用不同的Tokenizer算法。OpenAI使用tiktoken，Anthropic使用自己的Tokenizer，Google使用SentencePiece。这导致同一段文本在不同模型中的Token数量会有差异。
Token数量和费用有什么关系？
AI API通常按Token数量计费。输入Token和输出Token的价格可能不同。Token越多，API调用费用越高。
这个计算器准确吗？
准确率99%以上。我们使用各厂商官方Tokenizer库进行计算，结果与官方API一致。
支持批量计算吗？
支持。可以上传TXT文件批量计算，也支持API接口调用。