Simon Willison·· 2026-10-09AI 评分33
ttok 1.0 发布,默认 Tokenizer 切换至 GPT-5/GPT-6
ttok 1.0
AI 导读
Simon Willison 发布 ttok 1.0版本,将默认Tokenizer从GPT-4切换为GPT-5/GPT-6。William Liu的实验显示,GPT-5.5至GPT-6系列模型在31个测试用例中均报告44,794个token,证实两者Tokenizer一致。
来源:Simon Willison · simonwillison.net