Simon Willison·· 9 小时前
ttok 1.0 发布,默认切换至 GPT-5/GPT-6 tokenizer
ttok 1.0
SI 导读
ttok 1.0 发布,将默认 tokenizer 从 GPT-4 切换为 GPT-5/GPT-6。William Liu 的实验显示,GPT-5.5 至 GPT-6 系列模型在 31 个测试用例中均报告 44,794 tokens,证实 GPT-6 未引入输入计数变化。
SI 评分17
来源:Simon Willison · simonwillison.net