跳到正文
热点事件持续更新

Simon Willison 发布 ttok 1.0,默认切换为 GPT-5/GPT-6 tokenizer

1 篇报道1 个报道来源6 小时前更新

先了解这件事

AI 综述

2026 年 10 月 9 日,Simon Willison 发布 ttok 1.0,将该工具的默认 tokenizer 从 GPT-4 切换至 GPT-5/GPT-6 系列。决策依据来自 William Liu 的实验:GPT-5.5、5.6 的 Sol/Terra/Luna 变体以及 GPT-6 的 Astra/Sol/Luna 变体,在 31 个测试样本上均报告 44,794 tokens,各变体结果完全一致;GPT-6 相比 GPT-5 阶段未引入输入计数变化,因此可直接作为新的默认 tokenizer 使用,无需担心计数偏差。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. Simon Willison
    ttok 1.0 发布,将默认 tokenizer 切换至 GPT-5/GPT-6

    Simon Willison 发布 ttok 1.0,将默认 tokenizer 从 GPT-4 切换至 GPT-5/GPT-6 系列。该决策依据 William Liu 的实验:GPT-5.5、5.6 Sol/Terra/Luna 与 GPT-6 Astra/Sol/Luna 在 31 个测试样本上均报告 44,794 tokens,互相完全匹配,GPT-6 未引入输入计数变化。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。