跳到正文
热点事件持续更新

ttok 1.0 发布,默认 tokenizer 切换至 GPT-5/GPT-6 系列

1 篇报道1 个报道来源15 小时前更新

先了解这件事

AI 综述

ttok 此前发布 1.0 版本,并将默认 tokenizer 由 GPT-4 切换为 GPT-5 系列。最新报道显示,Simon Willison 发布了 ttok 1.0,进一步将默认 tokenizer 切换至 GPT-5/GPT-6 系列。他引用 William Liu 的实验,确认 GPT-5.5、5.6 Sol/Terra/Luna 与 GPT-6 Astra/Sol/Luna 共 7 个模型在 31 个测试样本上均输出 44,794 tokens,各模型 tokenizer 表现一致,因此被采纳为新默认。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. Simon Willison
    ttok 1.0 发布,默认 tokenizer 切换至 GPT-5/GPT-6

    Simon Willison 发布 ttok 1.0,将默认 tokenizer 由 GPT-4 切换至 GPT-5/GPT-6。他引用 William Liu 的实验,确认 GPT-5.5、5.6 Sol/Terra/Luna 与 GPT-6 Astra/Sol/Luna 共 7 个模型在 31 个测试样本上均输出 44,794 tokens,tokenizer 彼此一致。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。