ttok 0.4 发布:命令行统计 Token 的小工具更新

发布于

ttok 是一个用于统计 token 数量的命令行工具,底层使用 OpenAI 开源的 tiktoken 库。

该工具已有几年未更新,此次 0.4 版本主要包含以下变化:

  • 修复一个 Click 相关警告
  • 更新 CI 配置
  • 新增 --list-models 命令,用于列出可用模型

它可以配合 uvx 使用,例如统计文本文件中的 token 数量:

cat file.txt | uvx ttok

对于需要快速估算文本在大模型上下文中占用 token 数的开发者来说,这是一个轻量级的命令行选择。

浏览(1)
评论

请登录后发表观点

暂无数据