ai-tokenizer — Agent Skill

A faster than tiktoken tokenizer with first-class support for Vercel's AI SDK.

npm 包：ai-tokenizer

安装命令：npm install ai-tokenizer

npm install ai-tokenizer

A faster than tiktoken tokenizer with first-class support for Vercel's AI SDK.

同类推荐

@usine/gateway @opencode-ai/models @tinycloud/courier
ai-tokenizer 是什么？

ai-tokenizer 是一款 Agent Skill（智能体技能包），为 Claude Code、Cursor 等 AI 助手提供标准化的技能扩展，一键安装即可使用。

如何安装 ai-tokenizer？

在终端中执行：npm install ai-tokenizer

ai-tokenizer 免费吗？

ai-tokenizer 为开源项目，基础功能免费使用。具体以官方公布的许可协议为准。