实测测评 · 免 key 零样本分类
classifier.dev 实测:免 key 的零样本分类,底层跑的就是 Jev
零样本文本分类这件事,过去要么自己微调一个 BERT,要么扔给大模型让它"只回 JSON"——前者重,后者贵还爱抽风。 classifier.dev 走了一条更省事的路:一个 免 API key、免账号、免费 的 HTTP 接口,你给"标签集合 + 文本",它回"哪个标签最合适 + 置信度"。最妙的是它底层跑的就是 TypeSafe 的 Jev(直播实测返回 jev-1.13.0)。换句话说,想白嫖 Jev 的能力又不想走 waitlist,这个类比是最近的门。
一句话定位
classifier.dev = Jev 的免 key 免费封装:零样本分类即开即用,底层模型 jev-1.13.0 已直播证实跑得动、够快。但 classifier.dev 只暴露"分类"这一种形态;要 Choice/Score/Noul 全原语、自己控 key、上 Vercel Gateway,还是得直接用 Jev API(见同站的 Jev 测评)。
直播实测数据(2026-09-19,真实请求)
| 场景 | 输入 | 返回 | 备注 |
|---|---|---|---|
| 垃圾邮件 | "Win a free iPhone now click here" | spam | GET 直出标签 |
| 工单路由 | "the checkout button does nothing when clicked" | bug(confidence 1.0) | POST 带 scores |
| 情感 | "I love this product it saved me hours" | positive | — |
| 主题 | "The new CPU beats all benchmarks" | tech | — |
| 批量 3 条 | login crash / great support / add dark mode | bug / praise / feature(均 1.0) | 总耗时 161ms |
| 含糊句 + smart tier | "maybe we should look into it later" | neutral(0.96) | 二次复核生效 |
| 中文 | "这个产品真的帮了大忙" | 正面 | 中文可用 |
延迟:服务器算力 143–307ms / 请求;批量并行。我这边墙钟 2–3s 是沙箱→美西的 RTT,不是算力瓶颈。模型字段实测为 jev-1.13.0。
怎么用
极简 GET,curl 即通:
curl https://classifier.dev/spam,not+spam/Win+a+free+iPhone
# → spam
完整 POST(拿置信度与分布):
curl -X POST https://classifier.dev -H "Content-Type: application/json" \
-d '{"input":"the checkout button does nothing","labels":["bug","feature","praise"]}'
# → {"label":"bug","confidence":1,"scores":{"bug":1,"feature":0,"praise":0},"model":"jev-1.13.0","ms":307}
批量一次千条:{"inputs":[...最多1000],"labels":[...]}。另有 smart tier(对置信度低的项二次复核,官方称 AG News 87.5% → 90.0%)、npm CLI classifier-dev、MCP server、npx skills add https://classifier.dev、openapi.json、llms.txt 都已就位。
适用场景
- Agent 流水线的上游过滤器:海量文本 / 日志 / 流先分类,只把高信号片段喂给贵的大模型,省 context window;
- 路由 / 分流:工单分派、意图识别、内容审核预筛;
- CI / 本地脚本:零凭据,直接塞进 pipeline,不用管密钥。
边界 / 坑
- 只能"在给定标签集里选一个",不能自由写文本——不是 LLM 替代品,是 LLM 的"判断前置";
- 中文可用但语料偏英,中文细粒度分类建议自测;
- 分类质量天花板 = Jev 小模型本身,复杂语义别指望它;
- 免费服务,SLA / 稳定性未承诺;生产关键路径务必加兜底层。
对比
| 维度 | 调 GPT/Claude 做分类 | classifier.dev | Jev 原版 |
|---|---|---|---|
| API key | 要 | 不要 | 要(早期访问) |
| 成本 | 高 | 免费 | $0.042 / 1M 输入 token |
| 延迟 | 秒级 | 亚秒(实测 <307ms) | 70–500ms |
| 输出 | 文本需解析 | 结构化概率 | 结构化概率 |
| 批量 / 管道 | 弱 | 强(CLI/管道/千条) | 强(SDK) |
评分与结论
易用性 ⭐⭐⭐⭐⭐(curl 即通,零接入成本)|性价比 ⭐⭐⭐⭐⭐(免费 + 免 key)
能力上限 ⭐⭐⭐(受限于小模型 + 零样本)|生产就绪 ⭐⭐⭐(免费无 SLA,需兜底)
结论:做"Agent / 数据流水线里的廉价判断层"非常香,尤其 免 key 这点把接入成本打到零。但它本质是 Jev 的"阉割友好版"——要原生能力、自己控 key、上 Vercel Gateway,还是得直接用 Jev。
能力上限 ⭐⭐⭐(受限于小模型 + 零样本)|生产就绪 ⭐⭐⭐(免费无 SLA,需兜底)
结论:做"Agent / 数据流水线里的廉价判断层"非常香,尤其 免 key 这点把接入成本打到零。但它本质是 Jev 的"阉割友好版"——要原生能力、自己控 key、上 Vercel Gateway,还是得直接用 Jev。