为什么选择 Potato？

自托管，免费: LangSmith、Galileo 和 Encord 把自托管本身放在了企业合同之后。Labelbox 没有任何自托管版本的文档。

全部功能，无付费门槛: Label Studio 的免费版根本不含任何一致性指标；标准答案、仪表盘和 LLM 预标注的起价是每用户每月 99 美元。CVAT 官方将质量控制界面列为付费功能。Supervisely 把一致性分析放在每月 199 欧元的套餐里。

语料与智能体轨迹用同一个工具: 这里所有的智能体评测平台都只能处理轨迹。没有一个能给语料标注情感、标出命名实体，或者发放一份问卷。

可标注的多智能体交互图: 有几款工具会画出智能体交互图，但它们都只是只读的调试视图。在 Potato 里，智能体和它们之间的交接本身就是人来标注的对象。

由人标注的失败归因: Galileo 用 LLM 推断交接失败，Labelbox 给轨迹步骤打分。两者都没有收集用来检验这些推断的人工标准答案。

机遇校正一致性（κ、α）: 其他工具把一致性算作重叠百分比、IoU 或多数投票。Prodigy 确实提供 Krippendorff α 和 Gwet AC2，但它没有免费版。Langfuse 计算的 Cohen κ 是一位标注者对一个评审模型，而不是一组标注者之间。

SFT、DPO 与过程奖励导出: 部分支持指只有 SFT 风格的 JSONL，没有偏好对或过程奖励格式。

托管标注团队: 我们没有。你得自带标注员，或者通过 Prolific 招募。如果你下个月就要 50000 条数据标完却没人干，Labelbox、Encord 和 Scale 卖这个，我们不卖。

云托管，无需运维: Potato 只能自托管。对一部分团队来说这正是意义所在，对另一些团队则是实实在在的成本。