Skip to content
Potato

标注一切 — 文本、智能体,以及更多

Potato 是首个专为评估 AI 智能体而构建的标注平台。从任何框架导入追踪数据,交互式可视化智能体行为,并使用研究级标注方案进行评估——全部通过 YAML 配置完成。

入选于·HCOMP 2024(最佳演示奖)·EMNLP 2022

四步快速上手

从安装到标注,只需几分钟。

1.
pip install potato-annotation# 安装 Potato
2.
# Create your config.yaml# 配置您的任务
3.
potato start config.yaml# 启动服务器
4.
# Open localhost:8000# 开始标注!

标注所需的一切功能

为研究者和团队设计的强大功能。

智能体评估

从 12+ 智能体框架导入追踪数据,使用交互式步骤卡片显示进行可视化,并使用专门构建的标注方案进行评估。首个为智能体时代构建的标注工具。

20+ 种标注类型

单选、多选、李克特量表、文本片段、文本输入、数字、滑块、下拉选择、多项评分、成对比较、分诊、事件、共指消解、图像、音频、视频标注等。

AI 驱动

集成 OpenAI、Claude、Gemini 等大语言模型,提供智能提示、关键词高亮、标签建议、MACE 能力评估、选项高亮和多样性排序。

多媒体支持

支持带波形图的音频标注、带边界框和多边形的图像标注,以及带播放控件的视频标注。

主动学习

基于不确定性的采样策略优先标注最有价值的样本,最大化标注效率。

零代码配置

所有配置均通过 YAML 完成,无需编程即可创建复杂的标注界面。

适用于各个领域

文本、图像、音频或视频——Potato 全面覆盖。

自然语言处理
计算机视觉
音频与语音
对话式 AI
多模态
生物医学与社会科学
智能体评估

350+

浏览 350+ 种标注设计

来自社区的即用型配置方案。

准备好开始标注了吗?

加入全球使用 Potato 的研究者和团队。