Skip to content
Potato annotation tool

무엇이든 주석 처리하세요 — 텍스트, 에이전트, 그 이상

Potato는 AI 에이전트 평가를 위해 처음부터 설계된 최초의 주석 플랫폼입니다. 어떤 프레임워크의 트레이스든 가져오고, 에이전트 동작을 대화형으로 시각화하며, 연구 수준의 주석 스키마로 평가할 수 있습니다. 모두 YAML 설정으로 처리됩니다.

소개된 곳·HCOMP 2024 (최우수 데모)·EMNLP 2022

4단계로 시작하기

설치에서 주석 작업까지 몇 분이면 됩니다.

1.
pip install potato-annotation
# Potato 설치
2.
# Create your config.yaml
# 작업 설정
3.
potato start config.yaml
# 서버 실행
4.
# Open localhost:8000
# 주석 시작!

주석 작업에 필요한 모든 것

연구자와 팀을 위해 설계된 강력한 기능을 제공합니다.

에이전트 평가

diff 렌더링으로 코딩 에이전트를 평가하고, PRM 학습 데이터를 수집하며, 웹 에이전트 트레이스를 검토하고, 라이브 에이전트를 실시간으로 관찰하며, GitHub PR 방식의 코드 리뷰를 실행합니다. 모두 YAML로 가능합니다.

30종 이상의 주석 유형

라디오, 다중 선택, 리커트, 슬라이더, 텍스트, 스팬, 최선-최악 척도, 쌍대 비교, 숫자, 선택, 다중 평가, 단순 표시, 비디오, 이미지, 오디오, 바운딩 박스, 폴리곤, 계층형, 발화별 대화, 이벤트, 분류 체계 주석을 지원합니다.

AI 기반

OpenAI, Claude, Gemini와의 LLM 연동으로 지능형 힌트, 키워드 강조, 레이블 제안, MACE 역량 추정, 옵션 강조, 다양성 정렬을 제공합니다.

멀티미디어 지원

파형으로 오디오를, 바운딩 박스와 폴리곤으로 이미지를, 재생 제어로 비디오를 주석 처리합니다.

능동 학습

불확실성 샘플링, 다양성 기반 선택, BADGE, BALD, 하이브리드 앙상블의 5가지 쿼리 전략과, 레이블이 하나도 없을 때 인스턴스를 지능적으로 선택하는 LLM 콜드 스타트를 지원합니다.

코드 없는 설정

모든 것을 YAML로 설정합니다. 정교한 주석 인터페이스를 만드는 데 프로그래밍이 필요 없습니다.

모든 분야를 위한 설계

텍스트, 이미지, 오디오, 비디오 — Potato가 모두 지원합니다.

자연어 처리
컴퓨터 비전
오디오 및 음성
대화형 AI
멀티모달
생의학 및 사회과학
에이전트 평가

350+

350종 이상의 주석 디자인 둘러보기

커뮤니티가 제공하는 바로 사용 가능한 설정입니다.

주석 작업을 시작할 준비가 되셨나요?

전 세계의 연구자 및 팀과 함께 Potato를 사용해 보세요.