다른 도구와의 비교

둘 다 오픈 소스이며 텍스트, 이미지, 오디오, 비디오 주석을 다룹니다. Potato는 엔터프라이즈 등급 없이 영구 무료인 반면, Label Studio의 조정, 주석자 간 일치도, 정답 평가, 프롬프트 기반 LLM 워크플로는 엔터프라이즈(맞춤 가격) 뒤에 잠겨 있습니다. Potato에는 Label Studio에 없는 연구 수준 기능도 있습니다. 다단계 워크플로(동의 → 교육 → 주석 → 설문), MACE 주석자 역량 추정, 행동 추적(키 입력, 마우스, 타이밍), 검증된 설문 도구 55종, 기본 MTurk/Prolific 연동, 13종 트레이스 형식을 갖춘 완전한 에이전트 평가 인프라가 그것입니다. 설정은 XML 템플릿이 아니라 YAML로 합니다.

네. Potato는 Prodigy의 핵심 기능인 텍스트 분류, 개체명 스팬, 관계, 오디오/비디오 분할, 이미지 바운딩 박스, 능동 학습, 주석자 간 일치도, 조정을 모두 다루며, 여기에 다단계 연구 워크플로, MACE, 행동 추적, 더 폭넓은 LLM 공급자 지원, 솔로 모드, 에이전트 평가를 더합니다. 설정은 YAML로 합니다(Python 레시피 불필요). Potato는 무료 오픈 소스인 반면 Prodigy는 좌석당 약 $490입니다(학술용 무료 라이선스 제공). Potato의 트리아지 스키마는 Prodigy의 수락/거부 워크플로를 다룹니다.

INCEpTION은 지식 베이스 연결(Wikidata, DBPedia, OWL, SKOS)과 풍부한 상호 참조 워크플로를 갖춘 복잡한 언어학 주석에서 여전히 가장 강력한 플랫폼입니다. Potato는 INCEpTION의 핵심 스팬/관계/이벤트/상호 참조 기능에 필적하면서, 이미지/오디오/비디오 주석, 완전한 에이전트 평가, YAML 설정(Java/XML 불필요), 다단계 워크플로, 설문, 행동 추적, 더 폭넓은 LLM/AI 통합, 더 가벼운 Python/Flask 배포를 더합니다. 심층 KB 연결 프로젝트에는 INCEpTION을, 그 외 모든 경우에는 Potato를 선택하세요.

일반적인 컴퓨터 비전 주석 요구라면 그렇습니다. Potato는 바운딩 박스, 폴리곤, 세그멘테이션 마스크, 랜드마크, 객체 추적이 포함된 비디오 시간 주석을 지원하고 COCO(RLE 마스크 포함), YOLO, Pascal VOC로 내보냅니다. CVAT는 3D 큐보이드, 포인트 클라우드, SAM 통합, Nuclio를 통한 ML 보조 레이블링으로 순수 CV 워크플로에서 더 깊이 들어갑니다. CVAT는 NLP를 전혀 지원하지 않는 반면, Potato는 하나의 작업에서 이미지, 텍스트, 기타 주석을 결합할 수 있습니다.

doccano는 기본 텍스트 분류와 개체명 인식 설정이 더 간단하지만, Potato는 훨씬 많은 것을 제공합니다. 텍스트를 넘어선 30종 이상의 주석 유형(이미지, 오디오, 비디오, 에이전트 트레이스), 12종 엔드포인트 유형의 AI/LLM 통합, 5가지 쿼리 전략의 능동 학습, 품질 관리(주의력 확인, 골드 스탠더드, MACE), 다단계 연구 워크플로, 검증된 설문 도구, 기본 크라우드소싱 연동(MTurk, Prolific), 에이전트 평가 인프라가 그것입니다.

세 가지 이유가 있습니다. **비용**: 상용 플랫폼은 월 $1,000~$10,000 이상을 청구하지만 Potato는 영구 무료입니다. **데이터 프라이버시**: Potato는 셀프 호스팅 방식이라 민감한 데이터(의료 기록, 독점 콘텐츠, 내부 트레이스)가 인프라를 벗어나지 않습니다. **연구 워크플로**: 상용 플랫폼은 프로덕션 데이터 레이블링을 겨냥하지만, Potato는 학술 연구 패턴(다단계 연구, IRB 친화적 동의 흐름, 인적 요인 연구를 위한 행동 추적, 검증된 사후 설문, MACE 역량 추정, 크라우드소싱 지급)을 기본 지원합니다. Potato는 EMNLP 2022와 HCOMP 2024(최우수 데모)에 소개되었습니다.

고유하거나 거의 유일한 기능이 여럿 있습니다. **에이전트 평가 인프라**: 제어권 인계가 가능한 실시간 웹 브라우징 관찰, 코딩 에이전트 트레이스 렌더링(Claude Code, Cursor, Aider, SWE-Agent), trajectory_eval 단계별 오류 주석. 단일 주석자 품질을 위한 단계적 신뢰도 상향 조정을 갖춘 **솔로 모드**. 불일치가 잦은 레이블에 가중치를 두는 **MACE 주석자 역량 추정**. 제안된 각 레이블을 설명하는 **AI 근거**. 사후 평가를 위한 **검증된 설문 도구 55종**(SUS, NASA-TLX, UMUX, AttrakDiff). 스팬 연결을 통한 **n항 이벤트 주석**과 **의존 구문 트리 주석**. Google Drive, Dropbox, S3, HuggingFace, Google Sheets, 데이터베이스를 포함한 **8종 데이터 소스 유형**. 분기를 지원하는 **다단계 워크플로**.

네. 다른 곳에서는 유료 등급인 기능이 Potato에서는 무료입니다. 주석자 간 일치도(코헨의 카파, 플라이스, 크리펜도르프의 알파), 조정 인터페이스, 골드 스탠더드, 주의력 확인, 정답 평가, SSO/OAuth(Google, GitHub, 범용 OIDC), HMAC-SHA256 서명을 갖춘 웹훅 통합, 자동 생성 DatasetCard가 포함된 HuggingFace Hub 내보내기, 다중 공급자 LLM 통합, 전체 감사 로깅이 그것입니다. 다만 셀프 호스팅이라는 조건이 있습니다. 관리형 클라우드 등급은 없습니다.