Comparação com outras ferramentas

Ambos são de código aberto e cobrem anotação de texto, imagem, áudio e vídeo. O Potato é gratuito para sempre, sem nível Enterprise; já a adjudicação, a concordância entre anotadores, a avaliação por ground truth e os fluxos de LLM por prompt do Label Studio ficam restritos ao Enterprise (preço sob consulta). O Potato também tem recursos de nível acadêmico que faltam no Label Studio: fluxos multifásicos (consentimento → treino → anotação → questionário), estimativa de competência de anotadores via MACE, rastreamento comportamental (teclas, mouse, tempo), 55 instrumentos de pesquisa validados, integração nativa com MTurk/Prolific e toda a infraestrutura de avaliação de agentes com 13 formatos de rastros. A configuração é em YAML, não em templates XML.

Sim. O Potato cobre as capacidades centrais do Prodigy — classificação de texto, spans de NER, relações, segmentação de áudio/vídeo, caixas delimitadoras em imagens, aprendizado ativo, concordância entre anotadores, adjudicação — e acrescenta fluxos de pesquisa multifásicos, MACE, rastreamento comportamental, suporte mais amplo a provedores de LLM, Modo Solo e avaliação de agentes. A configuração é em YAML (sem receitas em Python). O Potato é gratuito e de código aberto; o Prodigy custa cerca de US$ 490 por licença (com licenças acadêmicas gratuitas disponíveis). O esquema de triagem do Potato cobre o fluxo de aceitar/rejeitar do Prodigy.

O INCEpTION continua sendo a plataforma mais forte para anotação linguística complexa, com vinculação a bases de conhecimento (Wikidata, DBPedia, OWL, SKOS) e fluxos ricos de correferência. O Potato equipara-se às capacidades centrais de span/relação/evento/correferência do INCEpTION e acrescenta anotação de imagem/áudio/vídeo, avaliação completa de agentes, configuração em YAML (sem Java/XML), fluxos multifásicos, questionários, rastreamento comportamental, integração mais ampla com LLM/IA e uma implantação mais leve em Python/Flask. Escolha o INCEpTION para projetos com vinculação profunda a bases de conhecimento; escolha o Potato para o restante.

Para as necessidades típicas de anotação de visão computacional, sim — o Potato suporta caixas delimitadoras, polígonos, máscaras de segmentação, landmarks, anotação temporal de vídeo com rastreamento de objetos, e exporta para COCO (com máscaras RLE), YOLO e Pascal VOC. O CVAT vai mais fundo em fluxos puramente de visão computacional, com cuboides 3D, nuvens de pontos, integração com SAM e rotulagem assistida por ML via Nuclio. O CVAT não tem nenhum suporte a PLN; o Potato permite combinar anotação de imagem, texto e outros tipos em uma única tarefa.

O doccano é mais simples de configurar para classificação de texto básica e NER, mas o Potato oferece bem mais: mais de 30 tipos de anotação além de texto (imagem, áudio, vídeo, rastros de agentes), integração de IA/LLM com 12 tipos de endpoint, aprendizado ativo com 5 estratégias de consulta, controle de qualidade (verificações de atenção, padrões-ouro, MACE), fluxos de pesquisa multifásicos, instrumentos de pesquisa validados, integração nativa com crowdsourcing (MTurk, Prolific) e infraestrutura de avaliação de agentes.

Três motivos. **Custo**: plataformas comerciais cobram de US$ 1.000 a US$ 10.000+/mês; o Potato é gratuito para sempre. **Privacidade dos dados**: o Potato é auto-hospedado, então dados sensíveis (prontuários médicos, conteúdo proprietário, rastros internos) nunca saem da sua infraestrutura. **Fluxos de pesquisa**: plataformas comerciais focam em rotulagem de dados de produção; o Potato suporta nativamente padrões de pesquisa acadêmica (estudos multifásicos, fluxos de consentimento adequados a comitês de ética, rastreamento comportamental para pesquisa de fatores humanos, questionários validados de pós-estudo, estimativa de competência via MACE e pagamentos de crowdsourcing). O Potato foi apresentado no EMNLP 2022 e no HCOMP 2024 (Melhor Demo).

Vários recursos são únicos ou quase únicos. **Infraestrutura de avaliação de agentes**: observação ao vivo de navegação na web com takeover, renderização de rastros de agentes de programação (Claude Code, Cursor, Aider, SWE-Agent), anotação de erros por etapa via trajectory_eval. **Modo Solo** com escalonamento de confiança em cascata para qualidade com um único anotador. **Estimativa de competência de anotadores via MACE** para ponderar rótulos propensos a desacordo. **Justificativas de IA** explicando cada rótulo sugerido. **55 instrumentos de pesquisa validados** (SUS, NASA-TLX, UMUX, AttrakDiff) para avaliação de pós-estudo. **Anotação de eventos n-ários**, **anotação de árvore de dependências** via vinculação de spans. **8 tipos de fonte de dados**, incluindo Google Drive, Dropbox, S3, Hugging Face, Google Sheets e bancos de dados. **Fluxos multifásicos** com ramificação.

Sim. Capacidades que são níveis pagos em outras ferramentas são gratuitas no Potato: concordância entre anotadores (Kappa de Cohen, de Fleiss, Alpha de Krippendorff), interface de adjudicação, padrões-ouro, verificações de atenção, avaliação por ground truth, SSO/OAuth (Google, GitHub, OIDC genérico), integração de webhook com assinatura HMAC-SHA256, exportação para o Hugging Face Hub com DatasetCards geradas automaticamente, integração de LLM de múltiplos provedores e registro completo de auditoria. O detalhe: você é quem hospeda. Não existe um nível gerenciado na nuvem.