Skip to content
Gratuito e open source

Perché scegliere Potato?

Potato è gratuito e gira sul tuo hardware. Ecco come regge il confronto con altri undici strumenti di primo piano.

Perché scegliere Potato?

Come si colloca Potato

Undici strumenti, verificati sulla loro stessa documentazione. Quasi tutti fanno una parte di questo lavoro. La domanda è quanto costa e che cosa non si ottiene a nessun prezzo.

Incluso, gratisSolo nei piani a pagamentoParziale, vedi noteNon disponibile
Strumenti di annotazioneVisione e aziendeValutazione di agenti
FunzionalitàPotatoGPL-3.0Label StudioApache-2.0ProdigyProprietaryArgillaApache-2.0CVATMITEncordProprietaryLabelboxProprietaryLangSmithProprietaryLangfuseMITComet OpikApache-2.0GalileoProprietary
Quanto costaFree$99/user/mo for agreement metrics$390, or $490/seat (5 min.)FreeFree; $33/user/mo for QCNot publishedUsage-based credits$39/seat/moFree self-hostedFree self-hosted$100/mo
Self-hosted, gratis*Incluso, gratisIncluso, gratisSolo nei piani a pagamentoIncluso, gratisIncluso, gratisSolo nei piani a pagamentoNon disponibileSolo nei piani a pagamentoIncluso, gratisIncluso, gratisSolo nei piani a pagamento
Tutte le funzioni, nessun piano a pagamento*Incluso, gratisNon disponibileNon disponibileIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileIncluso, gratisIncluso, gratisNon disponibile
Un solo strumento per corpora e tracce di agenti*Incluso, gratisSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibileSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibile
Annotazione delle tracce degli agentiIncluso, gratisSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibileSolo nei piani a pagamentoIncluso, gratisIncluso, gratisIncluso, gratisIncluso, gratis
Grafo multiagente che si può annotare*Incluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileParziale, vedi noteParziale, vedi noteParziale, vedi noteParziale, vedi note
Attribuzione dei fallimenti etichettata da persone*Incluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileParziale, vedi noteNon disponibileNon disponibileNon disponibileParziale, vedi note
Giudice LLM misurato sulle etichette umaneIncluso, gratisSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileIncluso, gratisIncluso, gratisNon disponibileIncluso, gratis
Errore di calibrazione e audit del bias del giudiceIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Accordo corretto per il caso (κ, α)*Incluso, gratisNon disponibileSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileParziale, vedi noteNon disponibileNon disponibile
Modellazione dell'abilità dell'annotatore (IRT)Incluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Intervallo di confidenza su ogni etichettaIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Gold standard e controlli di attenzioneIncluso, gratisSolo nei piani a pagamentoNon disponibileNon disponibileIncluso, gratisSolo nei piani a pagamentoIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibile
Sessioni di taratura dal vivo con indicatore di accordoIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Punteggio per predizione tra pari, senza gold labelIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Export SFT, DPO e process reward*Incluso, gratisNon disponibileNon disponibileParziale, vedi noteNon disponibileSolo nei piani a pagamentoSolo nei piani a pagamentoParziale, vedi noteParziale, vedi noteNon disponibileNon disponibile
Articolo con revisione paritaria sullo strumentoIncluso, gratisNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibileNon disponibile
Forza lavoro di annotazione gestita*Non disponibileNon disponibileNon disponibileNon disponibileSolo nei piani a pagamentoSolo nei piani a pagamentoSolo nei piani a pagamentoNon disponibileNon disponibileNon disponibileNon disponibile
Ospitato, nulla da gestire*Non disponibileSolo nei piani a pagamentoSolo nei piani a pagamentoIncluso, gratisIncluso, gratisSolo nei piani a pagamentoSolo nei piani a pagamentoIncluso, gratisIncluso, gratisIncluso, gratisIncluso, gratis

Self-hosted, gratis: LangSmith, Galileo ed Encord mettono il self-hosting stesso dietro un contratto enterprise. Labelbox non documenta alcuna edizione self-hosted.

Tutte le funzioni, nessun piano a pagamento: L'edizione gratuita di Label Studio non include alcuna metrica di accordo; ground truth, dashboard e pre-etichettatura con LLM partono da 99 $ per utente al mese. CVAT indica come a pagamento l'interfaccia di controllo qualità. Supervisely mette il consenso dietro un piano da 199 € al mese.

Un solo strumento per corpora e tracce di agenti: Tutte le piattaforme di valutazione di agenti qui presenti sono vincolate alle tracce. Nessuna sa etichettare il sentiment di un corpus, marcare un'entità o somministrare un questionario.

Grafo multiagente che si può annotare: Diversi strumenti disegnano un grafo di interazione tra agenti. Sono tutte viste di debug in sola lettura. In Potato gli agenti e i passaggi di consegne sono oggetti che una persona etichetta.

Attribuzione dei fallimenti etichettata da persone: Galileo deduce i fallimenti nei passaggi di consegne con un LLM e Labelbox valuta i passi della traiettoria. Nessuno dei due raccoglie il riferimento umano con cui quelle deduzioni andrebbero confrontate.

Accordo corretto per il caso (κ, α): Gli altri misurano l'accordo come percentuale di sovrapposizione, IoU o voto di maggioranza. Prodigy offre l'α di Krippendorff e l'AC2 di Gwet, ma non ha un piano gratuito. Langfuse calcola il κ di Cohen tra una persona e un giudice, non su un gruppo di annotatori.

Export SFT, DPO e process reward: Parziale significa solo JSONL in stile SFT, senza formato per coppie di preferenza o process reward.

Forza lavoro di annotazione gestita: Non ce l'abbiamo. Porti i tuoi annotatori o li recluti tramite Prolific. Se ti servono 50.000 elementi etichettati entro il mese prossimo e non hai nessuno, Labelbox, Encord e Scale vendono questo, noi no.

Ospitato, nulla da gestire: Potato funziona solo self-hosted. Per alcuni team è esattamente il punto, per altri è un costo reale.

Verificato sulla documentazione pubblica, July 2026. I fornitori si muovono in fretta e preferiamo essere corretti che sbagliare. Segnalaci se una casella non è più aggiornata.

Sette motivi per scegliere Potato

100% gratuito

Nessun piano tariffario, nessun limite di utilizzo, nessuna carta di credito richiesta. Potato è gratuito per ricerca, istruzione e uso non commerciale.

Misura l'etichettatura, non solo le etichette

La maggior parte degli strumenti registra cosa ha deciso un annotatore. Potato misura come l'ha deciso: abilità e difficoltà dell'item stimate dal vivo, confini decisionali sondati con controfattuali, ragionamento catturato ad alta voce e calibrazione valutata senza un solo gold standard.

Open source

Accesso completo al codice sorgente. Personalizza, estendi e contribuisci. Nessun vincolo con il fornitore, mai.

Privacy prima di tutto

Self-hosted sulla tua infrastruttura. I tuoi dati non lasciano mai i tuoi server. Perfetto per dati di ricerca sensibili.

Supportato dalla ricerca

Sviluppato presso la University of Michigan. Pubblicato ad ACL 2026 e EMNLP 2022, con un premio Miglior Demo a HCOMP 2024.

Configurazione senza codice

Configura tutto con semplici file YAML. Non è richiesta programmazione per creare interfacce di annotazione sofisticate.

Valutazione degli agenti

Il supporto all'annotazione di agenti più ampio di qualsiasi strumento: 13 formati di traccia, esecuzioni multiagente su un grafo di interazione che si può etichettare, schemi per uso del computer, voce e video, diff di agenti di codice, annotazione di process reward e osservazione dal vivo con rollback.

Cosa dicono i ricercatori

“Abbiamo valutato Labelbox e Scale AI, ma Potato ci ha permesso di iniziare in un pomeriggio senza alcuna approvazione del budget.”

Ricercatore ML

Laboratorio di ricerca universitario

“La configurazione YAML è molto più semplice rispetto alle complesse interfacce degli strumenti di annotazione.”

Data Scientist

Startup NLP

“La possibilità di self-hosting era fondamentale per il nostro studio approvato dall'IRB con dati sensibili dei partecipanti.”

Dottorando

Dipartimento di scienze sociali

Chi dovrebbe usare Potato?

Ricercatori accademici

Hanno bisogno di strumenti citabili e gratuiti per articoli e sovvenzioni

Startup e piccoli team

Non possono giustificare budget di $10.000/mese per strumenti di annotazione

Progetti con dati sensibili

Requisiti IRB, sanità o dati riservati

Educatori e studenti

Insegnamento di corsi NLP/ML con annotazione pratica

Pronto a provare Potato?

Inizia in pochi minuti con un semplice pip install. Nessuna registrazione, nessuna carta di credito, nessun vincolo.

IniziaSfoglia gli esempi