Skip to content
Potato

Annota qualsiasi cosa — testo, agenti e altro ancora

Potato è la prima piattaforma di annotazione progettata appositamente per la valutazione degli agenti IA. Importa tracce da qualsiasi framework, visualizza le azioni degli agenti in modo interattivo e valuta con schemi di annotazione di qualità per la ricerca — tutto tramite configurazione YAML.

Presentato a·HCOMP 2024 (Miglior Demo)·EMNLP 2022

Inizia in 4 passi

Dall'installazione all'annotazione in pochi minuti.

1.
pip install potato-annotation# Installa Potato
2.
# Create your config.yaml# Configura il tuo task
3.
potato start config.yaml# Avvia il server
4.
# Open localhost:8000# Inizia ad annotare!

Tutto ciò di cui hai bisogno per l'annotazione

Funzionalità potenti progettate per ricercatori e team.

Valutazione degli agenti

Importa tracce da 12+ framework per agenti, visualizza con display interattivi a schede per passo e valuta con schemi di annotazione appositamente costruiti. Il primo strumento di annotazione costruito per l'era agentiva.

20+ tipi di annotazione

Pulsanti radio, selezione multipla, Likert, span, testo, numero, slider, selezione, valutazione multipla, confronto a coppie, triage, eventi, coreferenza, immagini, audio, video e altro ancora.

Potenziato dall'IA

Integrazione LLM con OpenAI, Claude, Gemini per suggerimenti intelligenti, evidenziazione di parole chiave, suggerimenti di etichette, stima della competenza MACE, evidenziazione delle opzioni e ordinamento per diversità.

Supporto multimediale

Annota audio con forme d'onda, immagini con riquadri di delimitazione e poligoni, e video con controlli di riproduzione.

Apprendimento attivo

Il campionamento basato sull'incertezza prioritizza l'annotazione sugli esempi più preziosi, massimizzando l'efficienza.

Configurazione senza codice

Configura tutto in YAML. Non è richiesta programmazione per creare interfacce di annotazione sofisticate.

Costruito per ogni dominio

Testo, immagini, audio o video — Potato ti copre.

Elaborazione del linguaggio naturale
Computer vision
Audio e parlato
IA conversazionale
Multimodale
Biomedico e scienze sociali
Valutazione degli agenti

350+

Sfoglia 350+ design di annotazione

Configurazioni pronte all'uso dalla comunità.

Pronto per iniziare ad annotare?

Unisciti a ricercatori e team in tutto il mondo che usano Potato.