Skip to content
Potato annotation tool

Annotez tout avec Potato : texte, médias et agents

Potato est une plateforme open source pour annoter du texte, de l'audio, des images et des données qualitatives, de la classification et l'annotation de segments jusqu'au codage guidé par un livre de codes. Elle offre aussi la prise en charge de l'annotation d'agents la plus large de tous les outils que nous avons examinés : importez des traces de n'importe quel framework, annotez une exécution multi-agents sur son graphe d'interaction, et configurez le tout en YAML.

Présenté à·ACL 2026·HCOMP 2024 (Meilleure démo)·EMNLP 2022

Démarrez en 4 étapes

De l'installation à l'annotation en quelques minutes.

1.
pip install potato-annotation
# Installer Potato
2.
# Create your config.yaml
# Configurer votre tâche
3.
potato start config.yaml
# Lancer le serveur
4.
# Open localhost:8000
# Commencer à annoter

Ce que contient Potato

Conçu pour les chercheurs et les équipes d'annotation.

Évaluation d'Agents

Annotez des équipes multi-agents sur un graphe d'interaction cliquable, évaluez des agents d'usage informatique, vocaux et vidéo, calibrez des juges LLM par rapport aux étiquettes humaines, transformez les trajectoires en données d'entraînement SFT et DPO, et classez les modèles dans une arène, le tout via YAML.

Plus de 20 types d'annotation

Radio, sélection multiple, Likert, curseur, texte, span, best-worst scaling, comparaison par paires, nombre, multirate, vidéo, image, audio, boîte englobante, polygone, événement et taxonomie, ainsi que le codage qualitatif (mode QDA) avec livre de codes évolutif, codes in-vivo, mémos et cas.

Propulsé par l'IA

Intégration de LLM avec OpenAI, Claude et Gemini pour des indices, la mise en évidence de mots-clés, les suggestions d'étiquettes, l'estimation de compétence MACE, la mise en évidence d'options et l'ordonnancement par diversité.

Support multimédia

Annotez l'audio avec des formes d'onde, les images avec des boîtes englobantes et des polygones, et la vidéo avec des contrôles de lecture.

Apprentissage actif

Cinq stratégies de requête (échantillonnage par incertitude, sélection par diversité, BADGE, BALD et ensemble hybride), plus un démarrage à froid par LLM qui choisit les premiers exemples avant qu'il n'existe la moindre étiquette.

Aucun code requis

Configurez tout en YAML. Construire une interface d'annotation ne demande aucune programmation.

450+

Parcourez les designs d'annotation

Configurations prêtes à l'emploi issues de la communauté.

Prêt à commencer l'annotation ?

Potato est gratuit et open source. Installez-le avec pip et lancez votre première tâche en local.