Skip to content
Potato

Annotez tout — texte, agents et au-delà

Potato est la première plateforme d'annotation conçue pour évaluer les agents IA. Importez des traces depuis n'importe quel framework, visualisez les actions des agents de manière interactive et évaluez avec des schémas d'annotation de niveau recherche — le tout configuré via YAML.

Présenté à·HCOMP 2024 (Meilleure démo)·EMNLP 2022

Démarrez en 4 étapes

De l'installation à l'annotation en quelques minutes.

1.
pip install potato-annotation# Installer Potato
2.
# Create your config.yaml# Configurer votre tâche
3.
potato start config.yaml# Lancer le serveur
4.
# Open localhost:8000# Commencer à annoter !

Tout ce dont vous avez besoin pour l'annotation

Des fonctionnalités puissantes conçues pour les chercheurs et les équipes.

Évaluation d'Agents

Importez des traces depuis plus de 12 frameworks d'agents, visualisez avec des affichages interactifs de cartes d'étapes et évaluez avec des schémas d'annotation spécialisés. Le premier outil d'annotation conçu pour l'ère des agents.

Plus de 20 types d'annotation

Boutons radio, sélection multiple, Likert, span, texte, nombre, curseur, liste déroulante, multi-évaluation, comparaison par paires, triage, événement, coréférence, image, audio, vidéo et plus encore.

Propulsé par l'IA

Intégration de LLM avec OpenAI, Claude, Gemini pour des suggestions intelligentes, la mise en évidence de mots-clés, les suggestions d'étiquettes, l'estimation de compétence MACE, la mise en évidence d'options et l'ordonnancement par diversité.

Support multimédia

Annotez l'audio avec des formes d'onde, les images avec des boîtes englobantes et des polygones, et la vidéo avec des contrôles de lecture.

Apprentissage actif

L'échantillonnage basé sur l'incertitude priorise l'annotation sur les exemples les plus pertinents, maximisant l'efficacité.

Aucun code requis

Configurez tout en YAML. Aucune programmation requise pour créer des interfaces d'annotation sophistiquées.

Conçu pour tous les domaines

Texte, images, audio ou vidéo — Potato répond à tous vos besoins.

Traitement automatique du langage naturel
Vision par ordinateur
Audio et parole
IA conversationnelle
Multimodal
Biomédical et sciences sociales
Évaluation d'Agents

350+

Parcourez plus de 350 designs d'annotation

Configurations prêtes à l'emploi issues de la communauté.

Prêt à commencer l'annotation ?

Rejoignez les chercheurs et équipes du monde entier qui utilisent Potato.