Skip to content
Potato

Annotieren Sie alles — Text, Agenten und darüber hinaus

Potato ist die erste Annotationsplattform, die speziell für die Bewertung von KI-Agenten entwickelt wurde. Importieren Sie Traces aus beliebigen Frameworks, visualisieren Sie Agentenaktionen interaktiv und annotieren Sie mit forschungserprobten Annotationsschemata — alles über YAML-Konfiguration.

Vorgestellt bei·HCOMP 2024 (Beste Demo)·EMNLP 2022

In 4 Schritten loslegen

Von der Installation zur Annotation in wenigen Minuten.

1.
pip install potato-annotation# Potato installieren
2.
# Create your config.yaml# Aufgabe konfigurieren
3.
potato start config.yaml# Server starten
4.
# Open localhost:8000# Mit dem Annotieren beginnen!

Alles, was Sie für die Annotation brauchen

Leistungsstarke Funktionen für Forschende und Teams.

Agentenbewertung

Importieren Sie Traces aus 12+ Agenten-Frameworks, visualisieren Sie diese mit interaktiven Schritt-Karten und bewerten Sie mit zweckgebauten Annotationsschemata. Das erste Annotationswerkzeug für das agentische Zeitalter.

20+ Annotationstypen

Radio, Mehrfachauswahl, Likert, Span, Text, Zahl, Schieberegler, Auswahl, Mehrfachbewertung, Paarvergleich, Triage, Ereignis, Koreferenz, Bild, Audio, Video und mehr.

KI-gestützt

LLM-Integration mit OpenAI, Claude, Gemini für intelligente Hinweise, Schlüsselwort-Hervorhebung, Label-Vorschläge, MACE-Kompetenzschätzung, Optionshervorhebung und Diversitätsreihenfolge.

Multimedia-Unterstützung

Annotieren Sie Audio mit Wellenformen, Bilder mit Begrenzungsrahmen und Polygonen sowie Video mit Wiedergabesteuerung.

Aktives Lernen

Unsicherheitsbasiertes Sampling priorisiert die Annotation der wertvollsten Beispiele und maximiert so die Effizienz.

Keine Programmierung erforderlich

Konfigurieren Sie alles in YAML. Kein Programmieren erforderlich, um ausgefeilte Annotationsoberflächen zu erstellen.

Für jeden Bereich geeignet

Text, Bilder, Audio oder Video — Potato hat Sie abgedeckt.

Natürliche Sprachverarbeitung
Computer Vision
Audio & Sprache
Konversations-KI
Multimodal
Biomedizin & Sozialwissenschaften
Agentenbewertung

350+

350+ Annotationsdesigns durchsuchen

Sofort einsatzbereite Konfigurationen aus der Community.

Bereit zum Annotieren?

Schließen Sie sich Forschenden und Teams weltweit an, die Potato verwenden.