Skip to content
Potato

Anota cualquier cosa — texto, agentes y más allá

Potato es la primera plataforma de anotación diseñada específicamente para evaluar agentes de IA. Importa trazas desde cualquier framework, visualiza acciones de agentes de forma interactiva y evalúa con esquemas de anotación de nivel investigativo — todo configurado via YAML.

Presentado en·HCOMP 2024 (Mejor demostración)·EMNLP 2022

Comience en 4 pasos

De la instalación a la anotación en minutos.

1.
pip install potato-annotation# Instalar Potato
2.
# Create your config.yaml# Configurar su tarea
3.
potato start config.yaml# Iniciar el servidor
4.
# Open localhost:8000# ¡Comenzar a anotar!

Todo lo que necesita para la anotación

Funciones potentes diseñadas para investigadores y equipos.

Evaluación de Agentes

Importa trazas de más de 12 frameworks de agentes, visualiza con displays interactivos de tarjetas de pasos y evalúa con esquemas de anotación específicos. La primera herramienta de anotación construida para la era de los agentes.

Más de 20 tipos de anotación

Radio, selección múltiple, Likert, span, texto, número, deslizador, selección, multivaloración, comparación por pares, triaje, eventos, correferencia, imagen, audio, video y más.

Con inteligencia artificial

Integración con LLM mediante OpenAI, Claude, Gemini para sugerencias inteligentes, resaltado de palabras clave, sugerencias de etiquetas, estimación de competencia con MACE, resaltado de opciones y ordenamiento por diversidad.

Soporte multimedia

Anote audio con formas de onda, imágenes con cuadros delimitadores y polígonos, y video con controles de reproducción.

Aprendizaje activo

El muestreo basado en incertidumbre prioriza la anotación en los ejemplos más valiosos, maximizando la eficiencia.

Configuración sin código

Configure todo en YAML. No se requiere programación para crear interfaces de anotación sofisticadas.

Diseñado para todos los dominios

Texto, imágenes, audio o video — Potato lo tiene cubierto.

Procesamiento de lenguaje natural
Visión por computadora
Audio y voz
IA conversacional
Multimodal
Biomédica y ciencias sociales
Evaluación de Agentes

350+

Explore más de 350 diseños de anotación

Configuraciones listas para usar creadas por la comunidad.

¿Listo para comenzar a anotar?

Únase a investigadores y equipos de todo el mundo que usan Potato.