Skip to content
Potato annotation tool

Размечайте что угодно в Potato: текст, медиа и агентов

Potato — платформа с открытым исходным кодом для разметки текста, аудио, изображений и качественных данных: от классификации и разметки спанов до кодирования по кодбуку. У неё же самая широкая поддержка разметки агентов среди инструментов, которые нам попадались: загрузите трассы из любого фреймворка, разметьте запуск мультиагентной системы прямо на графе взаимодействий и настройте всё это в YAML.

Представлен на·ACL 2026·HCOMP 2024 (лучшее демо)·EMNLP 2022

Начните за 4 шага

От установки до разметки за считаные минуты.

1.
pip install potato-annotation
# Установите Potato
2.
# Create your config.yaml
# Настройте задачу
3.
potato start config.yaml
# Запустите сервер
4.
# Open localhost:8000
# Начните размечать

Что есть в Potato

Сделано для исследователей и команд разметки.

Оценка агентов

Размечайте работу мультиагентных команд на кликабельном графе взаимодействий, оценивайте агентов, управляющих компьютером, голосом и видео, калибруйте LLM-судей по человеческим меткам, превращайте траектории в обучающие данные для SFT и DPO и ранжируйте модели на арене — и всё это из YAML.

61 тип разметки

Радиокнопки, мультивыбор, шкалы Лайкерта, ползунки, текст, спаны, шкалирование «лучший—худший», попарные сравнения, числа, множественное оценивание, видео, изображения, аудио, ограничивающие рамки, полигоны, события и разметка по таксономии, а также качественное кодирование (режим QDA) с живым кодбуком, in-vivo кодами, мемо и кейсами.

С поддержкой ИИ

Интеграция с LLM от OpenAI, Claude и Gemini: подсказки, подсветка ключевых слов, предложения меток, оценка компетентности по MACE, подсветка вариантов и упорядочивание по разнообразию.

Поддержка мультимедиа

Размечайте аудио по осциллограмме, изображения — рамками и полигонами, видео — с управлением воспроизведением.

Активное обучение

Пять стратегий отбора (по неопределённости, по разнообразию, BADGE, BALD и гибридный ансамбль), плюс холодный старт на LLM, который выбирает первые объекты, когда меток ещё нет.

Настройка без кода

Всё настраивается в YAML. Чтобы собрать интерфейс разметки, программировать не нужно.

450+

Посмотрите готовые схемы разметки

Готовые к работе конфигурации от сообщества.

Готовы начать размечать?

Potato бесплатен и имеет открытый исходный код. Установите его через pip и запустите первую задачу локально.