コンテンツへスキップ

インテグレーション

PotatoをAIモデル、クラウドソーシングプラットフォーム、お気に入りのMLフレームワークと接続しましょう。

AI & LLM統合

AI支援でアノテーションを強化

OpenAI

OpenAI models for intelligent hints, auto-suggestions, and keyword highlighting.

ドキュメントを見る →

Anthropic Claude

Claude models for nuanced annotation assistance and quality checking.

ドキュメントを見る →

Google Gemini

Gemini models for multimodal annotation support across text and images.

ドキュメントを見る →

Local LLMs (Ollama)

Run AI-assisted annotation with local LLMs using Ollama. Keep your data completely private.

ドキュメントを見る →

HuggingFace

Access open-source models via HuggingFace Inference API for flexible AI assistance.

ドキュメントを見る →

OpenRouter

Access multiple AI providers through a single API with OpenRouter integration.

ドキュメントを見る →

vLLM

Self-hosted high-performance inference with vLLM for maximum control and speed.

ドキュメントを見る →

YOLO

Visual object detection with YOLO for image and video annotation tasks.

ドキュメントを見る →

LangChain

Automatic trace ingestion from LangChain agents via callback handler. Capture full agent runs as annotation-ready traces.

ドキュメントを見る →

OpenAI Vision

OpenAI vision models for multimodal annotation assistance on images and screenshots.

ドキュメントを見る →

Anthropic Vision

Claude vision models for image and screenshot annotation assistance.

ドキュメントを見る →

Hugging Face Hub

Publish a model trained on your annotations to a Hub repository, private by default, with a model card written from the training run.

ドキュメントを見る →

Hugging Face Inference

Score an Inference Endpoint or serverless model on your labeled items, then show its predictions to annotators as pre-labels.

ドキュメントを見る →

Roboflow

Send images to a hosted or self-hosted Roboflow model and review its boxes and outlines as pre-labels.

ドキュメントを見る →

CVAT Nuclio functions

Call a CVAT serverless detector on your images and score its boxes against the boxes your annotators drew.

ドキュメントを見る →

Label Studio ML backend

Ask a running Label Studio ML backend for predictions, score them on held-out items, and review them in Potato as pre-labels.

ドキュメントを見る →

AI搭載機能

  • インテリジェントなラベル提案
  • 自動キーワードハイライト
  • 品質チェック支援
  • レビュー用の事前アノテーション
  • 説明の生成
  • 一貫性チェック

ワークフォースオプション

自チームで利用、またはクラウドソーシングで拡大

自チーム

機密データに推奨

Potatoをローカルまたは自社サーバーで、社内のアノテーターとともに運用できます。外部に共有できない機密データ、IRB承認済み研究、またはすでにトレーニング済みのアノテーションチームがある場合に最適です。

メリット

データがサーバーの外に出ないアノテーターごとの費用なしアクセスの完全な管理オフラインで動作
ローカルデプロイガイドを見る →

クラウドソーシングプラットフォームで拡大

Prolific

Academic-friendly crowdsourcing with quality participants. Full integration with completion URLs and participant tracking.

機能
Completion URL handlingParticipant ID trackingAttention checksQuality filters
ドキュメントを見る →

SONA Systems

University subject pools. Participants arrive with a SONA survey code, and Potato grants their credit from the server when they finish.

機能
Server-side credit grantingPer-participant survey codesClient-side credit fallbackAttention checks
ドキュメントを見る →

Connect and other panels

Providers for CloudResearch Connect, Clickworker and Microworkers, and a generic provider for any panel that passes a participant ID.

機能
Participant ID from the URLCompletion codes or redirectsMicroworkers VCODEsGeneric provider
ドキュメントを見る →

サポートされるデータ形式

一般的な形式でデータをインポート

Text

.txt, .json, .jsonl

Images

.jpg, .png, .gif, .webp

Audio

.mp3, .wav, .ogg, .m4a

Video

.mp4, .webm, .mov

Documents

.pdf, .html

エクスポート形式

一般的なML形式にアノテーションをエクスポート

General

  • JSONL

    One JSON object per annotator per item

  • CSV

    Tabular export for spreadsheet analysis

  • Parquet

    Columnar format for pandas, DuckDB or Spark

NLP

  • CoNLL

    Standard format for NER and sequence labeling

  • Hugging Face

    Push annotations to the Hub as a dataset

  • spaCy (via CoNLL)

    Export CoNLL, then run spacy convert

Computer Vision

  • COCO

    MS COCO format for object detection

  • YOLO

    YOLO format for real-time detection

  • Pascal VOC

    XML bounding boxes, one file per image

Agent Trace Formats

Import agent traces from 15 frameworks for annotation. Convert via CLI or ingest in real time via webhook.

Agent Frameworks

  • LangChain / LangSmith

    Hierarchical runs, tool calls

  • Langfuse

    Polling or export; scores sent back

  • OpenAI

    Function calling, assistants

  • Anthropic Claude

    Tool use, thinking blocks

  • MCP

    Model Context Protocol sessions

  • OpenTelemetry

    Distributed span hierarchy

  • ATIF

    Standard interchange format

Web Agents

  • WebArena

    Screenshots, element targeting

  • Web Agent

    Mind2Web, Computer Use, raw recordings

Coding Agents

  • Claude Code

    Anthropic Messages API with tool_use

  • Aider

    Markdown chat with edit blocks

  • SWE-Agent

    Thought/action/observation trajectories

  • SWE-bench

    Model and gold patches, test lists

General

  • ReAct

    Generic thought/action/observation

  • Multi-Agent

    CrewAI, AutoGen, LangGraph

Agent Training Exports

Export agent annotations directly to training pipeline formats

PRMProcess reward model training format
DPO / RLHFPreference pairs for alignment training
SWE-benchCompatible evaluation results

コマンドラインとPython

自動化のためのプログラマティックアクセス

コマンドライン

# Check a config for errors
potato validate config.yaml --strict

# Start the annotation server
potato start config.yaml

# Export annotations to COCO
python -m potato.export -c config.yaml \
    -f coco -o exports/

エクスポートをPythonで読み込む

# Export to CSV first:
# python -m potato.export -c config.yaml -f csv -o exports/
import pandas as pd

# One row per annotator per item
df = pd.read_csv("exports/annotations.csv")
print(df.groupby("user_id").size())

始める準備はできましたか?

Potatoをインストールして、数分でお気に入りのツールとの連携を開始しましょう。