المدوّنة

How to Collect Process Reward Data for Training Better Coding Agents

Step-by-step guide to collecting per-step reward signals for PRM training using Potato. Covers first-error mode, per-step annotation, and export to training pipelines.

Mar 26, 202611 min read

Watch, Pause, and Rewind: Live Coding Agent Observation in Potato

Tutorial for setting up live coding agent observation with Ollama, Anthropic API, or Claude Agent SDK. Includes pause, rollback, branching, and trajectory export.

Mar 25, 202612 min read

Guides14 min read

Comparing AI Agents Side by Side: Binary, Scale, and Multi-Dimension Modes

Set up pairwise agent comparison in Potato with three modes: binary preference, continuous scale, and per-dimension multi-criteria judgment with required justification.

Mar 24, 2026

Guides15 min read

Per-Step Error Localization: Using Trajectory Evaluation to Find Where Agents Fail

Use Potato's trajectory_eval schema for per-step error localization with hierarchical error taxonomies, severity scoring, and running score tracking across agent traces.

Mar 23, 2026

Tutorials12 min read

GitHub PR-Style Code Review for AI Coding Agents

Set up GitHub PR-style code review annotation in Potato with inline diff comments, file-level quality ratings, and approve or reject verdicts for coding agent output.

Mar 22, 2026

Guides13 min read

Potato vs LangSmith and Langfuse for Agent Evaluation: A Practical Comparison

Compare Potato with LangSmith and Langfuse for AI agent evaluation across trace rendering, annotation, coding agent support, live observation, pricing, and self-hosting.

Mar 21, 2026

Stay updated

Get notified about new tutorials, releases, and community highlights.

MT-Bench-Style Rubric Evaluation for AI Agents in Potato

Set up multi-criteria rubric evaluation with custom criteria, configurable rating scales, and dimension weights for systematic AI agent evaluation using Potato's rubric_eval.

Mar 20, 202616 min read

Release

Potato 2.4.0: Web Agent Annotation, Live Evaluation, and HuggingFace Integration

Potato 2.4.0 ships web agent trace review, real-time live agent evaluation, an LLM chat sidebar, HuggingFace Hub export, webhooks, SSO/OAuth, and five active learning strategies.

Mar 17, 20265 min read

Announcements10 min read

Potato 2.3: التوصيف الوكيلي، الوضع الفردي، ومستقبل التقييم البشري

يقدم Potato 2.3.0 التوصيف الوكيلي مع 12 محوّل تنسيق مسارات، والوضع الفردي للتوسيم التعاوني بين الإنسان ونموذج اللغة الكبير، ومقياس الأفضل-الأسوأ، وSSO/OAuth، وتصدير Parquet، و15 مشروعاً تجريبياً.

Mar 9, 2026

Guides9 min read

تقييم وكلاء الذكاء الاصطناعي: دليل شامل للتوصيف البشري لمسارات الوكلاء

تعلم كيفية إعداد التقييم البشري لمخرجات وكلاء الذكاء الاصطناعي باستخدام ميزات التوصيف الوكيلي في Potato، من استيراد المسارات إلى تصميم مخططات التوصيف.

Mar 8, 2026

Tutorials10 min read

الوضع الفردي: كيف يمكن لمُوصِّف واحد توسيم 10,000 مثال

دليل تفصيلي خطوة بخطوة لاستخدام الوضع الفردي في Potato لتوسيم مجموعات البيانات الكبيرة بكفاءة من خلال التعاون بين الإنسان ونموذج اللغة الكبير، مع تقليل تكلفة التوصيف بنسبة تصل إلى 90%.

Mar 7, 2026

Guides10 min read

توصيف وكلاء تصفح الويب: من مسارات WebArena إلى التقييم البشري

كيفية استخدام عرض مسار وكيل الويب في Potato لتقييم وكلاء تصفح الويب المستقلة، مع لقطات شاشة خطوة بخطوة وتراكبات SVG ومخططات توصيف لكل خطوة.

Mar 6, 2026

Potato 2.2: الأحداث، ربط الكيانات، التصدير، و55 أداة استبيان

يضيف Potato 2.2.0 تسعة مخططات توصيف جديدة، ونظام تصدير قابل للتوسيع، وتقدير كفاءة MACE، و55 أداة استبيان موثقة، ومصادر بيانات بعيدة.

Feb 20, 20265 min read

Potato 2.1: نظام عرض النماذج، الذكاء الاصطناعي البصري، وربط النطاقات

يجلب Potato 2.1.0 نظام عرض النماذج، ودعم الذكاء الاصطناعي البصري لتوصيف الصور والفيديو، وربط النطاقات، والنطاقات متعددة الحقول، وتخصيص التخطيط.

Feb 14, 20266 min read

Guides9 min read

استخدام الذكاء الاصطناعي البصري لتسريع توصيف الصور والفيديو

أعدّ كشف الأجسام المدعوم بالذكاء الاصطناعي والتوصيف المسبق والتصنيف لمهام الصور والفيديو مع YOLO وOllama وOpenAI وClaude.

Feb 14, 2026

Guides8 min read

الترحيل من Label Studio إلى Potato

دليل خطوة بخطوة لتحويل مشاريع وقوالب وتوسيمات Label Studio يدوياً إلى صيغة Potato.

Jan 20, 2026

تشغيل دراسات التوصيف على Prolific

دليل شامل لتكامل Potato مع Prolific للتوصيف بالتعهيد الجماعي، بما في ذلك الدفع ومراقبة الجودة.

Jan 20, 2026

أفضل ممارسات توسيم المستندات القانونية

تقنيات متخصصة لتوسيم العقود ومستندات المحاكم والإيداعات التنظيمية بخبرة المجال.

Jan 18, 2026

توسيم الصور الطبية باستخدام Potato

أفضل الممارسات لتوسيم الصور الطبية باستخدام ميزات توسيم الصور القياسية في Potato.

Jan 18, 20264 min read

توصيف المضلعات لمهام التجزئة

كيفية إعداد أدوات رسم المضلعات لتجزئة الصور، مع نصائح للأشكال المعقدة والمناطق المتداخلة.

Jan 18, 20264 min read

Guides3 min read

التعلم النشط: وسِم بذكاء وليس بجهد أكبر

كيفية استخدام أخذ العينات بالارتياب لتحديد أولويات التوسيم وتقليل جهد التصنيف الكلي بنسبة تصل إلى 50%.

Tutorials3 min read

رسم مربعات الإحاطة لاكتشاف الأجسام

دليل شامل لإعداد توسيم مربعات الإحاطة لمهام الرؤية الحاسوبية، بما في ذلك ألوان التسميات والتحقق من الصحة.

تصدير التوسيمات إلى مجموعات بيانات Hugging Face

كيفية تحويل توسيمات Potato إلى صيغة مجموعات بيانات Hugging Face لتدريب النماذج والمشاركة.

Tutorials6 min read

مهام مقارنة الصور والتفضيل

بناء واجهات مقارنة صور جنباً إلى جنب لترتيب التفضيلات واختبار A/B وتقييم الجودة.

تقديم Potato 2.0: التوسيم المدعوم بالذكاء الاصطناعي

يسعدنا الإعلان عن Potato 2.0 مع ميزات مدعومة بالذكاء الاصطناعي ودعم الوسائط المتعددة وقدرات التعلم النشط.

Jan 15, 20263 min read

تمييز الكلمات المفتاحية التلقائي

تكوين تمييز الكلمات المفتاحية المدعوم بالذكاء الاصطناعي لجذب انتباه المُوسِّم إلى المصطلحات والعبارات المهمة.

Jan 15, 20263 min read

النشر على Amazon Mechanical Turk

تعليمات خطوة بخطوة لتشغيل مهام توسيم Potato على MTurk مع اختبارات التأهيل وسير عمل الموافقة.

Tutorials4 min read

إنشاء مهمة تحليل المشاعر

ابنِ مهمة تصنيف مشاعر كاملة مع أزرار اختيار وتلميحات واختصارات لوحة مفاتيح للتوسيم الفعال.

إعداد توسيم إدارة المحتوى

تكوين Potato لاكتشاف السمية وتصنيف خطاب الكراهية وتوسيم المحتوى الحساس مع مراعاة رفاهية المُوسِّمين.

Jan 12, 2026

قوالب HTML المخصصة في Potato

إنشاء واجهات توسيم مخصصة باستخدام قوالب HTML وتنسيق CSS وتفاعلية JavaScript.

Jan 12, 2026

توصيف تقييم النطق

ابنِ مهمة توصيف لتعلم اللغات لتقييم جودة النطق مع تشغيل الصوت ومقاييس Likert.

Jan 12, 20266 min read

توصيف تقسيم المتحدثين

ابنِ مهمة تحديد المتحدثين مع أشكال الموجة الصوتية وعلامات الطوابع الزمنية وتعيين تسميات المتحدثين.

Jan 12, 20264 min read

Tutorials3 min read

توصيف الفيديو مع عناصر تحكم إطار بإطار

أعدّ مهام توصيف الفيديو مع تنقل دقيق بين الإطارات وعلامات الطوابع الزمنية ووسم الأحداث الزمنية.

Jan 12, 2026

Tutorials5 min read

اكتشاف الأحداث الصوتية ووسمها

إعداد توسيم لاكتشاف أصوات محددة مثل الكلام والموسيقى والتصفيق أو الضوضاء البيئية مع نطاقات الطوابع الزمنية.

Jan 10, 2026

Tutorials2 min read

البدء مع Potato في 5 دقائق

دليل سريع لإعداد أول مشروع توسيم مع Potato، من التثبيت إلى أول بيانات موسومة.

Jan 10, 2026

Guides5 min read

قياس اتفاق المُوسِّمين

كيفية حساب وتفسير معامل كابا لكوهين ومعامل كابا لفليس ومعامل ألفا لكريبندورف لمشاريع التوسيم.

Jan 10, 2026

Potato في مؤتمر EMNLP 2022

تم قبول ورقتنا عن Potato في EMNLP 2022. تعرف على البحث وراء الأداة وكيفية الاستشهاد بها في عملك.

Jan 10, 20263 min read

مراقبة الجودة للتوصيف بالتعهيد الجماعي

أفضل الممارسات لضمان جودة التوصيف في مشاريع التوصيف، بما في ذلك استراتيجيات عملية يمكنك تنفيذها مع Potato وما بعده.

Jan 10, 20267 min read

Tutorials4 min read

تصنيف الصور باستخدام Potato

تعلم كيفية إعداد مهام تصنيف الصور مع معاينات مصغرة وعناصر تحكم في التكبير ودعم التسميات المتعددة.

دمج نماذج اللغة الكبيرة لتلميحات التوسيم الذكية

تعلم كيفية استخدام OpenAI أو Claude أو Gemini لتقديم تلميحات واقتراحات ذكية للمُوسِّمين.

Tutorials5 min read

توصيف تصنيف الأنواع الموسيقية

أنشئ مهمة توصيف موسيقي مع تصوّر شكل الموجة ومعاينات مدتها 30 ثانية وتسميات أنواع هرمية.

نشر Potato على خادم

دليل نشر الإنتاج لـ Potato بما في ذلك Docker والمنصات السحابية وإعداد SSL.

توصيف تتبع الأجسام المتعددة

نظرة عامة على مفاهيم توصيف تتبع الأجسام المتعددة وكيف يمكن لإمكانيات توصيف الفيديو في Potato دعم سير عمل التتبع الأساسي.

Jan 6, 20263 min read