Skip to content
Announcements3 min read

Potato 2.0, ACL 2026 में

Potato 2.0 पर हमारा पेपर ACL 2026 की System Demonstrations में प्रकाशित हुआ है। जानिए यह क्या कवर करता है और अपने काम में Potato का हवाला कैसे दें।

Potato Team

Potato 2.0, ACL 2026 की System Demonstrations में प्रकाशित हुआ है। यह पेपर बताता है कि Potato अब कैसा है: टेक्स्ट, ऑडियो, इमेज और वीडियो में फैले 39 एनोटेशन टास्क प्रकार, AI एजेंट के आउटपुट को लेबल करने का सपोर्ट, और एक AI-in-the-loop वर्कफ़्लो जिसमें एक एनोटेटर किसी LLM के साथ मिलकर, प्रॉम्प्ट को बार-बार सुधारते हुए काम करता है। यदि आप अपने शोध में Potato का उपयोग करते हैं, तो यही वह पेपर है जिसका हवाला देना चाहिए।

आप इसे ACL Anthology पर पढ़ सकते हैं।

पेपर में क्या है

Potato का पहला पेपर EMNLP 2022 में था, जो टेक्स्ट एनोटेशन के लिए एक कॉन्फ़िगरेशन-आधारित टूल का वर्णन करता था: एक YAML फ़ाइल लिखें, एक काम करता हुआ इंटरफ़ेस पाएँ, और कस्टम फ्रंट-एंड कोड से बचें। यह विचार आज भी कायम है, पर तब से यह टूल टेक्स्ट से कहीं आगे बढ़ चुका है।

Potato 2.0 उस वृद्धि के साथ आई चीज़ों के बारे में बताता है:

  • अब 39 टास्क प्रकार टेक्स्ट, ऑडियो, इमेज और वीडियो को कवर करते हैं, इसलिए एक ही कॉन्फ़िगरेशन किसी सेंटिमेंट स्केल, ऑडियो इवेंट टाइमलाइन, बाउंडिंग-बॉक्स टास्क या वीडियो रेटिंग का वर्णन कर सकती है।
  • जब लोगों ने LLM और एजेंट का मूल्यांकन शुरू किया, तो Potato ने एजेंट ट्रैजेक्टरी, टूल कॉल और मल्टी-स्टेप आउटपुट के लिए ऐसे डिस्प्ले जोड़े जिन्हें एनोटेटर सीधे लेबल कर सकते हैं।
  • एक एनोटेटर और एक LLM एक ही टास्क पर साथ काम कर सकते हैं, जहाँ हर आइटम को हाथ से लेबल करने के बजाय व्यक्ति आगे बढ़ते हुए प्रॉम्प्ट सुधारता रहता है।

इनमें से किसी के भी विस्तृत रूप के लिए, फ़ीचर दस्तावेज़ में अधिक जानकारी है।

Potato का प्रकाशन रिकॉर्ड

Potato शोध साहित्य में कई बार आ चुका है। ज़्यादातर उपयोगों के लिए, ACL 2026 के पेपर का हवाला दें।

  • Potato 2.0: A Comprehensive Annotation Platform with AI-in-the-Loop Support. Jurgens, Chen और Iyer। ACL 2026, खंड 3: System Demonstrations। ACL Anthology
  • Potato: The Portable Text Annotation Tool. Pei आदि। EMNLP 2022: System Demonstrations। ACL Anthology · arXiv

Potato के डेमो को HCOMP 2024 में सर्वश्रेष्ठ डेमो पुरस्कार भी मिला।

Potato का हवाला कैसे दें

bibtex
@inproceedings{jurgens-etal-2026-potato,
    title = "Potato 2.0: A Comprehensive Annotation Platform with {AI}-in-the-Loop Support",
    author = "Jurgens, David and Chen, Michael and Iyer, Lina",
    booktitle = "Proceedings of the 64th Annual Meeting of the Association for Computational Linguistics (Volume 3: System Demonstrations)",
    month = jul,
    year = "2026",
    address = "San Diego, California, United States",
    publisher = "Association for Computational Linguistics",
    pages = "374--386",
    url = "https://aclanthology.org/2026.acl-demo.37/",
}

यदि आप विशेष रूप से मूल टेक्स्ट-एनोटेशन कार्य का हवाला दे रहे हैं, तो EMNLP 2022 का पेपर अब भी सही संदर्भ है:

bibtex
@inproceedings{pei-etal-2022-potato,
    title = "{POTATO}: The Portable Text Annotation Tool",
    author = "Pei, Jiaxin and Ananthasubramaniam, Aparna and Wang, Xingyao and Zhou, Naitian and Dedeloudis, Apostolos and Sargent, Jackson and Jurgens, David",
    booktitle = "Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing: System Demonstrations",
    month = dec,
    year = "2022",
    address = "Abu Dhabi, UAE",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2022.emnlp-demos.33/",
    pages = "327--337",
}

उन सभी का धन्यवाद जिन्होंने Potato का उपयोग किया, issue दर्ज किए, और ऐसे एनोटेशन टास्क भेजे जिनके बारे में हमने सोचा भी नहीं था। यदि आप इससे कुछ बनाते हैं, तो हमें GitHub पर बताएँ।