Skip to content
गाइड4 मिनट में पढ़ें

Mechanical Turk बंद हो गया: Potato स्टडी को दूसरे प्लेटफॉर्म पर ले जाना

Amazon Mechanical Turk 30 सितंबर 2026 को बंद हो गया। MTurk पर चलने वाली Potato स्टडी Prolific, SONA या CloudResearch Connect पर कैसे जाती है, और क्या वैसा ही रहता है।

Potato Team

Amazon Mechanical Turk 30 सितंबर 2026 को हमेशा के लिए बंद हो गया, इसलिए जो Potato स्टडी वहाँ से प्रतिभागी जुटाती थी, उसे अब दूसरा प्लेटफॉर्म चाहिए। इस बदलाव में कॉन्फ़िग के दो हिस्से बदलते हैं, लॉगिन और समापन, और एनोटेशन कार्य, ट्रेनिंग, ध्यान जांच और गोल्ड स्टैंडर्ड पहले जैसे ही रहते हैं।

यह पोस्ट पहले बताती थी कि Potato के किसी कार्य को MTurk पर कैसे तैनात करें। Amazon ने 30 जुलाई 2026 को MTurk नए रिक्वेस्टर के लिए बंद कर दिया और 30 सितंबर को सेवा ही बंद कर दी, और mturk.com पर अब लिखा है कि यह मार्केटप्लेस हमेशा के लिए बंद हो चुका है। रिक्वेस्टर साइट और रिक्वेस्टर सैंडबॉक्स, दोनों बताते हैं कि HIT बनाना, जो MTurk पर काम की इकाई है, और कार्य पूरे करना अब उपलब्ध नहीं है।

Potato में MTurk का सेटअप

Potato ने कभी HIT न बनाए, न उन्हें मैनेज किया। वर्कर्स को MTurk जुटाता था और उनके असाइनमेंट पर नज़र रखता था, और ExternalQuestion HIT के दूसरे छोर पर एनोटेशन का इंटरफ़ेस Potato होता था। दोनों को जोड़ने वाली चीज़ लॉगिन की एक सेटिंग थी, जो Potato से कहती थी कि हर वर्कर की पहचान उस workerId पैरामीटर से ले जिसे MTurk URL में डालता था:

yaml
login:
  type: url_direct
  url_argument: workerId

Potato यह कॉन्फ़िग अब भी लोड करता है। सर्वर शुरू हो जाता है, <output_annotation_dir>/<workerId>/ में रखे एनोटेशन पढ़े जा सकते हैं, और एक्सपोर्ट कमांड काम करते हैं, इसलिए पूरी हो चुकी स्टडी का डेटा सुरक्षित है, भले ही अब कोई वर्कर सर्वर तक नहीं पहुँच सकता।

स्टडी को दूसरे प्लेटफॉर्म पर ले जाना

Potato जिन प्लेटफॉर्म को सपोर्ट करता है, वे सब उसी पैटर्न पर चलते हैं जिस पर MTurk चलता था। प्लेटफॉर्म हर प्रतिभागी को URL में एक ID के साथ आपके सर्वर पर भेजता है, Potato उसे उसी ID से लॉग इन करता है, और प्रतिभागी एक समापन कोड, एक रीडायरेक्ट या, SONA पर, क्रेडिट लेकर लौटता है। इसलिए स्टडी को ले जाने का मतलब है login.url_argument को workerId की जगह नए प्लेटफॉर्म के ID पैरामीटर पर सेट करना, कॉन्फ़िग में mturk ब्लॉक हो तो उसे हटाना, और नए प्लेटफॉर्म का crowdsourcing ब्लॉक जोड़ना। Prolific के लिए नतीजा यह है:

yaml
login:
  type: url_direct
  url_argument: PROLIFIC_PID
 
crowdsourcing:
  provider: prolific
  prolific:
    completion:
      code: "C1ABCDEF"   # the code from your Prolific study's settings

कौन-सा प्लेटफॉर्म चुनें, यह इस पर निर्भर करता है कि स्टडी में कौन भाग ले।

  • Prolific सामान्य शोध आबादी से प्रतिभागी जुटाता है, और API टोकन होने पर Potato सबमिशन पर नज़र रखता है और उन प्रतिभागियों के आइटम छोड़ देता है जो कार्य लौटा देते हैं या जिनका समय खत्म हो जाता है। Prolific पर एनोटेशन अध्ययन चलाना पूरा सेटअप कदम-दर-कदम दिखाता है।
  • SONA आपके अपने विश्वविद्यालय के प्रतिभागी पूल के लिए है। Potato हर प्रतिभागी का क्रेडिट SONA की सर्वर-साइड क्रेडिट कॉल के ज़रिए देता है।
  • CloudResearch Connect सामान्य शोध आबादी से उन Project Links के ज़रिए प्रतिभागी जुटाता है जिनमें participantId होता है।
  • Clickworker और Microworkers खुली माइक्रो-टास्क क्राउड हैं, जो MTurk के मॉडल के सबसे करीब हैं, और इनमें से इन्हें सबसे सख्त गुणवत्ता नियंत्रण चाहिए।

क्राउडसोर्सिंग एकीकरण में हर प्लेटफॉर्म का ब्लॉक और स्टडी URL है, साथ ही उस किसी भी अन्य पैनल के लिए generic प्रोवाइडर भी, जो URL में ID भेजता है।

नए पूल को पुराने MTurk डेटा से मिलाना

ध्यान जांच, गोल्ड स्टैंडर्ड, ट्रेनिंग फ़ेज़ और प्रति एनोटेटर कोटा हर प्लेटफॉर्म पर एक जैसे काम करते हैं, इसलिए इन्हें बिना बदले रहने दीजिए। इन्हें एक जैसा रखने से ही पुराना और नया डेटा तुलनीय बनता है, क्योंकि नए प्लेटफॉर्म के लोग MTurk के वर्कर्स नहीं हैं। अगर स्टडी MTurk पर जुटाए गए किसी डेटासेट को आगे बढ़ा रही है, तो नए प्लेटफॉर्म पर वही गोल्ड आइटम चलाइए और लेबल मिलाने से पहले सटीकता की तुलना कीजिए। Crowdsourced एनोटेशन के लिए गुणवत्ता नियंत्रण में बताई गई जांचें Potato के भीतर चलती हैं, इसलिए वे किसी भी प्लेटफॉर्म पर एक जैसा सबूत देती हैं।

भुगतान भी नए सिरे से तय करना होगा, क्योंकि नए प्लेटफॉर्म की फ़ीस और न्यूनतम राशि MTurk से अलग हैं। एनोटेशन लागत और समय कैलकुलेटर किसी स्टडी की कीमत उसके आइटमों, प्रति आइटम एनोटेटरों और प्रति आइटम समय से निकालता है, Prolific की फ़ीस के साथ या किसी भी दूसरे प्लेटफॉर्म की फ़ीस के साथ।

आगे कहाँ जाएँ