تشغيل دراسات التوصيف على Prolific

يوفر Prolific الوصول إلى مجموعة متنوعة ومُفحوصة مسبقاً من المشاركين للدراسات البحثية. يغطي هذا الدليل كل شيء من الإعداد إلى الدفع لتشغيل مهام التوصيف على Prolific.

لماذا Prolific؟

موجّه للبحث: مصمم للدراسات الأكاديمية
مشاركون عالي الجودة: عمّال مُفحوصون ومنتبهون مسبقاً
أجر عادل: متطلبات الحد الأدنى للأجور
تنوع ديموغرافي: تصفية بمعايير كثيرة
متوافق مع IRB: إدارة الموافقة مدمجة

المتطلبات الأساسية

حساب باحث على Prolific
Potato مُثبّت ومتاح عبر URL عام
إعدادات أساسية جاهزة

التكامل الأساسي

إعداد Potato

yaml

annotation_task_name: "Research Annotation Study"
 
# Prolific integration via URL-based login
login:
  type: url_direct
  url_argument: PROLIFIC_PID
 
# Completion redirect
finish:
  redirect_url: "https://app.prolific.co/submissions/complete?cc=XXXXXX"

إعداد دراسة Prolific

أنشئ دراسة جديدة على Prolific
رابط الدراسة: https://your-server.com/annotate?PROLIFIC_PID={{%PROLIFIC_PID%}}&STUDY_ID={{%STUDY_ID%}}&SESSION_ID={{%SESSION_ID%}}
رابط الإكمال: احصل عليه من Potato بعد إكمال المهمة

إعداد التكامل الكامل

yaml

annotation_task_name: "Sentiment Analysis - Prolific Study"
 
# Prolific integration via URL-based login
login:
  type: url_direct
  url_argument: PROLIFIC_PID
 
# Completion handling
finish:
  redirect_url: "https://app.prolific.co/submissions/complete?cc=C1A2B3C4"
  thank_you_message: "Thank you for participating! Your completion code is shown below."
 
# Data and task settings
"data_files": ["data/texts.json"]
 
annotation_schemes:
  - annotation_type: radio
    name: sentiment
    labels: [Positive, Negative, Neutral]
    required: true
 
# Multi-phase workflow using surveyflow
surveyflow:
  on: true
  order:
    - consent
    - prestudy
    - annotation
    - poststudy
 
  consent:
    data_file: "data/consent.json"
 
  prestudy:
    data_file: "data/instructions.json"
 
instances_per_annotator: 50

إعداد الدراسة على Prolific

الخطوة 1: إنشاء الدراسة

اذهب إلى لوحة تحكم Prolific ← دراسة جديدة
املأ تفاصيل الدراسة:
- العنوان: اسم واضح ووصفي
- الوصف: ما سيفعله المشاركون
- الوقت المقدّر: كن دقيقاً (يؤثر على عرض معدل الأجر)

الخطوة 2: إعداد رابط الدراسة

text

https://your-server.com/annotate?PROLIFIC_PID={{%PROLIFIC_PID%}}&STUDY_ID={{%STUDY_ID%}}&SESSION_ID={{%SESSION_ID%}}

الخطوة 3: تعيين رمز الإكمال

في إعداد Potato، عيّن رمز إكمال فريد
في Prolific، استخدم رابط إعادة التوجيه للإكمال:
text
```
https://app.prolific.co/submissions/complete?cc=YOUR_CODE
```

الخطوة 4: متطلبات المشاركين

صفّي المشاركين حسب:

الديموغرافيا: العمر، الجنس، الجنسية
اللغة: اللغة الأم، الطلاقة
معدل القبول: الحد الأدنى لنسبة القبول السابقة
مخصص: المشاركة في دراسات سابقة

الخطوة 5: الدفع

عيّن تعويضاً عادلاً (يتطلب Prolific حد أدنى للأجور)
احسب: (الدقائق_المقدّرة / 60) × الأجر_بالساعة
فكّر في إضافة مكافأة للجودة

التعامل مع تدفق المشاركين

استخدم surveyflow في Potato لتحديد تدفق دراستك:

yaml

surveyflow:
  on: true
  order:
    - consent
    - prestudy
    - annotation
    - poststudy
 
  consent:
    data_file: "data/consent.json"
 
  prestudy:
    data_file: "data/instructions.json"
 
  poststudy:
    data_file: "data/feedback.json"

مراقبة الجودة للتعهيد الجماعي

فحوصات الانتباه

يمكنك تضمين عناصر معيارية ذهبية في ملف بياناتك بإجابات صحيحة معروفة. أعدّ فحوصات الانتباه بتضمين عناصر بحقل gold في بياناتك:

json

{
  "id": "attention_1",
  "text": "Please select 'Positive' for this item.",
  "gold": {"sentiment": "Positive"}
}

مراقبة الجودة

راقب جودة المُوصِّفين من خلال لوحة تحكم المدير في Potato، التي تعرض معدلات الإكمال وإحصائيات التوصيف. يمكنك أيضاً مراجعة ملفات التوصيف المخرجة للتحقق من أنماط مثل تحيز التسمية الواحدة أو أوقات الإكمال السريعة بشكل غير عادي.

التعامل مع الرفض

يمكن التعامل مع حالات فشل مراقبة الجودة من خلال قسم quality_control. يمكن إعادة توجيه المشاركين الذين يفشلون في فحوصات الانتباه بشكل مناسب.

الدفع والمكافآت

تُدار المكافآت من خلال واجهة Prolific. بعد اكتمال دراستك، صدّر بيانات التوصيف واحسب المكافآت بناءً على معاييرك، ثم ارفعها إلى Prolific.

مراقبة دراستك

راقب دراستك من خلال:

لوحة تحكم المدير المدمجة في Potato
واجهة مراقبة الدراسة في Prolific
ملفات مخرجات التوصيف

تنسيق المخرجات

json

{
  "participant_id": "PROLIFIC_PID_XXXXX",
  "study_id": "STUDY_ID_XXXXX",
  "session_id": "SESSION_ID_XXXXX",
  "annotations": [...],
  "metadata": {
    "start_time": "2026-01-20T10:00:00Z",
    "end_time": "2026-01-20T10:25:00Z",
    "duration_minutes": 25,
    "items_completed": 50,
    "attention_checks_passed": 5,
    "attention_checks_failed": 0
  },
  "quality_metrics": {
    "avg_time_per_item": 28.5,
    "consistency_score": 0.92
  }
}

نصائح لدراسات Prolific

اختبر أولاً: شغّل مع 5-10 مشاركين للاختبار
أجر عادل: يتوقع مشاركو Prolific أسعار مستوى البحث
تعليمات واضحة: قلّل الارتباك والرفض
متوافق مع الجوال: بعض المشاركين يستخدمون الهواتف
موافقة سريعة: وافق على المشاركات بسرعة

الخطوات التالية

تعرّف على نشر MTurk للمقارنة
أعدّ مراقبة الجودة بالتفصيل
احسب اتفاق المُوصِّفين

التوثيق الكامل للتعهيد الجماعي في /docs/deployment/crowdsourcing.