لا توجد أداة وسم واحدة هي الأفضل، وأي مقال يخبرك بغير ذلك إنما يروِّج لشيء ما. ويتوقف الاختيار الصحيح على ما تقوم بوسمه، وما إذا كنت بحاجة إلى تقييم نماذج اللغة الكبيرة والوكلاء، وميزانيتك، ومقدار الإعداد الذي يمكنك تحمّله. وفيما يلي كيفية تضييق الخيارات.

الأسئلة التي تحسم الأمر فعلًا

ما الذي تقوم بوسمه؟ بالنسبة للتعرف على الكيانات المسماة أو التصنيف النصي فقط، تؤدي أدوات بسيطة مثل Doccano أو brat المهمة بقليل من التعقيد. أما بالنسبة لمزيج من النصوص والصور والصوت والفيديو، فأنت بحاجة إلى شيء أوسع، وهنا يأتي دور Potato وLabel Studio.

هل تحتاج إلى تقييم الوكلاء أو نماذج اللغة الكبيرة؟ هذا هو السؤال الذي تتخطاه معظم مقارنات الأدوات، وهو حيث ينقسم المجال. فتقييم الوكيل يعني قراءة مساره، والحكم على الخطوات واستدعاءات الأدوات، وأحيانًا مشاهدته يعمل مباشرةً. ومعظم أدوات الوسم العامة لم تُبنَ لذلك. أما Potato فيقرأ مسارات الوكلاء بصيغ كثيرة ولديه أدوات مخصصة لـتقييم المسار ووسم مكافأة العملية ومراجعة وكلاء الويب ووكلاء البرمجة.

ما هي ميزانيتك؟ إن Potato، ونواة Label Studio، وDoccano، وbrat، وArgilla مجانية ومفتوحة المصدر. أما Prodigy وبعض فئات Label Studio فهي مدفوعة.

ما مقدار الإعداد الذي يمكنك تحمّله؟ يُهيَّأ Potato بملف YAML ولا يحتاج إلى برمجة. وProdigy يعتمد على البرمجة أولًا. وتقع الأدوات الأخرى في المنتصف.

في أي منظومة تعمل؟ يقترن Prodigy بإحكام مع spaCy. ويعيش Argilla ضمن منظومة Hugging Face. ويصدِّر Potato إلى CoNLL وspaCy وHugging Face وCOCO/YOLO، لذا يندرج ضمن معظم خطوط الإنتاج.

أين يقع Potato

خرج Potato من معالجة اللغة الطبيعية الأكاديمية وبُني لسير عمل البحث بأكمله: أنواع كثيرة من المهام، ومقاييس اتفاق وضبط جودة جاهزة، وتكاملات للتعهيد الجماعي، ومجموعة عميقة من أدوات تقييم الوكلاء أُضيفت مؤخرًا. فإذا كان عملك يشمل عدة وسائط أو يتضمن تقييم النماذج والوكلاء، فهو يستحق النظر فيه.

أما إذا كنت بحاجة أساسًا إلى مهمة نصية واحدة بمنتج تجاري مُستضاف، أو كنت تعيش بالكامل داخل spaCy أو Hugging Face، فقد تناسبك إحدى الأدوات الأخرى أكثر. اختر الأداة التي تناسب العمل، لا العرض الأعلى صوتًا.

اقرأ المزيد

توجد النسخة الأطول، جنبًا إلى جنب، في دليل مقارنة أدوات الوسم مفتوحة المصدر، وتُعرَض الحجة لصالح Potato تحديدًا في لماذا Potato. وللاطلاع على مقارنة على مستوى الميزات من المصدر، انظر وثائق المقارنة.