Skip to content

गाइड

एनोटेशन अभ्यास पर टूल-निरपेक्ष व्याख्याएँ: स्कीम डिज़ाइन, एनोटेटर-अंतर सहमति, क्राउडसोर्सिंग और एजेंट मूल्यांकन, हर एक में एक व्यावहारिक उदाहरण।

ये संदर्भ पन्ने नहीं, व्याख्याएँ हैं। हर एक पहले एनोटेशन अभ्यास का ऐसा सवाल हल करती है जो किसी एक टूल पर निर्भर नहीं, और फिर Potato को व्यावहारिक उदाहरण के रूप में लेती है।

ये कुछ समूहों में बँटी हैं। पहला समूह उन निर्णयों को कवर करता है जो किसी भी डेटा पर लेबल लगाने से पहले लिए जाते हैं: क्या एनोटेट करना है, दिशानिर्देश कैसे लिखने हैं, डेटा का स्वरूप क्या हो। एक बड़ा समूह विशिष्ट प्रकार के एनोटेशन कवर करता है, नामित इकाइयों और सह-संदर्भ से लेकर ऑडियो, वीडियो, छवि विभाजन और 3D पॉइंट क्लाउड तक। तीसरा समूह मापन कवर करता है: सहमति, निर्णय-निपटान, नमूना आकार, और एनोटेटरों में असहमति होने पर क्या करें। बाकी LLM और एजेंट के आउटपुट का मूल्यांकन, और सवेतन एनोटेटरों के साथ अध्ययन चलाना कवर करते हैं।

अगर एनोटेशन आपके लिए नया है तो डेटा एनोटेशन क्या है? से शुरू करें। अगर एनोटेशन पहले से हैं और आपको उनकी गुणवत्ता पर रिपोर्ट देनी है तो इंटर-एनोटेटर सहमति की व्याख्या से शुरू करें।