ROUGE और BLEU से जनरेशन का स्कोर
सारांश और अनुवाद की गुणवत्ता मापें
ROUGE और BLEU से जनरेशन का स्कोर, CoddyKit पर NLP Academy का एक निःशुल्क पाठ है। यह 4 में से 4वाँ पाठ है। इस अध्ययन पथ के 3 तक कोई भी पाठ पूरा पढ़ना निःशुल्क है — इसके बाद CoddyKit PRO हर पाठ अनलॉक करता है, साथ ही अंतर्निर्मित कोड संपादक और चौबीसों घंटे एआई शिक्षक के साथ व्यावहारिक अभ्यास भी उपलब्ध कराता है। यह NLP Academy सीखने के मार्ग का हिस्सा है और आपकी प्रगति वेब तथा CoddyKit ऐप पर सिंक होती रहती है। NLP Academy पाठ्यक्रम में कुल 4 पाठ शामिल हैं।
स्कोर बनाना क्यों ज़रूरी है
सारांश और अनुवाद मुक्त रूप का पाठ होते हैं, इसलिए उनका कोई एक सही उत्तर नहीं होता। आउटपुट की तुलना संदर्भ-पाठ से करने के लिए हमें मापदंडों की आवश्यकता होती है। 📏
संदर्भ से तुलना करें
ROUGE और BLEU दोनों आपके बनाए पाठ की एक या अधिक मानव-निर्मित संदर्भों से तुलना करते हैं। संदर्भ से जितना अधिक मेल होगा, स्कोर उतना ही अधिक होगा।
अनुवाद के लिए BLEU
BLEU मापता है कि आपके आउटपुट में मौजूद कितने छोटे शब्द-क्रम संदर्भ में भी दिखाई देते हैं। यह मशीन अनुवाद का पारंपरिक मापदंड है।
BLEU सटीकता को महत्व देता है
BLEU का केंद्र सटीकता है: यह देखता है कि आपके आउटपुट का कितना हिस्सा संदर्भ से मेल खाता है। बहुत छोटे पाठ से मॉडल के अनुचित लाभ को रोकने के लिए संक्षिप्तता दंड दिया जाता है।
सारांशों के लिए ROUGE
ROUGE सारांश बनाने के लिए प्रमुख मापदंड है। यह जाँचता है कि आपके सारांश ने संदर्भ की कितनी सामग्री पुनः प्राप्त की।
ROUGE पुनःप्राप्ति को महत्व देता है
ROUGE का ज़ोर पुनःप्राप्ति पर होता है: क्या आपके सारांश ने संदर्भ के महत्वपूर्ण शब्दों को शामिल किया? ROUGE-1 एकल-शब्द समानता गिनता है।
ROUGE-L और क्रम
ROUGE-L सबसे लंबे मिलते-जुलते शब्द-क्रम को देखता है। यह केवल शब्दों के बजाय संदर्भ का क्रम बनाए रखने वाले आउटपुट को अधिक अंक देता है।
ROUGE की गणना
मूल्यांकन पुस्तकालय स्कोर निकालने को एक ही पंक्ति का काम बना देता है। rouge को load करें और अपनी भविष्यवाणियाँ उनके संदर्भों के साथ दें।
import evaluate
rouge = evaluate.load("rouge")
print(rouge.compute(predictions=preds, references=refs))BLEU की गणना
BLEU भी इसी तरह काम करता है। ध्यान रखें कि हर भविष्यवाणी के लिए संदर्भों की एक सूची चाहिए, क्योंकि कई अनुवाद सही हो सकते हैं।
bleu = evaluate.load("bleu")
print(bleu.compute(predictions=preds, references=refs))अधिक होना बेहतर है
दोनों स्कोर समानता बढ़ने पर बढ़ते हैं। ये मॉडल की तुलना करने में उपयोगी हैं, लेकिन अकेली पूर्ण संख्या का अपने-आप में बहुत कम अर्थ होता है।
मापदंड अर्थ को नहीं समझते
ये मापदंड वास्तविक अर्थ के बजाय शब्दों की समानता गिनते हैं। अलग शब्दों में लिखा गया पूर्ण भावानुवाद भी कम स्कोर पा सकता है, इसलिए इनके साथ मानव समीक्षा भी करें।
त्वरित जाँच
कौन-सा मापदंड पुनःप्राप्ति पर केंद्रित है और सारांश बनाने के लिए मानक माना जाता है?
पुनरावलोकन
आपने बनाए गए पाठ का स्कोर निकालना सीखा: अनुवाद की सटीकता के लिए BLEU, सारांश की पुनःप्राप्ति के लिए ROUGE, और यह कि दोनों के लिए अब भी मानवीय निर्णय आवश्यक है। 🎯
एआई शिक्षक के साथ Python सीखें — निःशुल्क
अपने ब्राउज़र में वास्तविक कोड लिखें और चलाएँ, चौबीसों घंटे एआई शिक्षक से तुरंत सहायता पाएँ, और वेब या ऐप पर वहीं से शुरू करें जहाँ आपने छोड़ा था।
- पाठ्यक्रम
- 30
- पाठ
- 120
अक्सर पूछे जाने वाले प्रश्न
क्या “ROUGE और BLEU से जनरेशन का स्कोर” पाठ निःशुल्क है?
हाँ — NLP Academy अध्ययन पथ के 3 तक कोई भी पाठ, जिसमें “ROUGE और BLEU से जनरेशन का स्कोर” भी शामिल है, यहाँ वेब पर पूरा पढ़ना निःशुल्क है। इसके बाद CoddyKit PRO हर पाठ अनलॉक करता है, साथ ही अंतर्निर्मित कोड संपादक और चौबीसों घंटे एआई शिक्षक के साथ इंटरैक्टिव अभ्यास भी उपलब्ध कराता है। NLP Academy पाठ्यक्रम में कुल 4 पाठ शामिल हैं।
“ROUGE और BLEU से जनरेशन का स्कोर” में मैं क्या सीखूँगा?
सारांश और अनुवाद की गुणवत्ता मापें आप ब्राउज़र में सीधे चलाए जाने वाले व्यावहारिक कोड के साथ NLP Academy का अभ्यास करते हैं, और पाठ पूरा करते समय 24/7 एआई ट्यूटर आपके प्रश्नों के उत्तर देता है।
क्या NLP Academy शुरू करने के लिए मुझे किसी अनुभव की आवश्यकता है?
पहले के अनुभव की आवश्यकता नहीं है। CoddyKit पर NLP Academy शुरुआती से लेकर उन्नत शिक्षार्थियों तक सभी के लिए व्यवस्थित किया गया है, इसलिए आप यहीं से या शुरुआत से सीखना शुरू कर सकते हैं और अपनी गति से आगे बढ़ सकते हैं। यह 4 में से 4वाँ पाठ है।
“ROUGE और BLEU से जनरेशन का स्कोर” पाठ पूरा करने में कितना समय लगता है?
CoddyKit का अधिकांश पाठ लगभग 5–10 मिनट में पूरा हो जाता है। हर पाठ छोटा और संवादात्मक है, इसलिए आप लगातार प्रगति करते हैं और वेब या ऐप पर वहीं से सीखना जारी रख सकते हैं जहाँ आपने छोड़ा था।
क्या मैं इस NLP Academy पाठ में कोड लिख और चला सकता हूँ?
हाँ। हर NLP Academy पाठ में एक अंतर्निर्मित कोड संपादक शामिल है, जिससे आप सीधे अपने ब्राउज़र में वास्तविक कोड लिख और चला सकते हैं और तुरंत एआई प्रतिक्रिया पा सकते हैं—स्थानीय सेटअप की आवश्यकता नहीं है।
इस पाठ्यक्रम के सभी पाठ
- एक्सट्रैक्टिव बनाम एब्स्ट्रैक्टिव सारांश
- Seq2Seq मॉडल से सारांश बनाना
- व्यवहार में मशीन अनुवाद
- ROUGE और BLEU से जनरेशन का स्कोर