Hugging Face, End to End · Chapter 01

The Hub, read properly

हगिंग फ़ेस हब को समझकर पढ़ें

3:05 · कृत्रिम आवाज़ में वर्णन। प्लेयर में कैप्शन उपलब्ध हैं।

प्रतिलेख पढ़ें

मान लीजिए कि साझा लैपटॉप पर आपको छोटी समीक्षाओं की राय पहचाननी है। हगिंग फ़ेस हब पर पहला मॉडल लोकप्रिय दिखता है, लेकिन क्या वह आपके लैपटॉप पर चलेगा? एक मॉडल चुनकर हम उसके दस्तावेज़ और फ़ाइलें देखेंगे, ताकि डाउनलोड से पहले सही फ़ैसला ले सकें। हब पर मॉडल ऐसी रिपॉज़िटरी में रहता है जहाँ फ़ाइलों के बदलाव दर्ज होते हैं। आपका कोड वही रहे, फिर भी मुख्य शाखा अगले कमिट पर जा सकती है। समान फ़ाइलों पर प्रयोग दोहराने के लिए उस कमिट की पहचान लिख लें और लोड करते समय वही चुनें। पहले काम चुनें, जैसे समीक्षाओं की राय पहचानना। फिर भाषा, इस्तेमाल की लाइब्रेरी और ज़रूरी लाइसेंस के आधार पर सूची छोटी करें। फ़िल्टर से उम्मीदवार मिलते हैं, इसलिए कार्ड पढ़ें और मॉडल को अपनी समीक्षाओं पर जाँचें। मॉडल कार्ड खोलकर देखें कि इसे किस मूल मॉडल से बनाया गया। अगर इसे दूसरों तक पहुँचाना है, तो इसके और मूल सामग्री के असली लाइसेंस की शर्तें पढ़ें। कार्ड में यह भी देखें कि मॉडल किस काम के लिए बना है, उसकी जाँच कैसे हुई और उसकी सीमाएँ क्या हैं। नाम में मॉडल के परिवार, पैरामीटरों की संख्या या निर्देश समझने वाले संस्करण का संकेत मिल सकता है। इससे उम्मीदवारों की तुलना आसान होती है। असली फ़ाइल प्रारूप और इनपुट की सीमा जानने के लिए कार्ड और कॉन्फ़िगरेशन देखें, और लाइसेंस के लिए उसकी लिखी शर्तें पढ़ें। कॉन्फ़िगरेशन मॉडल की बनावट बताता है, टोकनाइज़र की फ़ाइलें पाठ सँभालती हैं, और वेट्स में सीखे हुए मान रहते हैं। इंडेक्स बता सकता है कि कौन सा मान किस हिस्से में है। अलग फ़ाइल में बनाने की शुरुआती सेटिंग हो सकती है, और अडैप्टर के लिए उसका मूल मॉडल देखना पड़ता है। अनजान पिकल चेकपॉइंट खोलने पर उसका कोड चल सकता है। सेफ़ टेंसर का प्रारूप टेंसर का डेटा रखने के लिए बना है और उसे पढ़ने में पिकल की ज़रूरत नहीं पड़ती। अगर आप बाहरी मॉडल कोड चलाने की अनुमति देते हैं, तो पहले उस कोड को पढ़ें और उसी कमिट को तय करें। मॉडल की रिपॉज़िटरी इस्तेमाल के लिए फ़ाइलें देती है, डेटासेट उदाहरण देता है, और स्पेस में कोई ऐप आज़मा सकते हैं। दूर से मॉडल चलाने वाली सेवा अपने सर्वर पर काम करती है। निजी समीक्षा भेजने से पहले पता करें कि उसका पाठ किसके पास जाएगा। पाइथन के हब क्लाइंट से आप सूची खोज सकते हैं और वेट्स लेने से पहले रिपॉज़िटरी की जानकारी पा सकते हैं। फ़ाइलों की जानकारी माँगें, अपने चुने हुए प्रारूप के लिए ज़रूरी फ़ाइलें चुनें और उनके आकार जोड़ें। कैश के लिए जगह छोड़ें और चलाकर असली इस्तेमाल नापें। हब कुछ तय फ़ाइलों की माँग गिनता है, और गिनने का नियम लाइब्रेरी के अनुसार बदल सकता है। किसी मशीन की फ़ाइल जाँच भी इसमें जुड़ सकती है। यह गिनती सटीकता नहीं बताती, इसलिए मॉडल को अपनी समीक्षाओं पर जाँचें। साझा लैपटॉप के लिए काम, लाइसेंस, सटीक कमिट और डाउनलोड का अनुमान एक छोटे रिकॉर्ड में लिखें। साथ में जाँच के लिए दो समीक्षाएँ रखें। अगले अध्याय में देखेंगे कि उनका पाठ टोकनाइज़र से होकर मॉडल के जवाब तक कैसे पहुँचता है।

स्रोत और आगे पढ़ें (10)