llms.txt क्या है: जानिए यह क्या करती है और क्या आपको इसे जोड़ना चाहिए?
कई SEO प्लगइन और एजेंसियाँ अब “llms.txt मौजूद नहीं है” को साइट की समस्या बताकर दिखाती हैं। इस पर समय लगाने से पहले जानिए कि यह फ़ाइल क्या है, Google और दूसरों ने असल में क्या कहा है, और वे कुछ मामले जिनमें इसे रखना फ़ायदेमंद है। अंतिम जाँच: अक्टूबर 2026।
llms.txt क्या है?
llms.txt, Answer.AI के Jeremy Howard का एक प्रस्ताव है, जिसे 3 सितंबर 2024 को प्रकाशित किया गया और जिसका वर्णन llmstxt.org पर है। विचार यह है कि एक भाषा मॉडल एक बार में सीमित मात्रा ही पढ़ सकता है, जबकि सामान्य वेब पेज मेन्यू, स्क्रिप्ट और विज्ञापनों से भरा होता है। एक छोटी Markdown फ़ाइल, जो आपके मुख्य पेजों के साफ़ संस्करणों की ओर इशारा करे, AI टूल को काम के हिस्से जल्दी ढूँढ़ने में मदद कर सकती है। यह उन टूल्स के लिए है जो सवाल का जवाब देते समय किसी साइट को पढ़ते हैं, जैसे डॉक्यूमेंटेशन पढ़ने वाले कोडिंग असिस्टेंट।
यह फ़ाइल कोई मानक नहीं है, और न ही रैंकिंग सिग्नल। यह दो पुरानी फ़ाइलों के साथ आती है जिन्हें असली समर्थन मिलता है:
Google और AI कंपनियाँ क्या कहती हैं?
- Google का डॉक्यूमेंटेशन AI Overviews और AI Mode के बारे में कहता है कि इन फ़ीचर्स में दिखने के लिए आपको नई मशीन-रीडेबल फ़ाइलें, AI टेक्स्ट फ़ाइलें या मार्कअप बनाने की ज़रूरत नहीं है। वह इसके बजाय सामान्य SEO की बुनियादी बातों की ओर इशारा करता है। देखें Google AI Overviews में कैसे दिखें।
- Google के John Mueller ने सार्वजनिक रूप से कहा है कि किसी भी AI सेवा ने नहीं कहा कि वह llms.txt इस्तेमाल करती है, और उन्होंने इसकी तुलना पुराने keywords मेटा टैग से की। जब पूछा गया कि क्या Google की एक डेवलपर साइट पर इस फ़ाइल की मौजूदगी उसका समर्थन है, तो उन्होंने कहा नहीं। Search Engine Roundtable ने इस बातचीत की रिपोर्ट दी।
- सर्वर-लॉग जाँचों में, जो साइट मालिकों और विश्लेषकों ने प्रकाशित कीं, आमतौर पर AI क्रॉलर्स से इस फ़ाइल के बहुत कम अनुरोध मिले हैं। ये तीसरे पक्ष के विश्लेषण हैं, कंपनियों के बयान नहीं, इसलिए सटीक संख्याओं को सावधानी से लें।
- कुछ वेंडर दावा करते हैं कि कुछ AI टूल यह फ़ाइल पढ़ते हैं। हमें किसी बड़े प्रोवाइडर का आधिकारिक बयान नहीं मिला जो इसकी पुष्टि करे, इसलिए हम इस पर भरोसा नहीं करते।
क्या आपकी साइट पर llms.txt जोड़ना फ़ायदेमंद है?
यह इस पर निर्भर करता है कि आपकी साइट कैसी है।
- डॉक्यूमेंटेशन, API और डेवलपर प्रोडक्ट: हाँ, यह उचित है। प्रस्ताव इसी स्थिति के लिए लिखा गया था, क्योंकि कोडिंग असिस्टेंट और एजेंट काम करते समय ये पेज पढ़ते हैं।
- ब्लॉग, स्थानीय व्यवसाय और दुकानें: वैकल्पिक। इसमें एक घंटे से कम लगता है और कोई नुकसान नहीं होता, लेकिन यह उन चीज़ों की जगह नहीं ले सकती जो असल में मायने रखती हैं: इंडेक्स होने लायक पेज, काम का कंटेंट, लेखक की साफ़ पहचान और अच्छे इंटरनल लिंक।
- जो भी इसे रैंकिंग का इलाज बताकर बेचे, उस पर शक करें। हमारी अपनी साइट भी एक फ़ाइल प्रकाशित करती है क्योंकि इसकी लागत लगभग शून्य है, लेकिन हम इससे अपनी रैंकिंग या AI सिटेशन बदलने की उम्मीद नहीं करते।
llms.txt फ़ाइल कैसे बनाएँ
प्रस्ताव का फ़ॉर्मेट सरल Markdown है: एक शीर्षक, कोट ब्लॉक में छोटा सारांश, फिर हेडिंग के नीचे लिंक की सूची, जिसमें हर लिंक के साथ एक पंक्ति का नोट हो। एक छोटा उदाहरण:
# Example Company
> Example Company sells handmade candles and explains how to choose and care for them.
## Guides
- [How to choose a candle](https://example.com/choose-a-candle/): Types of wax and scent strength explained
- [Candle care](https://example.com/candle-care/): Trimming wicks and burning safely
## Products
- [All candles](https://example.com/shop/): Current range and pricesइसे ऐसे अपलोड करें कि यह https://yoursite.com/llms.txt पर सादे टेक्स्ट के रूप में खुले। WordPress पर कुछ SEO प्लगइन इसे बना सकते हैं, या आप इसे स्टैटिक फ़ाइल के रूप में जोड़ सकते हैं। इसका इस्तेमाल कुछ छिपाने या ब्लॉक करने के लिए न करें: एक्सेस कंट्रोल का काम अब भी robots.txt का है।
इसके बजाय अपना समय किस पर लगाएँ
अगर आपका लक्ष्य Google में मिलना और AI के जवाबों में उद्धृत होना है, तो सबूत उन सीधी-सादी बुनियादी बातों की ओर इशारा करते हैं: क्रॉल और इंडेक्स होने वाले पेज, ऊपर के हिस्से में सीधा जवाब, लेखक और स्रोतों की साफ़ जानकारी, मौलिक इमेज और सटीक स्ट्रक्चर्ड डेटा। हमारी Google SEO, GEO और AEO की गाइड बताती है कि ये सब कैसे जुड़ते हैं, और AI-जनरेटेड कंटेंट की हमारी गाइड में बताया गया है कि किन चीज़ों से बचना है।
अक्सर पूछे जाने वाले सवाल
-
llms.txt क्या है?
llms.txt वेबसाइट के रूट पर रखी जाने वाली एक प्रस्तावित Markdown फ़ाइल है, जो छोटे नोट्स के साथ मुख्य पेजों की सूची देती है और AI टूल्स को साइट समझने में मदद करने के लिए है। इसे सितंबर 2024 में Answer.AI के Jeremy Howard ने प्रस्तावित किया था।
क्या Google llms.txt का इस्तेमाल करता है?
Google ने कहा है कि Search इसका इस्तेमाल नहीं करता और उसके AI फ़ीचर्स में दिखने के लिए नई AI टेक्स्ट फ़ाइलों की ज़रूरत नहीं है। Google के John Mueller ने कहा है कि किसी AI सेवा ने यह नहीं कहा कि वह इस फ़ाइल का इस्तेमाल करती है।
क्या llms.txt से मेरी रैंकिंग या AI सिटेशन बेहतर होंगे?
इसका कोई पुष्ट सबूत नहीं है। इंडेक्स होने लायक, काम के पेजों पर ध्यान दें, जिनमें लेखक और स्रोतों की साफ़ जानकारी हो।
क्या llms.txt और robots.txt एक ही चीज़ हैं?
नहीं। robots.txt तय करती है कि क्रॉलर्स साइट के किन हिस्सों तक पहुँच सकते हैं, और इसे व्यापक समर्थन मिला हुआ है। llms.txt आपके मुख्य कंटेंट की प्रस्तावित गाइड है और एक्सेस को नियंत्रित नहीं करती।
क्या llms.txt मेरी साइट को नुकसान पहुँचा सकती है?
अगर यह सटीक है तो नुकसान की संभावना कम है। इसे छोटा रखें, लिंक चालू रहें यह सुनिश्चित करें, और इसमें कुछ भी निजी न डालें, क्योंकि यह फ़ाइल सार्वजनिक होती है।
किसे llms.txt फ़ाइल जोड़नी चाहिए?
यह डॉक्यूमेंटेशन, API और डेवलपर साइट्स के लिए सबसे उपयुक्त है, जहाँ AI कोडिंग टूल पेज पढ़ते हैं। ब्लॉग और स्थानीय व्यवसायों के लिए यह वैकल्पिक है।
