robots.txt जनरेटर
allow/disallow नियमों और sitemap संदर्भों के साथ robots.txt फ़ाइलें जनरेट करें।
सभी क्रॉलर्स से मिलान करने के लिए * का उपयोग करें, या Googlebot जैसे बॉट निर्दिष्ट करें।
Disallow पाथ
Allow पाथ
कोई स्पष्ट Allow ओवरराइड नहीं जोड़ा गया।
सभी क्रॉलर्स से मिलान करने के लिए * का उपयोग करें, या Googlebot जैसे बॉट निर्दिष्ट करें।
Disallow पाथ
कोई ब्लॉक किए गए रूट नहीं जोड़े गए।
Allow पाथ
एम्बेडेड साइटमैप
जनरेट किया गया robots.txt