मोफत वापर, खाते नको

robots.txt टेस्टर

robots.txt मजकूर पेस्ट करा, क्रॉलर उत्पादन टोकन प्रविष्ट करा आणि 100 URL पर्यंत चाचणी करा. या डिव्हाइसवर परिणामांची गणना केली जाते; काहीही आणले किंवा अपलोड केले नाही.

येथे नियम पेस्ट करा. कमाल 200 KB, 5,000 ओळी आणि 2,000 परवानगी/नकारण्याचे नियम.

उदाहरण: Googlebot. फक्त टोकन एंटर करा, पूर्ण ब्राउझर वापरकर्ता-एजंट स्ट्रिंग नाही.

प्रति ओळ एक पूर्ण HTTP किंवा HTTPS URL एंटर करा, 100 पर्यंत. हे साधन त्यांना उघडत नाही.

हे सामान्य अनुमती/नकार नियमांचे स्थानिक पूर्वावलोकन आहे, प्रत्येक क्रॉलरसाठी संपूर्ण एमुलेटर नाही. असमर्थित निर्देश दुर्लक्षित म्हणून नोंदवले जातात. robots.txt प्रवेश नियंत्रण नाही आणि क्रॉलिंग, इंडेक्सिंग किंवा रँकिंगची हमी देत ​​नाही.

मी robots.txt नियमाची चाचणी कशी करू?

फाइल सामग्री पेस्ट करा, Googlebot सारखे क्रॉलर टोकन प्रविष्ट करा, प्रति ओळ एक पूर्ण URL जोडा आणि चाचणी नियम निवडा. पूर्वावलोकन निवडलेले गट आणि जुळणारे नियम, असल्यास दाखवते.

वारंवार विचारले जाणारे प्रश्न

मी robots.txt नियमाची चाचणी कशी करू?

फाइल सामग्री पेस्ट करा, Googlebot सारखे क्रॉलर टोकन प्रविष्ट करा, प्रति ओळ एक पूर्ण URL जोडा आणि चाचणी नियम निवडा. पूर्वावलोकन निवडलेले गट आणि जुळणारे नियम, असल्यास दाखवते.

हा परीक्षक माझी वेबसाइट आणतो किंवा माझे URL अपलोड करतो?

नाही. हे फक्त तुम्ही या ब्राउझरमध्ये प्रविष्ट केलेला मजकूर आणि URL वाचते. ते robots.txt आणत नाही, URL ला भेट देत नाही किंवा तुमचा डेटा अपलोड करत नाही.

robots.txt लोकांना पेज उघडण्यापासून थांबवते का?

क्रॉलर सूचना देते; ते खाजगी डेटाचे संरक्षण करत नाही. खाजगी पृष्ठांसाठी प्रमाणीकरण किंवा सर्व्हर प्रवेश नियंत्रणे वापरा.

अनुमत URL शोध परिणामांमध्ये दिसणे आवश्यक आहे का?

नाही. क्रॉलला परवानगी देणे हे हमी देत नाही की शोध इंजिन URL क्रॉल करेल, अनुक्रमित करेल किंवा रँक करेल.

हे साधन Google, Bing किंवा अन्य क्रॉलर थेट तपासते का?

नाही. हे तुम्ही एंटर केलेल्या क्रॉलर टोकनसाठी सामान्य नियमांचे पूर्वावलोकन करते. हे कोणत्याही शोध इंजिन किंवा वेबसाइटशी संपर्क साधत नाही.