मोफत वापर, खाते नको
robots.txt टेस्टर
robots.txt मजकूर पेस्ट करा, क्रॉलर उत्पादन टोकन प्रविष्ट करा आणि 100 URL पर्यंत चाचणी करा. या डिव्हाइसवर परिणामांची गणना केली जाते; काहीही आणले किंवा अपलोड केले नाही.
मी robots.txt नियमाची चाचणी कशी करू?
फाइल सामग्री पेस्ट करा, Googlebot सारखे क्रॉलर टोकन प्रविष्ट करा, प्रति ओळ एक पूर्ण URL जोडा आणि चाचणी नियम निवडा. पूर्वावलोकन निवडलेले गट आणि जुळणारे नियम, असल्यास दाखवते.
वारंवार विचारले जाणारे प्रश्न
मी robots.txt नियमाची चाचणी कशी करू?
फाइल सामग्री पेस्ट करा, Googlebot सारखे क्रॉलर टोकन प्रविष्ट करा, प्रति ओळ एक पूर्ण URL जोडा आणि चाचणी नियम निवडा. पूर्वावलोकन निवडलेले गट आणि जुळणारे नियम, असल्यास दाखवते.
हा परीक्षक माझी वेबसाइट आणतो किंवा माझे URL अपलोड करतो?
नाही. हे फक्त तुम्ही या ब्राउझरमध्ये प्रविष्ट केलेला मजकूर आणि URL वाचते. ते robots.txt आणत नाही, URL ला भेट देत नाही किंवा तुमचा डेटा अपलोड करत नाही.
robots.txt लोकांना पेज उघडण्यापासून थांबवते का?
क्रॉलर सूचना देते; ते खाजगी डेटाचे संरक्षण करत नाही. खाजगी पृष्ठांसाठी प्रमाणीकरण किंवा सर्व्हर प्रवेश नियंत्रणे वापरा.
अनुमत URL शोध परिणामांमध्ये दिसणे आवश्यक आहे का?
नाही. क्रॉलला परवानगी देणे हे हमी देत नाही की शोध इंजिन URL क्रॉल करेल, अनुक्रमित करेल किंवा रँक करेल.
हे साधन Google, Bing किंवा अन्य क्रॉलर थेट तपासते का?
नाही. हे तुम्ही एंटर केलेल्या क्रॉलर टोकनसाठी सामान्य नियमांचे पूर्वावलोकन करते. हे कोणत्याही शोध इंजिन किंवा वेबसाइटशी संपर्क साधत नाही.