تستر robots.txt

محتویات فایل را جایگذاری کنید، یک نشانه خزنده مانند Googlebot وارد کنید، یک URL کامل در هر خط اضافه کنید و قوانین تست را انتخاب کنید. پیش نمایش گروه انتخاب شده و قانون تطبیق را در صورت وجود نشان می دهد.

خیر. فقط متن و URL هایی را که در این مرورگر وارد می کنید می خواند. این برنامه robots.txt را واکشی نمی کند، از URL ها بازدید نمی کند، یا داده های شما را آپلود نمی کند.

نه. دستورات خزنده را می دهد. از داده های خصوصی محافظت نمی کند. از احراز هویت یا کنترل های دسترسی به سرور برای صفحات خصوصی استفاده کنید.

خیر. اجازه دادن به خزیدن تضمین نمی کند که موتور جستجو یک URL را بخزد، فهرست کند یا رتبه بندی کند.

نه. قوانین رایج برای توکن خزنده ای که وارد می کنید پیش نمایش می کند. با هیچ موتور جستجو یا وب سایتی تماس نمی گیرد.