منشئ وسم meta robots وترويسة X-Robots-Tag

ابنِ وسم meta robots أو ترويسة X-Robots-Tag من قواعد Google الموثقة، وانظر التعارضات قبل النشر.

طريقة الاستخدام

ما الذي يفحصه وكيف يعمل

القواعد ومعانيها هي الواردة في توثيق Google لوسم robots meta وترويسة X-Robots-Tag. عند تعارض القواعد تطبّق Google الأشد تقييداً، فتلغي nosnippet القاعدة max-snippet. ولا أثر لـ indexifembedded إلا مع noindex. وتقبل unavailable_after تاريخاً بصيغة شائعة مثل ISO 8601، وتكتبه الأداة بها. تذكر Google أن noarchive لم يعد يُستخدم لرابط النسخة المخزنة، لذا لا تعرضه الأداة. ولا يستطيع الزاحف الالتزام بـ noindex إلا إذا جلب الصفحة، فلا تحظر الصفحة نفسها في robots.txt.

هل أستخدم الوسم أم الترويسة؟

استخدم الوسم لصفحات HTML، واستخدم ترويسة X-Robots-Tag للملفات التي لا head فيها مثل PDF والصور وملفات التنزيل. تحمل الاثنتان القواعد نفسها.

هل يعمل noindex إذا حظر robots.txt الصفحة؟

لا. يجب أن يجلب الزاحف الصفحة ليرى قاعدة noindex. فإذا حظر robots.txt الرابط لم تُقرأ القاعدة أبداً. اترك الصفحة قابلة للزحف واستخدم noindex.

ماذا تعني none؟

هي مثل noindex مع nofollow معاً. وتخبرك الأداة حين يؤدي اختيارك إلى ذلك.

المصادر

أدوات ذات صلة

الخصوصية

يعمل في متصفحك ولا يُرفع أي شيء. الأداة التفاعلية تحتاج إلى JavaScript.