الزحف والفهرسة
أداة التعرف على زواحف الذكاء الاصطناعي
ألصق سلاسل وكيل المستخدم أو أسطر السجل للتعرف على زواحف الذكاء الاصطناعي ومعرفة غرض كل منها.
يعمل في متصفحك ولا يُرفع أي شيء. · مجانية، دون حساب · 2 دقيقة
استيراد العملية المحفوظة إلى حسابك سيتوفر قريباً. وحتى ذلك الحين تبقى آخر عملياتك في هذا المتصفح فقط، ويمكنك تنزيل ملفاتك.
طريقة الاستخدام
- ألصق سلاسل وكيل المستخدم أو أسطراً من سجل خادمك، سطراً لكل واحد، أو ابحث في السجل بالاسم.
- اقرأ الجدول: الزاحف وشركته وغرضه وأثر حظره.
- انتبه إلى التحذيرات مثل وكيل قد لا يتبع robots.txt.
- استخدم منشئ robots.txt لزواحف الذكاء الاصطناعي لتسمح أو تحظر ما تختاره.
ما الذي تفحصه وكيف تعمل
يسرد السجل الزواحف التي تصفها OpenAI وAnthropic وPerplexity وGoogle وApple وMeta وAmazon وDuckDuckGo وMistral وCommon Crawl وByteDance، وقد روجع كل منها على توثيق الشركة نفسها في 28 أكتوبر 2026 مع رابط الصفحة. تحتوي ترويسة وكيل المستخدم على رمز الزاحف، لذا تطابق الأداة الرمز كجزء من السطر دون حساسية لحالة الأحرف.
تُظهر المطابقة ما تدّعيه سلسلة وكيل المستخدم لا من أرسل الطلب: يستطيع أي عميل إرسال أي سلسلة. وتنشر الشركات نطاقات عناوين IP للتحقق من الزاحف؛ راجع توثيقها. وGoogle-Extended وApplebot-Extended رمزا تحكم في robots.txt ولا يظهران وكيل مستخدم في أي طلب.
المصادر
- RFC 9309: Robots Exclusion Protocol اطُّلع عليه في 29 أكتوبر 2026
- OpenAI: Overview of OpenAI crawlers اطُّلع عليه في 28 أكتوبر 2026
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler? اطُّلع عليه في 28 أكتوبر 2026
- Perplexity: Perplexity crawlers اطُّلع عليه في 28 أكتوبر 2026
- Google: Google's common crawlers اطُّلع عليه في 28 أكتوبر 2026
- Apple: About Applebot اطُّلع عليه في 28 أكتوبر 2026
- Meta: Meta web crawlers اطُّلع عليه في 28 أكتوبر 2026
- Amazon: Amazonbot اطُّلع عليه في 28 أكتوبر 2026
- DuckDuckGo: DuckAssistBot اطُّلع عليه في 28 أكتوبر 2026
- Mistral: Mistral crawlers اطُّلع عليه في 28 أكتوبر 2026
- Common Crawl: CCBot اطُّلع عليه في 28 أكتوبر 2026
- Google: AI features and your website اطُّلع عليه في 28 أكتوبر 2026
- Bing Webmaster Blog: new options to control use of content in Bing Chat (22 Sep 2023) اطُّلع عليه في 28 أكتوبر 2026
أدوات ذات صلة
منشئ robots.txt لزواحف الذكاء الاصطناعي
اختر أي زواحف الذكاء الاصطناعي يحق لها قراءة موقعك، واحصل على ملف robots.txt يتبع توثيق كل شركة نفسها.
مختبر روابط robots.txt
ألصق ملف robots.txt وقائمة روابط لترى أيها محظور على أي زاحف، وأي سطر حسم النتيجة.
مدقق llms.txt
ألصق ملف llms.txt لفحص بنيته وفق صيغة llmstxt.org.
منشئ وسم meta robots وترويسة X-Robots-Tag
ابنِ وسم meta robots أو ترويسة X-Robots-Tag من قواعد Google الموثقة، وانظر التعارضات قبل النشر.
تابع مع ظاهر: اقرأ: كيف تفحص ظهورك في الذكاء الاصطناعي
أسئلة
عن هذه الأداة
لا. يستطيع أي شخص إرسال أي سلسلة. للتحقق من زاحف قارن عنوان IP للطلب بالنطاقات التي تنشرها الشركة كما في توثيقها المرتبط في هذه الصفحة.
تصف الشركات زواحف التدريب بأنها تجمع محتوى قد يُستخدم في تدريب النماذج، وزواحف البحث بأنها تبني فهرساً يجيب منه المساعد. ولحظر كل منهما أثر مختلف يظهر في الجدول.
لا تنشر ByteDance توثيقاً له، فلا تستطيع الأداة تأكيد سلوكه من مصدر الشركة وتقول ذلك.
ابدأ اليوم
اعرف أين تقف علامتك في الذكاء الاصطناعي. مجاناً.
شغّل تحليل ظهور مجانياً على نطاقك. دون بطاقة ائتمان، والنتائج خلال دقائق. اعرف ما تقوله محركات الذكاء الاصطناعي عن علامتك اليوم.
علامات تقيس ظهورها في الذكاء الاصطناعي مع ظاهر.


