AISearchBot

كيفية السماح بالزحف

اسمح لروبوتنا بالزحف في robots.txt:

User-agent: AISearchBot
Allow: /

إذا كان موقعك خلف WAF أو جدار حماية، أضِف الروبوت إلى الاستثناءات — بالـ User-Agent أو بعنوان IP الخاص بنا:

• Cloudflare: WAF → Custom rules → Skip، بشرط «User-Agent contains AISearchBot» (أو بعنوان IP الخاص بنا). أوقِف Bot Fight Mode / Browser Integrity Check له.
• Google Cloud Armor: قاعدة سماح بـ request.headers['user-agent'].contains('AISearchBot') أو بعنوان IP المصدر (عنوان egress IP الخاص بنا)، بأولوية أعلى من قواعد الحجب.
• Imperva: أضِف الـ User-Agent (أو IP) الخاص بنا إلى Allowlist / Good Bots كي يتجاوز الروبوت مرشّح التهديدات.

كيفية حجبه

إذا لم ترغب في أن يفهرس الروبوت موقعك (أو جزءًا منه)، فامنعه في robots.txt. يحترم الروبوت هذه القواعد:

User-agent: AISearchBot
Disallow: /