AISearchBot

מהו AISearchBot?

AISearchBot הוא סורק האינטרנט המופעל על ידי Achla AI, שירות מנוהל של חיפוש AI. הוא מאנדקס את העמודים הציבוריים של אתרים שהטמיעו את וידג'ט החיפוש של Achla AI, כדי שאתרים אלה יוכלו לענות למבקרים שלהם מתוך התוכן שלהם עצמם, עם קישורים למקורות. AISearchBot מבקר רק באתרי הלקוחות של Achla AI, מכבד את robots.txt ומזדהה עם User-Agent קבוע, AISearchBot/1.0 (+https://achlaai.com/bot; managed site search), מכתובת IP סטטית יחידה, 35.223.115.47. ניתן לוודא שבקשה אכן מגיעה מ-AISearchBot על ידי בדיקה ששני הערכים — מחרוזת ה-User-Agent וכתובת ה-IP של המקור — תואמים לערכים אלה. הבוט אינו שולח נתוני טפסים, אינו מנסה להתחבר ואינו סורק עמודים שנחסמו ב-robots.txt שלכם. כדי לחסום אותו, אסרו על AISearchBot ב-robots.txt.

כיצד לאפשר ל-AISearchBot לסרוק את האתר שלי?

אפשרו לבוט שלנו לסרוק ב-robots.txt:

User-agent: AISearchBot
Allow: /

אם האתר שלכם מאחורי WAF או חומת אש, הוסיפו את הבוט לחריגים — לפי User-Agent או לפי ה-IP שלנו:

• Cloudflare: WAF → Custom rules → Skip, בתנאי “User-Agent contains AISearchBot” (או לפי ה-IP שלנו). כבו עבורו את Bot Fight Mode / Browser Integrity Check.
• Google Cloud Armor: כלל allow עם request.headers['user-agent'].contains('AISearchBot') או לפי כתובת ה-IP המקורית (ה-egress IP שלנו), בעדיפות מעל כללי החסימה.
• Imperva: הוסיפו את ה-User-Agent שלנו (או ה-IP) ל-Allowlist / Good Bots כדי שהבוט ידלג על מסנן האיומים.

כיצד לחסום את AISearchBot?

אם אינכם רוצים שהבוט יאנדקס את האתר שלכם (או חלק ממנו), חסמו אותו ב-robots.txt. הבוט מכבד את הכללים האלה:

User-agent: AISearchBot
Disallow: /