האם האתר שלכם חוסם בשקט את עוזרי ה-AI?
קובץ קטן אחד באתר קובע אם Grok, Claude, ChatGPT ו-Gemini רשאים לקרוא אותו. רוב בעלי האתרים מעולם לא ראו את הקובץ. בדקו את שלכם בתוך כחמש שניות.
מה הקובץ שלכם אומר בפועל
הרשאת קריאה היא השלב הראשון, לא קו הסיום
האפשרות לקרוא את האתר אינה מבטיחה שעוזר ה-AI יבין אותו, וגם הבנה אינה מבטיחה שיוכל לעזור למישהו להירשם או לקנות. הסריקה המלאה בודקת את שלושת השלבים.
הפעלת הסריקה החינמית המלאהמה הבדיקה בוחנת
כל עוזר AI משתמש בקורא אוטומטי כדי להביא עמודי אינטרנט. לפני הקריאה הוא בודק את הקובץ robots.txt בראש האתר ומכבד את ההוראות שמופיעות בו.
לעיתים הקובץ הזה נכתב לפני שנים על ידי מי שבנה את האתר או נוסף אוטומטית באמצעות תוסף, ומאז איש לא בדק אותו. אתרים רבים דוחים בלי כוונה את עוזרי ה-AI שבהם הלקוחות שלהם משתמשים מדי יום.
הכלי קורא את הקובץ ומסביר בשפה פשוטה אילו עוזרי AI יכולים להיכנס ואילו נדחים. אנחנו לא משנים דבר באתר — רק קוראים.
הקוראים שאנחנו בודקים
Grok
xAI מפרסמת כמה שמות של סורקים עבור Grok. אנחנו בודקים את כולם.
Claude
Anthropic מפרידה בין קריאה לצורך שאלה בזמן אמת לבין איסוף תוכן ומשתמשת בשמות שונים.
ChatGPT
OpenAI משתמשת בשמות שונים לחיפוש, למענה על שאלה בזמן אמת ולאימון.
Gemini
Google מפרידה בין הקריאה של עוזר ה-AI לבין חיפוש רגיל, ולכן אפשר לאפשר אחד ולחסום את האחר.
אנחנו בודקים גם את Perplexity וקוראי AI כלליים ונפוצים. שמות הסורקים משתנים כשהספקים מעדכנים אותם; אנחנו מעדכנים את הרשימה, ולעולם לא מדווחים שסורק חסום אם איננו מזהים את שמו.
עוד בדיקות חינמיות
בדיקת llms.txt
בדקו אם אתם מפרסמים את הקובץ הקטן שמסביר לעוזרי AI מה אתם עושים — ומה כתוב בו.
רשימת בדיקה להתאמה לעוזרי AI
ארבעים בדיקות שמשפיעות על היכולת של עוזר AI למצוא, להבין ולהשתמש בעסק שלכם. עקבו אחר ההתקדמות וייצאו את התוצאות.
שאלו את עוזר ה-AI שלכם
ארבע שאלות שאפשר להציג לכל עוזר AI, כדי לשמוע את התשובה ממנו ולא מאיתנו.