Cloudflare חוסם סורקי AI: מה זה אומר על בקלינקים

ב-15 בספטמבר 2026, Cloudflare הפעילה ברירת מחדל שנוגעת לחמישית מהרשת, והיא שינתה בשקט את מה שקישור נכנס יכול לעשות בשבילכם. דפים המוגנים על ידי Cloudflare חוסמים כעת סורקי בינה מלאכותית "בשימוש מעורב" כברירת מחדל באתרים נתמכי פרסום, בעוד שסורקי חיפוש קלאסיים כמו Googlebot ממשיכים לעבור. לכל מי שקונה קישורים, זה יוצר פיצול שלא היה קיים קודם: קישור עדיין יכול להעביר ערך מלא לחיפוש של Google ולהעביר no ערך לקראת ציטוטי חיפוש AI, אך ורק בגלל הגדרות הבוט של התורם. הנה מה שהשתנה, למה זה חשוב לפרופיל הקישורים שלכם, והבדיקה האחת להריץ על תורם לפני שאתם משלמים.

מה Cloudflare באמת שינתה

העמדה של Cloudflare היא שיוצרים, לא חברות AI, צריכים להחליט מי מקבל את התוכן שלהם. כפי שהודעת ה-pay-per-crawl שלה ניסחה זאת: "אם יוצר רוצה לחסום את כל סורקי ה-AI מהתוכן שלו, עליו להיות מסוגל לעשות זאת. אם יוצר רוצה לאפשר לחלק או לכל סורקי ה-AI גישה מלאה לתוכן שלו בחינם, עליו להיות מסוגל לעשות גם את זה." השינוי של 15 בספטמבר הפך את העיקרון הזה לברירת מחדל.

המכניקה חשובה. בדפים נתמכי פרסום, Cloudflare חוסמת כעת סורקים ב- הדרכה ו סוכן קטגוריות כברירת מחדל, וחוסם סורקי "שימוש מעורב" שלא מפרידים בצורה נקייה בין מה שהם עושים. טהור search סורקים נשארים מורשים, ולכן Googlebot לא מושפע. מוציאים לאור יכולים גם לבחור ב-Pay Per Crawl, ולהגדיר כל סורק לאחת משלוש מצבים - "אפשר" (חינם), "חייב" (דרוש תשלום) או "חסום" - כאשר Cloudflare פועלת כסוחר הרשום. דגם ה-Pay Per Use החדש יותר, שהוכרז ב-1 ביולי 2026, משלם למוציאים לאור על אירוע הפלט, כאשר התוכן שלהם מופיע בתשובה שנוצרה על ידי AI, ולא על כל סריקה.

פרט ההיקף המכריע: ברירת המחדל הזו חלה על דומיינים חדשים ותוכניות חינמיות. אתר מבוסס שכבר נמצא ב-Cloudflare לא מתחיל ב-15 בספטמבר. אבל ההטיה הזו חשובה לקוני קישורים, כי חלק גדול מאתרי התורמים הזולים שזה עתה הוקמו הם בדיוק הנכסים של הדומיינים החדשים בתוכנית החינמית שזה פוגע בהם הכי קשה.

למה זה חשוב לקישורים הנכנסים שלכם

קישור חיצוני עושה עבודה רק אם הדף שהוא יושב עליו יכול להיקרא על ידי הדבר שאתם רוצים להשפיע עליו. עבור SEO קלאסי, הקורא הזה הוא Googlebot - ו-Googlebot עדיין עובר דרך ברירת המחדל החדשה של Cloudflare. עבור חיפוש AI, הקוראים הם קבוצה אחרת לגמרי של בוטים, ואלה הם אלה שעכשיו מסורבים. התוצאה היא פיצול דו-ערוצי בקישור יחיד:

סורק	מטרה	Cloudflare default (ad pages)	השפעה על הקישור שלך
Googlebot	חיפוש קלאסי	מותר	ערך מלא לדירוגי Google
GPTBot (OpenAI)	הדרכה / סוכן	נחסם	אין נתיב לתשובות ChatGPT
ClaudeBot (Anthropic)	הדרכה / סוכן	נחסם	אין נתיב לתשובות Claude
PerplexityBot	סוכן / מנוע תשובות	נחסם	אין נתיב לציטוטי Perplexity

קרא את זה כאזהרה למטרת ה-נראות בבינה מלאכותית שלקוני קישורים רבים כל כך מחזיקים היום. סיקרנו ב כתבה על מאיפה מגיעים קישורים שמצוטטים על ידי AI שחלק הולך וגדור של תקציבי קישורים מכוון לקבלת אזכור מ-ChatGPT ו-Perplexity, לא רק דירוג בעמוד הראשון. אם עמוד התורם נמצא מאחורי ברירת המחדל החדשה של Cloudflare, הכסף הזה לא קונה שום דבר לעבר ציטוטי AI - סורקי ה-AI לעולם לא רואים את הקישור. עבור SEO טהור של Google, הקישור בסדר. עבור חיפוש AI, הוא עשוי להיות בלתי נראה.

התורם שקנית עלול להיות כבר בלתי נראה ל-AI

זה לא תיאורטי. קישור זול שממוקם באתר חדש לגמרי על תוכנית חינמית של Cloudflare הוא, לפי ברירת המחדל הזו, כנראה חוסם כעת כל סורק AI. לעולם לא הייתם יודעים מציון DR או מגרף תנועה. הבדיקה פשוטה, וזו הבדיקה שכמעט אף אחד לא מבצע:

• אחזר את הדף כסורק AI. בקש את ה-URL של התורם עם שם-משתמש של GPTBot או ClaudeBot ובדוק אם אתה מקבל את התוכן או חסימה. 403 או דף אתגר אומרים שהקישור בלתי נראה למנוע זה.
• קרא את ה-robots.txt. מפורש Disallow חוקים עבור GPTBot, ClaudeBot, Google-Extended או PerplexityBot הם אות ישיר שהאתר בחר להרחיק בינה מלאכותית.
• בדקו אם מדובר בדומיין חדש על תוכנית חינמית. אלה המאפיינים שברירת המחדל של Cloudflare מכוונת אליהם. תורם שנרשם זה עתה הוא המקרה בסיכון הגבוה ביותר.
• אשר שהעמוד אכן נטען עבור בוט. קישור בתוך תוכן שרק אדם מחובר רואה לא מעביר שום דבר לאף סורק, AI או אחר.

מה לבדוק לפני קניית קישור לנראות ב-AI

אם המטרה שלכם כוללת ציטוט על ידי מנועי AI, מדיניות הבוטים של התורם היא עכשיו קריטריון קנייה ממדרגה ראשונה, יושב מימין לרלוונטיות ותעבורה אמיתית:

• גישת סורקי AI. על התורם לאפשר ל-GPTBot, ClaudeBot ו-PerplexityBot לשלוף את התוכן שלו. זה האות החדש והמכריע, וזה שהשוק עדיין לא בודק.
• גישת Googlebot. עדיין מותר תחת ברירת המחדל, אבל אשרו את זה בכל זאת - אתר שמוגדר לא נכון יכול לחסום הכל.
• תעבורה אמיתית ורלוונטיות. ללא שינוי. דף נגיש ללא קוראים וללא התאמה תמטית הוא עדיין קישור חלש.
• מבוסס, לא טרי שנוצר. תורמים של דומיינים חדשים בתוכנית החינמית שסביר שיחסמו סורקי AI הם גם המיקומים באיכות הנמוכה ביותר מכל סיבה אחרת.

הקו המאחד הוא שנגישות AI ואיכות קישורים מצביעים לאותו כיוון. התורמים שחוסמים סורקי AI כברירת מחדל הם במידה לא פרופורציונית האתרים הזולים, החדשים, בתוכנית החינמית שאתם אמורים להימנע מהם ממילא.

איפה זה משאיר קוני קישורים

Cloudflare זה עתה הפך את מדיניות הבוטים של תורם לחלק מהערך של קישור. מיקום באתר אמיתי ומבוסס שמאפשר לסורקי AI להיכנס יכול להזין גם דירוגי Google וגם ציטוטי AI. מיקום באתר חדש, עמוס פרסומות, בתוכנית חינמית עשוי שלא להזין אף אחד מהם. זה בדיוק המסנן שעומד מאחורי איך Rixot מקור מיקומים: פרסומים עם תעבורה אמיתית וקהל אמיתי שגם קוראים וגם מנועי AI באמת מתקשרים איתם, ולא אתרי DR גבוה שאף אחד לא בבית. ככל שתשובות AI סופגות יותר מהחיפוש, "מי בעצם קורא את התורם הזה" מפסיקה להיות נחמד-להיות והופכת לנקודת הקישור.

שאלות נפוצות

האם Cloudflare חוסמת את Googlebot?

לא. ברירת המחדל של Cloudflare מ-15 בספטמבר, 2026 חוסמת סורקי AI מעורבים ולאימון/סוכן בדפים נתמכי פרסום, אבל סורקי חיפוש למטרה אחת כמו Googlebot נשארים מותרים. SEO קלאסי של גוגל אינו מושפע מברירת המחדל.

אילו סורקי AI חסימת ברירת המחדל של Cloudflare חוסמת?

סורקים בקטגוריות האימון והסוכנים, וסורקים "בשימוש מעורב" שלא מפרידים בין הפונקציות שלהם - בפועל GPTBot, ClaudeBot, PerplexityBot ודומיהם. החסימה חלה כברירת מחדל בדפים הנתמכים בפרסום עבור דומיינים חדשים ותוכניות חינמיות.

איך זה משפיע על הקישורים שלי?

אם דף התורם שמארח את הקישור שלכם חוסם סורקי AI, הקישור הזה לא יכול לתרום לציטוטים ב-ChatGPT, Claude או Perplexity, למרות שהוא עדיין מעביר ערך ל-Google Search. למטרות נראות AI, תורם חסום-AI הוא ביעילות מת.

איך בודקים אם תורם חוסם סורקי AI?

אחזר את הדף באמצעות סוכן משתמש של GPTBot או ClaudeBot ובדוק אם אתה מקבל את התוכן או 403/אתגר, וקרא את robots.txt של האתר לחוקי Disallow נגד GPTBot, ClaudeBot, Google-Extended או PerplexityBot. דומיינים חדשים בתוכניות Cloudflare חינמיות הם בסיכון הגבוה ביותר.

מה זה Cloudflare Pay Per Crawl?

הוא מאפשר למו"לים להגדיר כל סורק בינה מלאכותית ל-Allow (חינם), Charge (דרש תשלום) או Block, כש-Cloudflare כסוחר של הרישום. מודל ה-Pay Per Use הקשור, שהוכרז ב-1 ביולי 2026, משלם למו"לים כאשר התוכן שלהם מופיע בתשובה שנוצרה על ידי בינה מלאכותית.

מקורות

• Cloudflare - "הצגת תשלום לפי סריקה," blog.cloudflare.com
• TechCrunch - "המדיניות החדשה של Cloudflare דוחפת חברות AI לשלם עבור תוכן של מפרסמים" (1 ביולי, 2026), techcrunch.com
• The Next Web - "Cloudflare יחסום סורקי AI, ישלם למוציאים לאור," thenextweb.com