רשת האינטרנט עוברת שינוי במבנה התעבורה העולמי, כאשר סוכני בינה מלאכותית וסורקי נתונים אוטומטיים הופכים לצרכני התשתית המרכזיים. מתיו פרינס (Matthew Prince), מנכ"ל חברת Cloudflare המציעה שירותי אבטחה ותשתיות עבור יותר מ- 20% מהאתרים ברשת, מזהיר כי בתוך חמש שנים בלבד היקף התעבורה האוטומטית באינטרנט עשוי להיות גדול פי 1,000 מהיקף תנועת הגולשים האנושיים. פרינס הודה כי כל התחזיות המוקדמות של חברתו בנוגע לקצב צמיחת הבוטים התבררו כשמרניות מדי, שכן התפשטות הכלים האוטומטיים הייתה מהירה מכל הערכה. בעוד שבתקופה הקודמת עוד הניחו בחברה כי התעבורה האוטומטית תעבור את זו האנושית רק במהלך שנת 2027, הנתונים העדכניים של Cloudflare הראו כי נקודת המהפך הזו כבר התרחשה בפועל השנה.
מהפך בקצב מואץ: האוטומציה כבר שולטת ברשת
לדברי פרינס, הדינמיקה של הגלישה האנושית נותרה כמעט יציבה וללא שינוי משמעותי, בעוד שכל הגידול המסיבי בתנועת הנתונים מונע כיום על ידי סורקי תוכן וסוכני בינה מלאכותית (AI Agents) המופעלים ברחבי העולם. העדכון בהערכות הגיע לאחר שסדרת תחזיות מוקדמות נאלצה להתעדכן שוב ושוב כלפי מטה בתוך חודשים ספורים. בנובמבר שעבר הוערך כי התעבורה האוטומטית תעבור את האנושית במחצית השנייה של 2027. עד חודש מרץ השנה התעדכנה ההערכה למחצית הראשונה של 2027, אך כבר בחודש מאי הבהירו צוותי הנתונים של החברה לפרינס כי המהפך כבר התרחש. "חמש שנים מהיום, אנחנו מעריכים שהתעבורה האוטומטית תהיה גדולה פי 1,000 מהתעבורה האנושית ברשת."
המודל הכלכלי נשבר: החייאת קוד HTTP 402
הגידול בתנועת הבוטים מעמיד בסכנה את המודל הכלכלי שהניע את הרשת במשך כשלושה עשורים, המבוסס בעיקרו על פרסומות דיגיטליות. פרינס ציין נקודה פשוטה אך מכרעת לגבי המודל הקיים: "בוטים לא לוחצים על פרסומות." כדי להתמודד עם השינוי, Cloudflare משתפת פעולה עם חברות התשלומים Stripe ו-Coinbase במטרה להחיות את קוד השגיאה המקורי HTTP 402, שמשמעותו "נדרש תשלום" (Payment Required). הציפייה היא שאפשרות זו תאפשר לבעלי אתרים לגבות תשלום זעיר מסוכני AI עבור כל דף שהם סורקים, כאשר עבור תוכן בעל ערך גבוה ניתן יהיה לגבות סכומים גבוהים יותר. לפי פרינס, נרשמת נכונות הן מצד חברות AI המעוניינות לרכוש נתונים והן מצד מוציאים לאור גדולים. עם זאת, המהלך מעורר גם ספקות בתעשייה; מנכ"ל יאהו (Yahoo), ג'ים לנזון, טען לאחרונה כי מיקרו-תשלומים מסוג זה לעולם לא יספיקו כדי לכלכל גופי תוכן.
חסימת גוגל כברירת מחדל ומודלים של רישוי
כחלק מהמאבק על הגנת תכנים, החל מ-15 בספטמבר הגדירה Cloudflare ברירת מחדל חדשה עבור לקוחותיה במסלול החינמי, החוסמת את הסורקים של גוגל מלהשתמש בתכני האתרים לצורך אימון מודלי AI, אלא אם בעלי האתר יבחרו לבטל את החסימה באופן יזום. "אם הם לא יבדילו בין אימון AI לבין סריקה עבור מנוע החיפוש, אנחנו פשוט נחסום אותם מקצה לקצה." גוגל מצדה התחייבה להגדיל את השקיפות לגבי אופן הפעולה של הסורקים שלה בעקבות פסיקה בבריטניה, והבהירה כי תציג את מטרת הסריקה בכל עמוד ותאפשר למוציאים לאור לבחור.
פרינס עצמו, המחזיק יחד עם רעייתו במקומון Park Record ביוטה, מעריך כי העיתון ירוויח השנה מהסכמי רישוי מול חברות AI סכום גבוה יותר מזה שיניבו לו פרסומות דיגיטליות. הוא הוסיף כי בעסקאות רישוי AI, רשת Reddit מרוויחה פי 7 עד 14 יותר לכל טוקן בהשוואה לעיתון הניו יורק טיימס.
למה זה חשוב לך
האזהרה של Cloudflare מבהירה למפתחים, לארכיטקטי מערכת ולמומחי תשתיות כי האינטרנט העתידי יתוכנן בעיקר עבור סוכני AI ואוטומציות, ופחות עבור משתמשים אנושיים. כאשר רוב התעבורה ברשת מורכבת מבוטים המעבדים מידע בקנה מידה עצום, התשתיות הדיגיטליות, מודלי התמחור ומנגנוני האבטחה יצטרכו לעבור התאמה מחדש למציאות שבה האדם הוא כבר לא הצרכן המרכזי של תוכן ברשת.
התוכן בכתבה זו נועד לספק סקירה כללית בלבד ואינו מהווה תחליף לייעוץ מקצועי פרטני. המערכת אינה אחראית לכל נזק או הפסד שייגרם כתוצאה מהסתמכות על המידע המוצג.
קראו גם: הכסף עובר לתשתיות: Modal Labs בדרך לגיוס לפי שווי 15.75 מיליארד דולר · AMD רוכשת את World Labs בעסקה של יותר מ-8 מיליארד דולר
