הודות לעסקת AI חדשה, גוגל היא כעת מנוע החיפוש היחיד שיכול לגרד את Reddit כדי להציג פוסטים חדשים בתוצאות החיפוש שלו. אם מתחרים כמו Bing או DuckDuckGo רוצים שהמשתמשים שלהם יראו אותו דבר, הם יצטרכו לשלם.
כך עולה מדו"ח חדש של 404 Media, שזיהה לראשונה שמנועי חיפוש מלבד גוגל אינם מציגים תוצאות של Reddit מהשבוע האחרון בתוצאות החיפוש שלהם. אם, כמוני, אתה מתייג לעתים קרובות ב-"Reddit" או "site:reddit.com" לשאילתות החיפוש שלך, תגלה שהתוצאות די מאכזבות ב-Bing או DuckDuckGo כרגע. אתה תראה פוסטים מיושנים של Reddit או קישור שכתוב "אנחנו רוצים להראות לך תיאור כאן אבל האתר לא יאפשר לנו."
דובר Reddit, טים רתשמידט, אמר ל-Verge שהפיתוח הזה "בכלל לא קשור לשותפות האחרונה שלנו עם גוגל", בהתייחסו לעסקה של 60 מיליון דולר שנחתמה בפברואר כדי לאפשר לחברה לאמן את דגמי הבינה המלאכותית שלה על התוכן של Reddit.
"היינו בדיונים עם מספר מנועי חיפוש", אמר דובר Reddit, טים רתשמידט, ל-Verge. "לא הצלחנו להגיע להסכמות עם כולם, מכיוון שחלקם אינם מסוגלים או לא רוצים להבטיח הבטחות ניתנות לאכיפה בנוגע לשימוש שלהם בתוכן Reddit. כולל השימוש בהם עבור AI."
אז במקום כל סוג של הסכם בלעדיות, נראה שהוא קשור לתקיפה האחרונה של Reddit נגד סורקי אינטרנט. מוקדם יותר החודש, כדי לאכוף את המדיניות שלה נגד גרידה, Reddit שיפצה את קובץ ה-robots.txt של האתר, שמפנה את סורקי הבינה המלאכותית לאילו דפים הם יכולים או לא יכולים לאסוף מידע. על ידי מניעת מנועי חיפוש מסוימים לגרד את הדפים שלו עם בוטים של AI, Reddit בעצם חוסמת את התוכן שלה כדי להרחיק אותו מתוצאות החיפוש. בקיצור, Reddit לוקחת את הכדור והולכת הביתה. אלא אם כן אתה רוצה לשחק לפי הכללים שלה, כלומר, מה שגוגל, כמובן, נראית להוטה לעשות.
דוברת מיקרוסופט, קייטלין רולסטון, אישרה ל-Verge כי בינג הפסיקה לאסוף תוכן מ-Reddit לאחר שעדכנה את קובץ ה-robots.txt שלה ב-1 ביולי. "מיקרוסופט מכבדת את תקן ה-robots.txt ואנו מכבדים את ההנחיות המסופקות על ידי אתרים שלא רוצים שהתוכן בדפים שלהם ישמש עם דגמי הבינה המלאכותית שלנו", היא הוסיפה.
אז לעת עתה, גוגל היא הבית הבלעדי לתוכן Reddit בתוצאות החיפוש שלה. לפחות עד ש-Reddit תגיע להסכם עם מתחרותיה.
