בקצרה: ChatGPT Search היא היכולת של ChatGPT לחפש ברשת בזמן אמת ולענות על שאלה עם מידע עדכני, לצד ציטוטים וקישורים למקורות שמהם המידע נלקח. OpenAI השיקה אותה בסוף 2024. ChatGPT מחליט לבד אם לחפש לפי אופי השאלה, והמשתמש יכול גם לבקש חיפוש באופן יזום. בניגוד למנוע חיפוש קלאסי, התוצאה היא תשובה כתובה אחת ולא רשימת קישורים.
איך ChatGPT Search עובד
לפי ההודעה של OpenAI על השקת השירות, ChatGPT בוחר לחפש ברשת בהתאם למה שהמשתמש שואל. על שאלה כמו "מה ההבדל בין משכנתא בריבית קבועה למשתנה?" הוא יכול לענות מהידע הכללי שלו. על שאלה כמו "מה שעות הפתיחה של הספרייה העירונית בשבוע הבא?" סביר יותר שיחפש, כי התשובה תלויה במידע עדכני. מעבר לזה, יש אפשרות לבחור בחיפוש ידנית דרך סמל החיפוש בממשק.
כשהחיפוש מופעל, ChatGPT קורא תוכן מעמודים ברשת ומשלב אותו בתשובה. כאן נכנס לתמונה הזחלן OAI-SearchBot, ש-OpenAI מתארת ככזה שמשמש להצגת אתרים בתוצאות החיפוש של ChatGPT.
איך מוצגות התוצאות והמקורות
התשובה ב-ChatGPT Search כוללת ציטוטים וקישורים למקורות בתוך הטקסט. בנוסף, OpenAI מתארת כפתור Sources שמופיע מתחת לתשובה ופותח סרגל צד עם רשימת ההפניות. בפועל זה אומר שיש שתי נקודות מגע עם אתר:
- ציטוט בתוך התשובה: קישור שמוצמד לטענה מסוימת. זה המקום הבולט ביותר.
- רשימת המקורות: כל ההפניות במקום אחד. המשתמש מגיע אליה רק אם הוא בוחר לפתוח אותה.
מכאן שגם אם האתר שלכם שימש מקור, המשתמש לא בהכרח ייכנס אליו. לפעמים התשובה עצמה מספיקה לו.
מה התפקיד של מקורות חיצוניים
במנוע AI שמחפש ברשת, התשובה טובה בדיוק כמו המקורות שהוא מוצא. בשאלות על עסק מסוים, ChatGPT עשוי להסתמך על האתר של העסק, אבל גם על אתרי השוואה, כתבות, מדריכים ופרופילים במקומות אחרים. אם המידע באתר שלכם סותר את מה שכתוב עליכם במקום אחר, התשובה עלולה להציג את הגרסה הלא נכונה.
זה גם ההבדל בין מה שמודל "יודע" מהאימון לבין מה שהוא מוצא בחיפוש. ידע מהאימון מגיע בלי קישור. מידע שנמצא בחיפוש מגיע עם הפניה למקור, וזה מה שמאפשר למשתמש לבדוק אותו.
שלושה זחלנים, שלוש מטרות
OpenAI מפעילה כמה זחלנים, וכל אחד מהם נשלט בנפרד ב-robots.txt. ההבחנה ביניהם היא אולי הדבר המעשי החשוב ביותר במאמר הזה:
| זחלן | למה הוא משמש | מה קורה אם חוסמים אותו |
|---|---|---|
| OAI-SearchBot | הצגת אתרים בתוצאות החיפוש של ChatGPT | לפי OpenAI, האתר לא יוצג בתשובות של ChatGPT Search, אם כי עדיין יכול להופיע כקישור ניווט |
| GPTBot | סריקת תוכן שעשוי לשמש לאימון מודלי בסיס | מסמן שהתוכן לא אמור לשמש לאימון. חסימה שלו לבדה לא מוציאה את האתר מ-ChatGPT Search |
| ChatGPT-User | פעולות שמשתמש יוזם ב-ChatGPT או ב-Custom GPTs, לא סריקה אוטומטית | לפי OpenAI, כללי robots.txt עשויים לא לחול, כי הפעולה יזומה על ידי משתמש. הוא לא משמש להחלטה אם תוכן יופיע בחיפוש |
OpenAI מזכירה גם את OAI-AdsBot, שמבקר רק בעמודים שהוגשו כמודעות ב-ChatGPT. זה ערוץ נפרד ומסומן, ואין לו קשר לאופן שבו נבחרים מקורות בתשובות.
דוגמה: לאפשר חיפוש, לחסום אימון
אתר שרוצה להופיע בתשובות של ChatGPT Search, אבל לא רוצה שהתוכן שלו ישמש לאימון מודלים, יכול להגדיר ב-robots.txt משהו כזה:
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /שתי הערות חשובות. ראשית, לפי OpenAI לוקח כ-24 שעות עד שהמערכות שלה מתעדכנות אחרי שינוי ב-robots.txt, בהקשר של תוצאות החיפוש. שנית, robots.txt הוא רק שכבה אחת: אם חומת אש, CDN או שירות הגנה מפני בוטים חוסמים את הזחלן, ההגדרה בקובץ לא תעזור. כדאי לבדוק גם את יומני השרת.
ומה לגבי llms.txt? זו הצעה לקובץ שממפה את התוכן החשוב באתר, לא מנגנון שליטה בגישה של זחלנים, ואין ראיות שהוא משפיע על הופעה בתשובות של ChatGPT. פירטנו במדריך מה זה llms.txt ומה הוא לא עושה.
במה ChatGPT Search שונה ממנוע חיפוש קלאסי
| היבט | מנוע חיפוש קלאסי | ChatGPT Search |
|---|---|---|
| מה המשתמש מקבל | רשימת קישורים מדורגת | תשובה כתובה עם ציטוטים |
| אופן השאילתה | מילות מפתח קצרות, לרוב | שאלות מלאות והמשך שיחה |
| הבחירה של המשתמש | המשתמש בוחר על איזה קישור ללחוץ | המודל כבר בחר ושילב מידע ממקורות |
| מתי מתבצע חיפוש | תמיד | כשהמודל מחליט, או כשהמשתמש מבקש |
| כלי מדידה לבעל האתר | כלים רשמיים כמו Search Console | מדידה עקיפה יותר, בעיקר דרך תנועה מפנה ובדיקות ידניות |
אם מעניין אתכם איך גוגל משלבת תשובות AI בתוך עמוד התוצאות עצמו, זה נושא אחר עם כללים אחרים. הסברנו אותו במאמר על AI Overview של גוגל.
מגבלות שכדאי להכיר
- לא כל שאלה מפעילה חיפוש. על חלק מהשאלות ChatGPT עונה מהידע שלו, בלי מקורות.
- תשובות משתנות. אותה שאלה יכולה לקבל תשובה שונה ומקורות שונים בזמנים שונים. בדיקה בודדת היא תמונת מצב בלבד.
- קשה למדוד. קשה לדעת כמה פעמים אתר שימש מקור בתשובות. אפשר לראות תנועה מפנה בכלי אנליטיקס כשהיא מזוהה, אבל לא את כל החשיפות.
- ציטוט לא שווה קליק. תשובה טובה יכולה לפתור את הצורך של המשתמש בלי כניסה לאתר.
הזדמנויות, וצ'קליסט קצר
הצד השני של אותן מגבלות: מי שמשתמש בחיפוש שיחתי שואל שאלות מפורטות, ולעיתים קרובות כבר נמצא בשלב של השוואה או החלטה. עמוד שעונה על שאלה כזו בצורה ברורה ומדויקת יכול לשמש מקור גם אם הוא לא מדורג ראשון במנוע חיפוש אחר. הנה בדיקה מהירה לפני שמתחילים לעבוד על התחום:
- OAI-SearchBot לא חסום ב-robots.txt, וגם לא בחומת האש או ב-CDN.
- ההחלטה לגבי GPTBot התקבלה במודע ובנפרד מההחלטה לגבי חיפוש.
- התוכן המרכזי בעמודים החשובים זמין ב-HTML ולא רק אחרי אינטראקציה.
- יש עמודים שעונים ישירות על השאלות שהלקוחות שלכם שואלים, כולל השוואות ותנאים.
- הפרטים העסקיים (שם, שירותים, מחירים ואזורי שירות) עקביים בין האתר למקורות חיצוניים.
- יש בכלי האנליטיקס מעקב אחרי תנועה מפנה מ-ChatGPT, ככל שהיא מזוהה.
מי שרוצה לעבוד על הנושא באופן שיטתי יכול לקרוא על השירות שלנו לקידום ב-ChatGPT. אבל כל אחד מהסעיפים ברשימה אפשר לבדוק גם בלעדיו.
סיכום
ChatGPT Search מחבר בין מודל שפה לחיפוש ברשת: הוא מחליט מתי לחפש, קורא מקורות ומציג תשובה עם ציטוטים ורשימת הפניות. לבעלי אתרים, הצעד הראשון הוא טכני ופשוט: להבין את ההבדל בין OAI-SearchBot, GPTBot ו-ChatGPT-User ולהגדיר כל אחד מהם בכוונה. הצעד השני הוא תוכן ברור ומידע עקבי ברשת. גם אז אין הבטחה לציטוט, ולכן כדאי למדוד לאורך זמן ולא לפי בדיקה אחת.
מקורות: OpenAI: הזחלנים של OpenAI · OpenAI: השקת ChatGPT Search
להמשך קריאה: מה זה GEO? המדריך המלא · GEO מול SEO: מה באמת שונה