داده‌های جدید: ایندکس جستجوی ChatGPT وب‌سایت‌های کوچک را نیز پوشش می‌دهد

بر اساس داده‌های جدید یک شرکت مشاور سئو فرانسوی به نام رسونئو (Resoneo)، ایندکس جستجوی داخلی اوپن‌ای‌آی (OpenAI) صدها وب‌سایت را که هیچ قرارداد محتوایی با این شرکت ندارند، دقیقاً مانند شرکای دارای مجوز خود نمایش می‌دهد. این ایندکس که با نام داخلی «لابرادور» (labrador) شناخته می‌شود، در حساب‌های کاربری رایگان ChatGPT، مسئول ارائه‌ی بیشتر نتایج جستجو است.

رسونئو با تحلیل ۱۲۴۹ پاسخ ChatGPT دریافت که وقتی صفحه‌ای از طریق ایندکس داخلی ارائه می‌شود، هیچ تفاوتی در فرمت، طول محتوا یا تازگی آن بین سایت‌های همکار و غیرهمکار وجود ندارد. در حساب‌های رایگان، پاسخ‌های قطعی، کسب‌وکارهای محلی و محصولات تقریباً همیشه از طریق این ایندکس نمایش داده می‌شوند. اما در حساب‌های پولی، حدود ۷۵٪ نتایج از طریق اسکرپ کردن گوگل (Google) و تنها ۲۴٪ از ایندکس داخلی تأمین می‌شود.

این یافته‌ها، اصلاحیه‌ای را که سوگانтан موهاناداسان (Suganthan Mohanadasan)، یک کارشناس سئو، در ماه جولای منتشر کرد، تأیید می‌کند. او در ابتدا تصور می‌کرد که ایندکس داخلی OpenAI تنها به ناشران بزرگ و معتبر محدود است و آن را «یک سطح دسترسی بر اساس مجوز» توصیف کرده بود.

در ادعای مربوط به سطح‌بندی [دسترسی] زیاده‌روی کرده بودم.

— سوگانтан موهاناداسان (Suganthan Mohanadasan)

موهاناداسان پس از دریافت اطلاعاتی از یک کاربر با حساب رایگان در ایتالیا که نشان می‌داد سایت‌های کوچک ایتالیایی نیز در این ایندکس حضور دارند، آزمایش‌های خود را تکرار کرد و به اشتباه خود در تحلیل اولیه اعتراف کرد. او تأکید کرد که اگرچه قراردادهای محتوایی واقعی هستند، اما دیدگاه اولیه او تنها بر اساس داده‌های یک حساب کاربری بوده است.

تحلیل رسونئو نشان می‌دهد که ایندکس اوپن‌ای‌آی چه چیزی از صفحه شما را «می‌بیند». این سیستم یک اسنیپت (snippet) شامل عنوان و حدود ۲۰۰ کاراکتر از ابتدای محتوای صفحه را ذخیره می‌کند. در ۸۳.۶٪ موارد، این اسنیپت شامل تگ H1 صفحه است. این ۲۰۰ کاراکتر معمولاً از ابتدای محتوای اصلی برداشته می‌شود و نه از متادیسکریپشن. هرگونه محتوای اضافی مانند تاریخ انتشار، متن جایگزین اولین تصویر یا دسته‌بندی که قبل از تگ H1 در قالب صفحه قرار گیرد، از این محدودیت ۲۰۰ کاراکتری کم می‌کند.

این خبر برای وب‌سایت‌های ایرانی و فارسی‌زبان بسیار مهم است. این یافته‌ها نشان می‌دهد که برای دیده‌شدن در نتایج ChatGPT نیازی به قراردادهای بین‌المللی یا حضور در لیست‌های خاص نیست. وب‌سایت‌های فعال در بازار ایران می‌توانند با رعایت اصول پایه‌ای سئوی داخلی (On-Page SEO) شانس خود را برای نمایش در پاسخ‌های این هوش مصنوعی افزایش دهند. تمرکز بر نوشتن یک تگ H1 واضح و جذاب و همچنین قرار دادن مهم‌ترین اطلاعات در ابتدای محتوا، یک استراتژی کلیدی است. این کار نه تنها برای گوگل، بلکه برای خزنده‌های هوش مصنوعی نیز اهمیت فزاینده‌ای پیدا کرده است.

در نهایت، به نظر می‌رسد دلیل اصلی ناشران برای امضای قرارداد با OpenAI، صرفاً نمایش در نتایج کاربران رایگان نیست، زیرا سایت‌های بدون قرارداد نیز از این امکان بهره‌مند هستند. ممکن است این قراردادها بر نحوه دریافت محتوا (از طریق فید به جای خزش) یا تعداد دفعات نمایش در نتایج تأثیر بگذارند، اما این موضوع هنوز بررسی نشده است.