گوگل و شرکت کلودفلر (Cloudflare) با معرفی ابزارها و سیاستهای جدید، نحوه تعامل وبسایتها با موتورهای جستجو و مدلهای هوش مصنوعی را تغییر دادهاند. این تغییرات شامل اعتراف گوگل به محدودیتهای گزارشدهی هوش مصنوعی در سرچ کنسول (Search Console)، اجرای یک طرح آزمایشی برای پرداخت مالی به ناشران محتوا، ارائه ابزار جدید کلودفلر برای مدیریت خزندههای هوش مصنوعی و کاهش چشمگیر آستانه فالوور برای دسترسی به پروفایلهای جستجو (Search profiles) است.
چالشهای گزارشدهی در سرچ کنسول و اعتراف گوگل
جان مولر (John Mueller)، تحلیلگر ارشد گوگل، اعلام کرده است که تکامل موتور جستجو فراتر از مدل سنتی رتبهبندی یک تا ده، انطباق گزارشها با نتایج هوش مصنوعی را به چالشی بزرگ تبدیل کرده است. مولر در واکنش به بحثهای پیرامون این گزارش جدید که در ۳۱ اوت به صورت جهانی عرضه شد، اشاره کرد که ردیابی موقعیت (Position) به شکلی که واقعاً کاربردی باشد، بسیار دشوار است.
در سیستم جدید، زمانی که یک ویژگی در صفحه نمایش داده میشود، بدون توجه به اسکرول کاربر، یک ایمپرشن (Impression) ثبت میشود؛ اما لینکهای پنهانشده در بخش «نمایش بیشتر» (Show More) تا زمانی که کاربر روی آنها کلیک نکند، شمرده نمیشوند. گزارش هوش مصنوعی مولد گوگل اساساً موقعیت دقیقی ارائه نمیدهد و لینکهای موجود در بخش خلاصه هوش مصنوعی (AI Overview)، موقعیت کل بلوک خلاصه را به ارث میبرند، نه جایگاه دقیق خود لینک را. مولر از جامعه متخصصان سئو خواسته است تا پیشنهادهای خود را برای اندازهگیری بهتر این موقعیتها ارائه دهند.
طرح آزمایشی گوگل برای پرداخت به ناشران در ازای محتوای هوش مصنوعی
گوگل در حال آزمایش برنامهای است که به وبسایتهای مشارکتکننده در صورت استفاده از محتوای آنها در پاسخهای اپلیکیشن جمینای (Gemini)، بخش خلاصه هوش مصنوعی (AI Overviews) و حالت هوش مصنوعی (AI Mode)، مبالغی پرداخت میکند. بر اساس گزارش رسانه دیجیدی (Digiday)، گوگل تایید کرده که این طرح در مراحل اولیه است و دهها ناشر برای حضور در آن دعوت شدهاند.
پرداختها تنها زمانی انجام میشود که محتوای سایت «مشارکت قابلتوجهی» در ایجاد پاسخ داشته باشد؛ محتوایی که صرفاً برای تایید فکتها استفاده شده یا بعداً اضافه شده باشد، مشمول این پرداخت نمیشود. ناشران پذیرفتهشده پنلی در سرچ کنسول دریافت میکنند که درآمد ماهیانه و تاریخچه آن را نشان میدهد و امکان انصراف از تنظیمات نیز وجود دارد.
با این حال، یکی از مدیران مطلع این طرح را یک «جعبه سیاه» توصیف کرده است، زیرا پنل مذکور میزان پرداختی را نشان میدهد اما مبنای محاسبه آن مشخص نیست. همچنین، در کنار آن گزارشی وجود دارد که به جای کلیکها، ایمپرشنها را ردیابی میکند. یکی دیگر از مدیران رسانهای اشاره کرد که پذیرش این مبالغ ممکن است قدرت چانهزنی ناشران را در مذاکرات آینده برای شرایط بهتر تضعیف کند، زیرا گوگل میتواند به این طرح آزمایشی به عنوان غرامتی که قبلاً پرداخت کرده است، استناد کند.
راهکار جدید کلودفلر برای مسدودسازی آموزش هوش مصنوعی بدون آسیب به سئو
شرکت کلودفلر تنظیمات جدیدی تحت عنوان «عدم اجازه به آموزش هوش مصنوعی» (Disallow AI Training) معرفی کرده است که ترجیح عدم آموزش را در فایل robots.txt منتشر میکند، در حالی که به خزندههای اصلی مانند Googlebot، Applebot و Bingbot اجازه میدهد به کار خود برای ایندکس جستجو ادامه دهند.
پیش از این، گزینه مسدودسازی (Block) کلودفلر تمام خزندهها از جمله خزندههای جستجو را متوقف میکرد. گزینه جدید به موتورهای جستجو اجازه میدهد به خزش خود ادامه دهند. این تنظیمات با ابزارهای عدم رضایت (opt-out) گوگل (Google-Extended) و اپل (Applebot-Extended) هماهنگ است. کلودفلر اشاره کرده که مایکروسافت هنوز از این ترجیح در robots.txt پشتیبانی نمیکند اما برنامهریزی کرده تا در اوایل سال ۲۰۲۷ روی آن کار کند.
کلودفلر بر شفافیت تاکید کرده و آن را برای برچسب «پاسخگو» (Accountable) خود اجباری ساخته است؛ این برچسب اپراتورها را ملزم میکند تا آدرسهای اینترنتی (URLs) صفحات در دسترس برای آموزش را ارائه دهند یا متعهد به ارائه آنها شوند. کلودفلر میگوید گوگل نیز در حال برنامهریزی برای ارائه ابزارهای شفافیت بیشتر در سطح URL مرتبط با Google-Extended در هفتههای آینده است.
کاهش آستانه فالوورها در پروفایلهای جستجوی گوگل
در تحولی دیگر، گوگل آستانه فالوور مورد نیاز برای ایجاد پروفایلهای جستجو (Search profiles) را به ۱۰,۰۰۰ فالوور در پلتفرمهای یوتیوب، اینستاگرام، ایکس (توییتر سابق) یا تیکتاک کاهش داده است. ابراهیم بدر (Ibrahim Badr)، مدیر محصول بخش جستجوی گوگل، این تغییر را اعلام کرد.
این آستانه که در زمان راهاندازی در ژوئن ۱۰۰,۰۰۰ فالوور در یوتیوب، اینستاگرام یا ایکس (و ۳۰۰,۰۰۰ در تیکتاک) بود، در ماه اوت به ۳۵,۰۰۰ کاهش یافت و اکنون به ۱۰,۰۰۰ رسیده است. این ویژگی که در حال حاضر فقط در ایالات متحده فعال است، مستقیماً روی رتبهبندی تأثیر نمیگذارد اما به دیده شدن بیشتر محتوا در بخش دیسکاور (Discover) کمک میکند؛ جایی که دنبالکنندگان ممکن است محتوای بیشتری از آن منبع را در فید خود مشاهده کنند.