بحث شوال: الروبوتات تمثل حوالي 60% من طلبات HTML

أصدرت مؤسسة الأبحاث Shoal Research تقريرًا يفيد بأن الروبوتات تمثل حوالي 60% من طلبات HTTP لمحتوى HTML على شبكة Cloudflare، بينما يمثل البشر 38.2%. كان الرئيس التنفيذي لشركة Cloudflare، ماثيو برينس، قد توقع سابقًا أن حركة مرور الروبوتات ستتجاوز حركة مرور البشر بحلول عام 2027، وأعلن لاحقًا أن نمو حركة مرور الوكلاء أدى بالفعل إلى تجاوز الروبوتات للبشر. ويذكر التقرير أن تطبيقات الذكاء الاصطناعي تُبقي المستخدمين في واجهات الدردشة وتلخص المحتوى، بدلاً من إعادة توجيههم إلى الموقع الأصلي. كما أن معدل الزحف إلى العودة لروبوتات الذكاء الاصطناعي أعلى بكثير من Googlebot، حيث يبلغ متوسط زحف ClaudeBot حوالي 4200 صفحة لكل زيارة عودة خلال العام الماضي. ويظهر بحث Pew أن الملخصات التي ينتجها الذكاء الاصطناعي خفضت معدلات النقر من 15% إلى 8%. ومن الصعب الحفاظ على نموذج حركة مرور robots.txt وتبادل المحتوى. وتعد الدعاوى القضائية والترخيص الخاص إجراءات مؤقتة. وينقسم الدفع لكل طلب إلى سوق مغلق بمفاتيح وبروتوكولات مفتوحة تستخدم HTTP 402 والعملات المستقرة مثل x402 وMPP. ولا تزال معظم المواقع تقدم وصولاً مجانيًا أو تحظره.