Blog

Cloudflare برای Verified botها «اعتماد مداوم» می‌آورد

هویت تأییدشده کافی نیست: Cloudflare سیستم سنجش مداوم رفتار Verified botها نسبت به robots.txt و HTTP 429 را معرفی کرد؛ اعتماد در طول زمان ساخته می‌شود و بعداً روی Radar دیده می‌شود.

17 Oct 2026 · 3 min read · Cloudflare · Verified bots · امنیت · ربات · AI crawlers · robots.txt

Cloudflare برای Verified botها «اعتماد مداوم» می‌آورد

Cloudflare برای Verified botها یک لایهٔ جدید اضافه کرده: دیگر فقط «تو کی هستی؟» مهم نیست؛ سؤال دوم هم مدام تکرار می‌شود — «هنوز می‌شود بهت اعتماد کرد؟»

کاور پست Continuous accountability for Verified bots در بلاگ Cloudflare
کاور رسمی پست Cloudflare دربارهٔ پاسخ‌گویی مداوم Verified botها — منبع: blog.cloudflare.com

تو پست ۱۶ اکتبر ۲۰۲۶، کریس تسوکالادلیس توضیح می‌دهد که تأیید هویت مثل گواهینامه رانندگی است: می‌گوید کی پشت فرمان است و یک‌بار تست را پاس کرده، نه اینکه بعداً هم مسئولانه رانندگی می‌کند. یک بات معروف هم می‌تواند robots.txt را نادیده بگیرد، به origin فشار بیاورد، یا کنترل‌ها را دور بزند — گاهی از روی باگ یا misconfiguration، نه لزوماً نیت بد.

معیار کلاسیک Verified bot هنوز سه‌تاست: خودت را درست و امن معرفی کن، فقط کاری را بکن که می‌گویی، و رفتار سوءاستفاده‌گرانه نداشته باش. هویت معمولاً با Web Bot Auth و کاتالوگ BotBase جلو می‌رود؛ تمرکز تازه روی قاعدهٔ «آسیب نزن» است.

تصویر مرتبط با Message Signatures و برنامه Verified Bots Cloudflare
هویت بات‌ها با Message Signatures / Web Bot Auth — منبع: blog.cloudflare.com/verified-bots-with-cryptography

Risk لحظه‌ای است؛ Trust در زمان ساخته می‌شود

Cloudflare بین دو مفهوم فاصله می‌گذارد: risk احتمال آسیب یک درخواست در یک لحظه است و می‌تواند بالا و پایین برود؛ trust از رفتار پایدار و تکراری ساخته می‌شود. مثال خودشان: delist شدن بات Perplexity در ۲۰۲۵ وقتی سراغ سایت‌هایی رفت که از scraping opt-out کرده بودند و بعد از بلاک سعی کرد کنترل‌ها را دور بزند.

نمودار مفهومی تفاوت trust پایدار و risk لحظه‌ای
اعتماد در طول زمان می‌سازد؛ risk می‌تواند در یک درخواست بپرد — نمودار مفهومی (quickchart)

سیگنال‌های اولیهٔ trust band

سیستم جدید رفتار را اندازه می‌گیرد و به‌جای حکم دائمی روی اپراتور، یک trust band توضیح‌پذیر می‌سازد: بات چقدر با ترجیحات سایت‌ها هم‌خوان است و کدام رفتارها این ارزیابی را ساخته‌اند. دو سیگنال اول:

  • robots.txt: آیا ترافیک مشاهده‌شده در طول زمان با ترجیحات منتشرشده (در راستای RFC 9309) سازگار است؟ خطای تک‌موردی کمتر مهم است؛ الگوی تکراری نادیده‌گرفتن مهم است.
  • HTTP 429: وقتی سایت می‌گوید Too Many Requests، بات سرعتش را کم می‌کند/متوقف می‌شود یا همان فشار را ادامه می‌دهد؟
نمودار سیگنال‌های اولیه اعتماد برای Verified bots
سیگنال‌های اولیه: رعایت robots.txt و واکنش به 429 — نمودار مفهومی (quickchart)
تصویر مرتبط با Bot Preference Sync کلادفلر
Bot Preference Sync ترجیحات سایت را به سیاست‌ها وصل می‌کند — منبع: blog.cloudflare.com

حلقهٔ پاسخ‌گویی

این سیستم کنار Bot Preference Sync و Bot Management یک حلقه می‌سازد: سایت ترجیحش را می‌نویسد، Cloudflare می‌بیند بات واقعاً رعایت می‌کند یا نه، و صاحب سایت تصمیم می‌گیرد با آن ترافیک چه کند. الان داخلی استفاده می‌شود تا تاریخچه ساخته شود؛ بعداً برای همهٔ مشتری‌ها قرار است trust threshold قابل انتخاب شود و امتیازها روی Radar هم دیده شوند.

نمودار حلقه پاسخ‌گویی هویت، ترجیح، مشاهده رفتار و Bot Management
حلقهٔ پاسخ‌گویی: هویت → ترجیح → مشاهده رفتار → اقدام — نمودار مفهومی (quickchart)
تصویر مرتبط با بینش بات‌ها روی Cloudflare Radar
Radar جای طبیعی برای دیدن روند بات‌های تأییدشده است — منبع: blog.cloudflare.com

نظر من

این حرکت درست است. در عصر کرالرهای AI، «Verified» اگر فقط یک برچسب ثابت باشد، خیلی زود بی‌معنی می‌شود. اینکه اعتماد را به رفتار زنده روی robots.txt و 429 گره بزنند، به صاحب سایت قدرت واقعی می‌دهد و به اپراتور بات هم انگیزه می‌دهد تمیز بماند. نکتهٔ کلیدی همان جملهٔ خودشان است: verify، ولی مدام دوباره verify کن. اگر trust band روی Radar شفاف و قابل‌فهم منتشر شود، این یکی از مفیدترین سیگنال‌های عملی سال برای تیم‌های امنیت و platform خواهد بود.

منبع: Continuous accountability for Verified bots — Cloudflare Blog

Comments0

Comments +

00

No comments yet — be the first. هنوز نظری ثبت نشده؛ اولین نفر باش.

Leave a comment

0 / 2000