Cloudflare vừa tuyên bố một đợt cập nhật lớn nhân dịp “Content Independence Day” lần thứ hai. Thay vì chỉ cho phép block toàn bộ bot AI như trước, Cloudflare giờ phân loại bot thành ba nhóm: Search, Agent, và Training. Đáng chú ý hơn, từ ngày 15/9/2026, những bot crawl đa mục đích như GoogleBot hay BingBot sẽ bị block mặc định trên các trang có quảng cáo nếu chủ website chọn block Training.
Cloudflare phân loại bot AI thành 3 loại như thế nào?
Thay vì gộp chung mọi bot AI vào một nhóm, Cloudflare tạo ra ba phân loại rõ ràng dựa trên hành vi thực tế của bot trên website của bạn:
- Search: Bot thu thập và lập chỉ mục nội dung để trả lời truy vấn sau này, ví dụ như GoogleBot khi xếp hạng tìm kiếm. Đổi lại, website nhận được referral traffic.
- Agent: Bot hành động theo thời gian thực thay mặt con người, chẳng hạn ChatGPT-User khi bạn yêu cầu tóm tắt một trang web, hoặc Gemini điều khiển trình duyệt.
- Training: Bot thu thập dữ liệu để huấn luyện hoặc tinh chỉnh mô hình AI. Nội dung của bạn bị hấp thụ vĩnh viễn vào kiến trúc của AI.
Vấn đề nằm ở chỗ: nhiều công ty lớn dùng cùng một bot cho cả Search lẫn Training. GoogleBot là ví dụ điển hình. Cloudflare gọi đây là “multi-purpose crawler” và muốn buộc các công ty này tách bot ra thành nhiều con riêng biệt.
Tại sao Cloudflare block bot đa mục đích từ 15/9?
Logic của Cloudflare rất thực tế. Nếu một trang web hiển thị quảng cáo, điều đó có nghĩa chủ site muốn con người ghé thăm trang đó. Bot Training và Agent lấy nội dung mà không mang lại traffic, gây thiệt hại trực tiếp đến doanh thu quảng cáo.
Vì vậy, từ 15/9/2026, Cloudflare sẽ tự động block Training và Agent trên các trang có quảng cáo với tất cả domain mới. Search vẫn được phép mặc định vì đây là nguồn funnel traffic chính.
Nhưng phần gây tranh cãi nhất: multi-purpose crawler như GoogleBot (vừa Search vừa Training) sẽ bị điều chỉnh theo quy tắc nghiêm ngặt nhất. Nghĩa là nếu bạn block Training, GoogleBot cũng bị block luôn ở khía cạnh Search. Bạn không thể chọn “cho Google index nhưng không cho train” nếu Google tiếp tục dùng cùng một bot.
GoogleBot vs Bot AI riêng biệt: Ai bị ảnh hưởng?
Mình thấy đây là một nước cờ rất thông minh của Cloudflare. Họ đang ép các ông lớn phải minh bạch. So sánh hai kịch bản:
Trường hợp A – Bot tách biệt: OpenAI đã tách bot thành GPTBot (Training) và ChatGPT-User (Agent). Chủ website có thể block Training nhưng vẫn cho Agent hoạt động. Mọi thứ rõ ràng.
Trường hợp B – Bot gộp: Google dùng GoogleBot cho cả Search lẫn Training. Nếu bạn muốn block Training, bạn vô tình block luôn Search. Kết quả: website mất thứ hạng trên Google.
Đây chính là “Faustian bargain” mà Cloudflare nhắc đến. Bạn phải chọn giữa hiển thị trên Google và để AI train nội dung, hoặc block AI training và mất traffic Google. Không có lựa chọn trung gian.
Chủ website cần làm gì trước tháng 9?
Nếu bạn đang dùng Cloudflare, có vài bước mình nghĩ bạn nên làm ngay:
- Kiểm tra cài đặt AI bot hiện tại trong Cloudflare dashboard — mục Security > Bots. Xem bạn đang ở cấu hình nào.
- Xác định trang có quảng cáo trên site. Đây là những trang sẽ bị áp dụng rule mới về Training và Agent.
- Quyết định chiến lược: Nếu bạn phụ thuộc traffic Google, hãy cân nhắc giữ nguyên cấu hình mặc định. Nếu bạn muốn bảo vệ nội dung, hãy chuẩn bị cho việc traffic có thể giảm.
- Theo dõi Pay-Per-Crawl marketplace — Cloudflare đang xây dựng nền tảng cho phép bạn thu phí khi bot crawl nội dung.
Nếu bạn không muốn thay đổi gì, Cloudflare cho phép opt-out khỏi cấu hình mới trước ngày 15/9. Nhưng mình khuyên bạn nên đánh giá lại chiến lược content protection của mình.
Điều này có thay đổi cuộc chơi SEO không?
Câu trả lời ngắn: có, và rất nhiều.
Nếu một lượng lớn website trên Cloudflare chọn block Training, các mô hình AI sẽ mất đi nguồn dữ liệu quan trọng. Ngược lại, nếu Google bị block vì không tách bot, cả hai bên đều thiệt. Google mất index, website mất traffic.
Mình dự đoán Google sẽ phải tách GoogleBot thành hai con riêng biệt trong tương lai gần — một cho Search thuần, một cho Training — giống như OpenAI đã làm. Nếu không, họ sẽ đối mặt với việc bị block hàng loạt trên mạng lưới Cloudflare (chiếm khoảng 20% toàn bộ traffic internet).
Bên cạnh đó, xu hướng này củng cố thêm lý do tại sao llms.txt và các chuẩn giao tiếp giữa AI và website đang trở nên quan trọng hơn bao giờ hết. Kiểm soát ai được crawl và với mục đích gì sẽ là một kỹ năng SEO thiết yếu trong 2026-2027.
Góc nhìn cá nhân
Mình nghĩ đợt cập nhật này của Cloudflare là một trong những thay đổi quan trọng nhất đối với web ecosystem trong năm nay. Họ đang tạo ra một khung phân loại bot mà cả ngành sẽ phải tuân theo. Các ông lớn AI không thể nữa “lấy tất cả mà không trả lại” — họ sẽ phải minh bạch về ý định crawl.
Nếu bạn đang chạy website kiếm tiền từ quảng cáo hoặc affiliate, đây là lúc phải quan tâm. Decision của bạn trong dashboard Cloudflare có thể quyết định website của bạn nổi hay chìm trong năm tới. Đừng để đến 15/9 mới bắt đầu nghĩ về vấn đề này.
Theo dõi thêm về chủ đề này trong bài Hướng Dẫn GEO Toàn Diện 2026 để hiểu cách tối ưu nội dung khi AI ngày càng chiếm lĩnh search.
