Cloudflare vừa đưa ra một thời hạn mới cho ngành công nghiệp AI để tách biệt các trình thu thập dữ liệu web được sử dụng cho mục đích tìm kiếm truyền thống, như Google Search, khỏi các trình thu thập dữ liệu được sử dụng cho các tác nhân AI và đào tạo. Bắt đầu từ ngày 15 tháng 9 năm 2026, cài đặt mặc định của Cloudflare sẽ chặn các trình thu thập dữ liệu "sử dụng hỗn hợp" khỏi bất kỳ trang nào có chứa quảng cáo. Điều đó có nghĩa là các trình thu thập dữ liệu kết hợp tìm kiếm, sử dụng tác nhân và đào tạo sẽ bị chặn thu thập dữ liệu từ các trang web này theo mặc định, trừ khi chủ sở hữu trang web điều chỉnh cài đặt khác đi. Những thay đổi này đối với cài đặt mặc định sẽ áp dụng cho khách hàng mới của Cloudflare, các trang web mới được thiết lập bởi khách hàng hiện tại và tất cả khách hàng miễn phí hiện có. Động thái này có thể ảnh hưởng đến cách các nhà cung cấp mô hình AI có thể truy cập nội dung web cho mục đích đào tạo và để hỗ trợ các dịch vụ tác nhân của họ.

Cloudflare chỉ ra rằng hầu hết chủ sở hữu trang web muốn nội dung của họ có thể được tìm thấy thông qua tìm kiếm và thường cả thông qua các dịch vụ AI, nhưng họ muốn được bảo vệ khỏi việc tài sản trí tuệ của họ bị cho đi miễn phí. Cloudflare đặc biệt chỉ ra rằng “công cụ tìm kiếm lớn nhất thế giới” (ám chỉ Google?) có quyền truy cập vào “lượng thông tin gấp đôi” so với các công ty AI khác vì gã khổng lồ tìm kiếm này khiến khách hàng khó duy trì khả năng hiển thị mà không bị sử dụng cho mục đích AI.

Google đã phản bác lại sự khái quát hóa này trong quá khứ, lưu ý rằng họ cung cấp một bot có tên Google Extended cho phép chủ sở hữu trang web lựa chọn không cho phép nội dung của họ được sử dụng để đào tạo và các sản phẩm và dịch vụ AI như Gemini Apps và Vertex API. Việc sử dụng bot này không ảnh hưởng đến việc trang web có được hiển thị trong Google Search hay không. Tuy nhiên, Googlebot hàng đầu của gã khổng lồ công nghệ này vẫn thu thập dữ liệu cho Tìm kiếm, bao gồm cả các tính năng AI như Tổng quan AI và Chế độ AI.

Trong khi Cloudflare cung cấp một số sản phẩm để giúp người dùng khởi chạy hệ thống AI của riêng họ, công ty cũng đã phát hành một loạt công cụ để giúp các nhà xuất bản kiểm soát nội dung của họ tốt hơn trong kỷ nguyên AI. Trong những năm gần đây, Cloudflare đã ra mắt các công cụ để chống lại bot AI, bao gồm một thị trường cho phép các trang web tính phí bot AI để thu thập dữ liệu, được gọi là Pay Per Crawl, hình thức này hiện cũng đang phát triển thành “Pay Per Use”, cho phép các nhà xuất bản tính phí các công ty AI khi nội dung của họ tạo ra giá trị, chứ không chỉ khi nội dung được thu thập. Thay đổi này cũng có thể giúp tiết kiệm băng thông và tài nguyên tính toán của các nhà xuất bản cho các nhà cung cấp mô hình AI. Để triển khai mô hình này, Cloudflare ban đầu hợp tác với hai đối tác là Ceramic.ai và You.com. Khi một nhà xuất bản lựa chọn tham gia, họ sẽ được trả tiền khi nội dung của họ xuất hiện trong kết quả tìm kiếm AI của Ceramic hoặc khi You.com truy cập vào một phần nội dung cao cấp của họ...

Trích dẫn Sarah Perez https://techcrunch.com/2026/07/01/cloudflares-new-policy-pushes-ai-companies-to-pay-for-publishers-content/