Cloudflare chặn trình thu thập AI: Điều đó có ý nghĩa gì cho backlink

Vào ngày 15 tháng 9 năm 2026, Cloudflare đã lật một mặc định chạm vào một phần năm web, và âm thầm thay đổi những gì một backlink có thể làm cho bạn. Các trang được Cloudflare bảo vệ giờ đây chặn các trình thu thập AI "sử dụng hỗn hợp" theo mặc định trên các trang có hỗ trợ quảng cáo, trong khi các trình thu thập tìm kiếm cổ điển như Googlebot vẫn tiếp tục đi qua. Đối với bất kỳ ai mua liên kết, điều đó tạo ra một sự phân chia chưa từng tồn tại trước đây: một liên kết vẫn có thể truyền đầy đủ giá trị cho tìm kiếm Google và truyền no giá trị đối với các trích dẫn tìm kiếm AI, hoàn toàn do cài đặt bot của trang cho liên kết. Đây là những gì đã thay đổi, tại sao nó quan trọng đối với hồ sơ liên kết của bạn, và kiểm tra duy nhất cần thực hiện trên một trang cho liên kết trước khi bạn thanh toán.

Cloudflare thực sự đã thay đổi điều gì

Quan điểm của Cloudflare là người sáng tạo, không phải các công ty AI, mới là bên quyết định ai được phép sử dụng nội dung của họ. Như thông báo về pay-per-crawl đã nêu: "Nếu một người sáng tạo muốn chặn tất cả trình thu thập dữ liệu AI khỏi nội dung của họ, họ phải có thể làm được điều đó. Nếu một người sáng tạo muốn cho phép một số hoặc tất cả trình thu thập dữ liệu AI truy cập miễn phí vào toàn bộ nội dung của họ, họ cũng phải có thể làm được điều đó." Thay đổi ngày 15 tháng 9 đã biến nguyên tắc đó thành mặc định.

Cơ chế quan trọng. Trên các trang được hỗ trợ quảng cáo, Cloudflare hiện chặn trình thu thập dữ liệu trong đào tạo và tác nhân danh mục theo mặc định, và chặn các trình thu thập "sử dụng hỗn hợp" không tách bạch rõ ràng những gì chúng đang làm. Các danh mục search trình thu thập vẫn được phép, đó là lý do tại sao Googlebot không bị ảnh hưởng. Nhà xuất bản cũng có thể chọn tham gia Pay Per Crawl, đặt mỗi trình thu thập vào một trong ba trạng thái - "Cho phép" (miễn phí), "Tính phí" (yêu cầu thanh toán) hoặc "Chặn" - với Cloudflare đóng vai trò là đơn vị thu hộ. Mô hình Pay Per Use mới hơn, được công bố ngày 1 tháng 7 năm 2026, trả tiền cho nhà xuất bản trên sự kiện đầu ra, khi nội dung của họ xuất hiện trong câu trả lời do AI tạo, thay vì trên mỗi lần crawl.

Chi tiết phạm vi quan trọng: mặc định này được áp dụng cho tên miền mới và các gói miễn phí. Một trang đã thiết lập đang dùng Cloudflare sẽ không lật vào ngày 15 tháng 9. Nhưng sự lệch này quan trọng với người mua liên kết, vì phần lớn các trang nguồn mới dựng lên, giá rẻ, chính là các tên miền mới, gói miễn phí mà đợt này ảnh hưởng nặng nhất.

Tại sao điều này quan trọng cho backlink của bạn

Một backlink chỉ phát huy tác dụng nếu trang chứa nó có thể được đọc bởi thứ mà bạn muốn tác động. Với SEO cổ điển, bộ đọc đó là Googlebot — và Googlebot vẫn vượt qua cài đặt mặc định mới của Cloudflare. Với AI search, các bộ đọc là một tập bot hoàn toàn khác, và chính những bot đó đang bị từ chối truy cập. Kết quả là sự phân tách hai kênh trong cùng một liên kết:

Trình thu thập dữ liệu	Mục đích	Cloudflare mặc định (trang quảng cáo)	Ảnh hưởng đến liên kết của bạn
Googlebot	Tìm kiếm cổ điển	Được phép	Giá trị đầy đủ cho thứ hạng Google
GPTBot (OpenAI)	Đào tạo / đại lý	Đã chặn	Không có đường vào câu trả lời của ChatGPT
ClaudeBot (Anthropic)	Đào tạo / đại lý	Đã chặn	Không có đường vào câu trả lời của Claude
PerplexityBot	Tác nhân / công cụ trả lời	Đã chặn	Không có đường vào trích dẫn của Perplexity

Hãy đọc điều đó như một cảnh báo cho mục tiêu khả năng hiển thị trên AI mà nhiều người mua link đang theo đuổi. Chúng tôi đã đề cập trong bài viết về nguồn gốc của các liên kết được AI trích dẫn rằng một phần ngày càng tăng của ngân sách liên kết đang nhắm vào việc được nhắc đến bởi ChatGPT và Perplexity, không chỉ xếp hạng trên trang một. Nếu trang cho liên kết nằm sau cài đặt mặc định mới của Cloudflare, thì số tiền đó không mua được gì cho các trích dẫn AI - các trình thu thập AI không bao giờ thấy liên kết. Đối với SEO Google thuần túy, liên kết vẫn ổn. Đối với tìm kiếm AI, nó có thể vô hình.

Bên cho link bạn mua có thể đã vô hình với AI

Điều này không phải giả thuyết. Một liên kết rẻ đặt trên một trang mới tinh trên gói Cloudflare miễn phí, theo mặc định, rất có thể đang chặn mọi crawler AI ngay lúc này. Bạn sẽ không bao giờ biết được qua điểm DR hay biểu đồ lưu lượng. Việc kiểm tra rất đơn giản, và đó là bước kiểm tra gần như không ai thực hiện:

• Tải trang với tư cách là một crawler AI. Yêu cầu URL nguồn với user-agent GPTBot hoặc ClaudeBot và xem bạn có nhận được nội dung hay bị chặn. Lỗi 403 hoặc trang thách thức có nghĩa liên kết không hiển thị với công cụ đó.
• Đọc robots.txt. Rõ ràng Disallow quy tắc cho GPTBot, ClaudeBot, Google-Extended hoặc PerplexityBot là tín hiệu trực tiếp cho thấy trang đã chọn đóng cửa với AI.
• Kiểm tra xem đó có phải tên miền mới dùng gói miễn phí không. Đó là các thuộc tính mà Cloudflare nhắm mặc định. Một trang nguồn mới đăng ký là trường hợp có rủi ro cao nhất.
• Xác nhận trang thực sự hiển thị với bot. Một liên kết bên trong nội dung mà chỉ người đã đăng nhập mới thấy sẽ không truyền tải gì cho bất kỳ trình thu thập dữ liệu nào, AI hay cách nào khác.

Cần kiểm tra trước khi mua link cho khả năng hiển thị trên AI

Nếu mục tiêu của bạn bao gồm việc được các công cụ AI trích dẫn, thì chính sách bot của trang nguồn giờ đây là một tiêu chí mua hàng hạng nhất, ngang hàng với mức độ liên quan và lưu lượng truy cập thực:

• Quyền truy cập của AI-crawler. Bên cho link nên cho phép GPTBot, ClaudeBot và PerplexityBot thu thập nội dung của nó. Đây là tín hiệu mới mang tính quyết định, và là tín hiệu mà thị trường chưa kiểm tra.
• truy cập Googlebot. Vẫn được phép theo mặc định, nhưng vẫn xác nhận lại — site cấu hình sai có thể chặn tất cả.
• Lưu lượng truy cập thực và sự liên quan. Không thay đổi. Một trang có thể truy cập được nhưng không có người đọc và không phù hợp về chủ đề vẫn là một liên kết yếu.
• Đã thiết lập lâu năm, không mới tạo gần đây. Những người quyên góp tên miền mới, gói miễn phí có khả năng chặn trình thu thập AI cao nhất cũng là các vị trí có chất lượng thấp nhất vì mọi lý do khác.

Điểm xuyên suốt là khả năng truy cập AI và chất lượng link chỉ cùng một hướng. Những nguồn donate chặn AI crawler theo mặc định thì không cân xứng lại chính là những site rẻ, mới, gói miễn phí mà bạn đáng lẽ đã nên tránh.

Vị trí của người mua liên kết

Cloudflare vừa biến chính sách bot của một nhà tài trợ thành một phần giá trị của liên kết. Một vị trí đặt trên một trang thật, đã được xây dựng ổn định và cho phép trình thu thập dữ liệu AI truy cập có thể vừa củng cố thứ hạng Google vừa tạo trích dẫn AI. Một vị trí trên một trang mới, nhồi nhét quảng cáo, dùng gói miễn phí có thể không đóng góp cho cả hai. Đó chính xác là bộ lọc đằng sau cách Rixot tìm nguồn vị trí đặt liên kết: các trang nguồn có lưu lượng truy cập thực, đã được thiết lập, mà cả công cụ tìm kiếm và trình thu thập dữ liệu AI đều có thể thực sự truy cập được, thay vì các tên miền dùng một lần trông ổn trong công cụ đo lường nhưng bị chặn với các công cụ quan trọng. Khi tìm kiếm AI tiếp tục "ăn" các cú nhấp chuột, "liên kết này AI có thấy được không" không còn là chi tiết kỹ thuật mà trở thành câu hỏi cốt lõi.

FAQ

Cloudflare có chặn Googlebot không?

Không. Mặc định của Cloudflare vào ngày 15 tháng 9 năm 2026 chặn các trình thu thập AI dùng hỗn hợp và đào tạo/tác nhân trên các trang có quảng cáo, nhưng các trình thu thập tìm kiếm đơn mục đích như Googlebot vẫn được phép. SEO Google cổ điển không bị ảnh hưởng bởi mặc định này.

Trình thu thập AI nào bị chặn mặc định bởi Cloudflare?

Trình thu thập trong danh mục đào tạo và agent, và các trình thu thập "sử dụng hỗn hợp" không tách biệt chức năng của chúng - trên thực tế là GPTBot, ClaudeBot, PerplexityBot và các trình tương tự. Khối được áp dụng theo mặc định trên các trang có quảng cáo cho các tên miền mới và gói miễn phí.

Điều này ảnh hưởng đến backlink của tôi như thế nào?

Nếu trang nguồn chứa liên kết của bạn chặn các trình thu thập dữ liệu AI, thì liên kết đó không thể đóng góp vào trích dẫn trong ChatGPT, Claude hoặc Perplexity, dù nó vẫn truyền giá trị cho tìm kiếm Google. Với mục tiêu hiển thị trên AI, một trang nguồn bị AI chặn về cơ bản là "đã chết".

Làm sao kiểm tra xem donor có chặn AI crawler không?

Tải trang bằng một user-agent như GPTBot hoặc ClaudeBot để xem bạn nhận được nội dung hay nhận mã 403/thử thách, đồng thời đọc robots.txt của trang xem có quy tắc Disallow chống lại GPTBot, ClaudeBot, Google-Extended hoặc PerplexityBot hay không. Những tên miền mới dùng gói Cloudflare miễn phí có nguy cơ cao nhất.

Cloudflare Pay Per Crawl là gì?

Nó cho phép các nhà xuất bản đặt từng trình thu thập AI thành Cho phép (miễn phí), Tính phí (yêu cầu thanh toán) hoặc Chặn, với Cloudflare là đơn vị thu hộ. Mô hình Pay Per Use liên quan, được công bố ngày 1/7/2026, trả tiền cho nhà xuất bản khi nội dung của họ xuất hiện trong câu trả lời do AI tạo ra.

Nguồn

• Cloudflare - "Giới thiệu pay per crawl," blog.cloudflare.com
• TechCrunch - "Chính sách mới của Cloudflare buộc các công ty AI phải trả tiền cho nội dung của các nhà xuất bản" (ngày 1 tháng 7, 2026), techcrunch.com
• The Next Web - "Cloudflare chặn trình thu thập AI, trả tiền cho nhà xuất bản," thenextweb.com