OAI-AdsBot, OAI-SearchBot và GPTBot phục vụ những mục đích khác nhau. Hãy xác định tổ chức muốn hỗ trợ mục đích nào, rồi kiểm tra quyền truy cập vào các trang công khai tương ứng. Yêu cầu “cho phép OpenAI” quá chung chung để thay đổi website một cách đáng tin cậy.
Rà soát ngày 15/10/2026. Danh sách kiểm tra độc lập này của GPTAd là khuyến nghị vận hành, không cam kết quảng cáo được duyệt, được lập chỉ mục, xếp hạng hay trích dẫn. Chúng tôi không thử nghiệm hạ tầng của nhà quảng cáo nào cho bài viết này.
Phân biệt ba mục đích
Theo tài liệu OpenAI, OAI-AdsBot kiểm tra tính an toàn của trang được gửi để quảng cáo và có thể đánh giá mức độ liên quan; dữ liệu thu thập không được dùng để huấn luyện mô hình nền tảng. OAI-SearchBot hỗ trợ tìm kiếm trên ChatGPT. GPTBot thu thập nội dung có thể được dùng để huấn luyện mô hình nền tảng. Lựa chọn về tìm kiếm và huấn luyện độc lập với nhau: cho phép OAI-SearchBot không đòi hỏi phải cho phép GPTBot. OpenAI công bố dải IP riêng cho từng bot. Nguồn: tài liệu về trình thu thập dữ liệu.
Hướng dẫn tạo quảng cáo nêu rõ trang đích không được chặn OAI-AdsBot hoặc OAI-SearchBot. Chỉ cho phép tác nhân xét duyệt quảng cáo chưa đáp ứng đầy đủ yêu cầu này. Nguồn: hướng dẫn về trang đích.
Ghi rõ quyết định kinh doanh trước khi thay đổi cấu hình. Người phụ trách marketing xác định các trang đích quảng cáo công khai dự kiến; người phụ trách website xác định các trang công khai cần được tìm thấy; người có trách nhiệm trong tổ chức quyết định lựa chọn về huấn luyện mô hình. Ở doanh nghiệp nhỏ, một người có thể đảm nhiệm tất cả, nhưng đây vẫn là những quyết định riêng biệt.
Lập hồ sơ kiểm tra truy cập cho từng URL công khai
Mẫu ghi chép do chúng tôi đề xuất dùng một mục riêng cho từng trang đích và mục đích. Tránh chỉ có một ô đánh dấu rằng toàn bộ website hoạt động:
- URL công khai: địa chỉ chính xác đang được đánh giá
- Mục đích: trang đích quảng cáo, khả năng được tìm thấy qua tìm kiếm công khai hoặc mục đích khác đã được phê duyệt
- Tác nhân dự kiến: user agent cụ thể liên quan đến phép kiểm tra
- Kết quả robots: quy tắc áp dụng và người đã kiểm tra
- Kết quả HTTP: trạng thái, URL cuối cùng và các ghi nhận về chuyển hướng
- Kết quả tại lớp biên: sự kiện CDN hoặc tường lửa liên quan, nếu có
- Kết quả nội dung trang: phản hồi có chứa thông tin chào bán công khai mong muốn hay không
- Bằng chứng: thời điểm và tài liệu chẩn đoán đã che thông tin nhạy cảm
- Người phụ trách: người có thể sửa lỗi ở lớp cụ thể
- Kiểm tra lại: những nội dung cần kiểm tra sau thay đổi
Loại các trang tài khoản riêng tư, cổng khách hàng, đường dẫn quản trị và môi trường staging khỏi việc kiểm tra truy cập công khai này. Đừng biến danh sách kiểm tra triển khai chiến dịch thành yêu cầu công khai tài liệu mật.
Kiểm tra từng lớp thay vì đoán nguyên nhân
Bắt đầu từ trang đích dự kiến. Đó có phải trang công khai hiện tại, hay một địa chỉ cũ phải qua nhiều lần chuyển hướng mới đến nội dung chào bán? Yêu cầu người phụ trách website giữ nguyên URL xuất phát khi lần theo đường đi. Nhờ vậy, bạn tránh kiểm tra một URL thay thế hoạt động tốt nhưng khác URL đã gửi trong quảng cáo.
Tiếp theo, kiểm tra chính sách dành cho trình thu thập dữ liệu đang áp dụng. Sau đó nhờ người phụ trách hạ tầng xem phản hồi và nhật ký lớp biên liên quan. Truy cập thành công bằng trình duyệt của bạn là bằng chứng hữu ích về phiên truy cập đó; nó không khẳng định một yêu cầu tự động riêng biệt sẽ nhận được gì.
Trang xác minh truy cập, phản hồi từ chối quyền truy cập hoặc vòng lặp chuyển hướng cần được giao cho người phụ trách lớp tương ứng. Ghi lại hiện tượng trước khi đề xuất cách sửa. Câu hỏi an toàn là “Quy tắc cụ thể nào đã tác động đến yêu cầu truy cập công khai được cho phép này?”, thay vì “Có thể tắt bảo vệ chống bot không?”.
Không tắt diện rộng tường lửa, xác thực, giới hạn tần suất hay giám sát bảo mật. Hãy để người phụ trách hạ tầng đánh giá cách sửa với phạm vi hẹp, duy trì các lớp bảo vệ cần thiết và xác định phương án hoàn tác. Xác minh danh tính trình thu thập dữ liệu bằng thông tin chính thức hiện hành thay vì chỉ tin vào nhãn user-agent.
Ví dụ điều tra giả định với hai trang
Giả sử trang chủ của một cửa hàng truy cập được nhưng trang bộ sưu tập đang quảng cáo lại hiển thị bước xác minh ở lớp biên. Ban đầu, marketing báo rằng cả tên miền bị chặn. Bảng kiểm tra truy cập tách riêng hai ghi nhận và cho thấy vấn đề chỉ xảy ra ở một đường dẫn.
Đội website ghi lại URL bộ sưu tập, thời gian yêu cầu, phản hồi và sự kiện lớp biên tương ứng. Họ đề xuất điều chỉnh cấu hình có mục tiêu cho đường dẫn công khai đã được cho phép, đồng thời xác minh các biện pháp bảo vệ thanh toán và tài khoản khách hàng vẫn nguyên vẹn. Sau đó cập nhật kết quả kiểm tra lại vào bảng.
Ví dụ này minh họa phương pháp chẩn đoán, không phải cách sửa đã được kiểm chứng cho một CDN cụ thể. Biện pháp chính xác phụ thuộc vào cấu hình và bằng chứng thực tế. Nếu chưa xác định được quy tắc gây vấn đề, hãy chuyển các ghi nhận cho bộ phận có chuyên môn xử lý thay vì mở rộng ngoại lệ.
Với những vấn đề ngoài khả năng truy cập, hãy tham khảo hướng dẫn khắc phục sự cố phân phối quảng cáo của chúng tôi. Khả năng truy cập chỉ là một nhánh điều tra, không phải lời giải chung cho mọi trường hợp quảng cáo không phân phối.
Giữ rõ các khác biệt sau khi thay đổi
OpenAI lưu ý hệ thống tìm kiếm có thể cần khoảng 24 giờ để phản ánh cập nhật robots.txt. Đây không phải thời hạn bảo đảm lập chỉ mục hay trích dẫn. Nguồn: cài đặt trình thu thập dữ liệu. Trong hồ sơ công việc, hãy ghi riêng việc hoàn tất cấu hình và những gì quan sát được về khả năng được tìm thấy.
Tương tự, truy cập được trang đích không chứng minh rằng các tuyên bố, sản phẩm hoặc nhà quảng cáo đáp ứng mọi yêu cầu quảng cáo. Dùng danh sách kiểm tra nội dung quảng cáo và trang đích để rà soát trải nghiệm phía khách hàng.
Khép lại công việc hạ tầng khi đường dẫn công khai dự kiến có cấu hình đã thống nhất và bằng chứng truy cập được xác minh, hoặc ghi rõ vướng mắc chưa giải quyết. Giữ nguyên quyết định riêng của tổ chức về huấn luyện mô hình. Kiểm tra lại sau khi chuyển tên miền, thay đổi lớn về chuyển hướng hoặc cập nhật quy tắc CDN. Cách này tạo hồ sơ truy cập dễ duy trì mà không nhầm khả năng truy cập kỹ thuật với kết quả kinh doanh hay tìm kiếm.
