SEO

robots.txt Validator

Xác thực robots.txt — cấu trúc nhóm User-agent, các chỉ thị, kiểm tra một đường dẫn cụ thể được phép/chặn.

Nếu chỉ nhập tên miền, /robots.txt sẽ được thêm vào. Sẽ không hoạt động với mọi trang web — một số chặn yêu cầu chéo miền (CORS); nếu tải không thành công, hãy mở robots.txt trong tab mới và dán nội dung thủ công.