Robots.txt là gì? 3 Cách tạo file robots.txt cho wordpress
Vincent Do
Đã bao giờ bạn hình dung làm sao một robot của công cụ tìm kiếm có thể phân tích dữ liệu của một website để index (chỉ mục) không? Đôi lúc bạn muốn googlebot nhanh index trang web của bạn hoặc không index (chỉ mục) một trang cụ thể nào đó. Vậy làm cách nào bây giờ? Tôi có thể trả lời ngay cho bạn – tạo file robots.txt cho wordpress ngay. Bài viết này sẽ hướng dẫn cho bạn: ●
Hiểu rõ khái niệm robots.txt là gì
●
Cấu trúc cơ bản của một file robots.txt
●
Có những lưu ý gì khi tạo lập robots.txt
●
Tại sao phải cần robots.txt cho website của bạn
●
Cách tạo lập 1 file hoàn chỉnh cho web của bạn