Đừng coi thường file robots.txt nhé hội mê SEO ơi! Tưởng file nhỏ xíu nhưng mà sức ảnh hưởng lên cách Google crawl web bạn thì... khủng lắm luôn đó.
Nếu cấu hình chuẩn chỉnh, robots.txt sẽ giúp các bot tìm kiếm focus vào đúng những trang quan trọng, chặn đứng mấy URL rác rưởi và support tối ưu technical SEO như pro
Nhưng mà nếu setting sai một phát... ôi thôi rồi! Chỉ cần một dòng Disallow đặt lệch tý là cả website bị chặn crawl, ảnh hưởng đến index và traffic organic bay màu hết. Vậy nên nhớ kỹ: nhỏ nhưng có võ, đừng xem nhẹ nhé!
Nguồn: tinhte.vn
Nếu cấu hình chuẩn chỉnh, robots.txt sẽ giúp các bot tìm kiếm focus vào đúng những trang quan trọng, chặn đứng mấy URL rác rưởi và support tối ưu technical SEO như pro
Nhưng mà nếu setting sai một phát... ôi thôi rồi! Chỉ cần một dòng Disallow đặt lệch tý là cả website bị chặn crawl, ảnh hưởng đến index và traffic organic bay màu hết. Vậy nên nhớ kỹ: nhỏ nhưng có võ, đừng xem nhẹ nhé!
Nguồn: tinhte.vn