Sử dụng Robots.txt không đúng cách có thể làm công sức mà các dịch vụ SEO gầy dựng đổ sông đổi biển. Những điểm rất căn bản, rất dễ sửa nhưng nếu sai sẽ gây hậu quả nghiêm trọng. Tập đoàn Liberty Mutual có trụ sở chính đặt tại Thành phố Boston, bang Massachusetts, Mỹ và hiện có hơn 45,000 nhân viên làm việc tại hơn 900 văn phòng trên toàn thế giới. Liberty hiện là Tập đoàn bảo hiểm phi nhân thọ lớn thứ 5 tại nước Mỹ, được Tổ chức A.M Best Co. đánh giá ở mức “Xuất sắc” (A/Excellent) và xếp vào danh sách 100 tập đoàn lớn nhất nước Mỹ dựa vào doanh thu năm 2009. Đây là file robots của Liberty InsuranceKết quả tìm kiếm Vẫn ở kết quả đầu tiên nhưng không còn chi tiết về description nữa. Trong source code trang chủ vẫn cho phép robots Index và follow nhưng file robots.txt đã vô hiệu hóa phần meta này. Như vậy, robots.txt có sức mạnh nhiều hơn Meta Tag. Các kết quả được index trước đây vẫn xuất hiện trên trong phần index. Tuy nhiên nếu không khắc phục, số lượng trang index sẽ từ từ mất đi cho tới khi về không (Zero). Bonus: Đặt sai vị trí của Robots.txt sẽ không có tác dụng ở website ILA Việt Nam ILA Việt Nam đã block khá nhiều liên kết để Robots không vào index những thông tin nhạy cảm, nhưng đặt sai vị trí Nên Bots vẫn vào đọc nội dung bình thường
file robots này mình tưởng với mỗi loại code lai khác nhau, thường mình cũng chỉ đặt chặn admin thôi.
Rồi phân tích thì cũng phải đưa ra hướng giải quyết chứ bạn. Phân tích không thế này thì cũng bó tay.
Bạn có thể đăng thêm bài nói về cách khắc phục nó được không? mình gặp vài lỗi như trên mà chưa biết phải giải quyết như nào?
mấy bác hỗ trợ mình cái, hiện mấy cái chức năng robot bị chặn css, js, làm cách nào cho nó vô kiếm các phần đó, bữa giờ mình allow rồi nhưng vẫn bị chặn xin cái bác giúp đỡ, thay đổi câu lệnh thế nào cho đúng
Nếu phân tích sai cách dùng robots thì ảnh hưởng không nhỏ đến độ uy tín của website trong quá trình SEO.
Bạn ơi tại sao mình không thể cập nhật được thong tin mới trên file robots.txt nhỉ, ấn lưu rồi mà nó không lưu cho, muốn chặn một số cái đi mà ko được
Nếu vậy bạn có thể tải file đó về chỉnh sửa bằng notepad rồi sau đó up lên nhé. FIle robot.txt này nhẹ nên bác cứ yên tâm.
HÃY TRANH THỦ TRONG KHI ĐỐI THỦ BẬN ĂN TẾT ĐỐI THỦ CỦA BẠN Đang bận lo Tết đến, họ đang chuẩn bị vui xuân, qua Tết mới triển khai kinh doanh tiếp. BẠN CÓ NHƯ VẬY KHÔNG ? Kinh doanh không bỏ lỡ giây phút nào cả, chúng tôi giúp bạn ĐI TRƯỚC ĐỐI THỦ NGAY Thiết kế trang Web ngay lúc này để qua Tết mở hàng với 1 website đầy đủ nội dung và may mắn trong lúc đối thủ của bạn vẫn mơ màng phê Tết. HÃY GIAO VIỆC ĐÓ CHO CHÚNG TÔI! CHÚNG TÔI SẼ LÀM TỐT NHẤT CHO BẠN VỚI CHI PHÍ THẤP NHẤT ! Khuyến Mãi Thiết Kế Web Tháng 1 .Chỉ 1,990,000, có ngay Bộ " Website Chuyên Nghiệp + Tên Miền + Hosting + Email theo tên miền riêng" BẢO HÀNH VĨNH VIỄN 0986.184.211 (VIBER/ZALO) + 0908.823.311 Địa Chỉ: 134/15 Huỳnh Văn Nghệ, P15, Tân Bình, Tp.HCM Homepage: thietkewebchuyen . com
HÃY TRANH THỦ TRONG KHI ĐỐI THỦ BẬN ĂN TẾT ĐỐI THỦ CỦA BẠN Đang bận lo Tết đến, họ đang chuẩn bị vui xuân, qua Tết mới triển khai kinh doanh tiếp. BẠN CÓ NHƯ VẬY KHÔNG ? Kinh doanh không bỏ lỡ giây phút nào cả, chúng tôi giúp bạn ĐI TRƯỚC ĐỐI THỦ NGAY Thiết kế trang Web ngay lúc này để qua Tết mở hàng với 1 website đầy đủ nội dung và may mắn trong lúc đối thủ của bạn vẫn mơ màng phê Tết. HÃY GIAO VIỆC ĐÓ CHO CHÚNG TÔI! CHÚNG TÔI SẼ LÀM TỐT NHẤT CHO BẠN VỚI CHI PHÍ THẤP NHẤT ! Khuyến Mãi Thiết Kế Web Tháng 1 .Chỉ 1,990,000, có ngay Bộ " Website Chuyên Nghiệp + Tên Miền + Hosting + Email theo tên miền riêng" BẢO HÀNH VĨNH VIỄN 0986.184.211 (VIBER/ZALO) + 0908.823.311 Địa Chỉ: 134/15 Huỳnh Văn Nghệ, P15, Tân Bình, Tp.HCM Homepage: thietkewebchuyen . com
Chuyên phân phối máy tính bảng Mid K960, Mid K107, Mid 7731, Nontaus 10, ... hàng Đài Loan Máy tính bảng giá rẻ nhưng chất lượng phải ổn định. Chúng tôi cam kết bán hàng chính hãng. 1 đổi 1 trong 7 ngày đầu nếu máy bị lỗi kỹ thuật. Ngoài ra , nếu hết hạn bảo hành vẫn có linh kiện để sữa chữa thay thế MinhHuy CompanySỰ LỰA CHỌN THÔNG MINH CỦA BẠNĐC: 271/21 Trịnh Đình Trọng, Hòa Thạnh, Tân Phú, Hồ Chí Minh ( Cách Đầm Sen nước 300m, đầu hẻm 271 Kênh Tân Hóa)ĐT: 090.246.4227, 098 829 0718, 085 406 7374ctyminhhuy.com, ctylinhnhi.com