Nội dung chính
Bị loại trừ bởi thẻ noindex là một thông báo trong Lý do trang không được lập chỉ mục của Google Search Console. Trong bài viết này, tôi sẽ giải thích rõ bản chất và hướng dẫn bạn khắc phục lỗi “bị loại trừ bởi thẻ noindex” một cách triệt để.
Lỗi bị loại trừ bởi thẻ noindex là gì?
Bị loại trừ bởi thẻ noindex là trạng thái bài viết xuất hiện một thẻ noindex thông báo với các Bot công cụ tìm kiếm rằng không được lập chỉ mục và xếp hạng nội dung này trên công cụ tìm kiếm.
Code:
<meta name=”robots” content=”noindex, follow”/>
Nguyên nhân lỗi bị loại trừ bởi thẻ noindex:
Có rất nhiều nguyên nhân gây ra lỗi bị loại trừ bởi thẻ noindex, tuy nhiên dưới đây có 3 lỗi thường xuyên gặp phải:
- Quản trị website submit một trang có gắn thẻ noindex trong Google Search Console
- Trang đã được lập chỉ mục, sau đó bị chuyển trạng thái sang noindex
- Trang noindex được liệt kê trong sitemaps website
Để hiểu rõ hơn về lỗi này, chúng ta cùng đi sâu vào phân tích 3 nguyên nhân phổ biến trên.
1. Quản trị website submit một trang noindex trong Google Search Console:
Bạn không nghe nhầm đâu, nhưng đây thực sự là một lỗi. Với bài viết đã được gắn thẻ noindex khi submit trong Google Search Console sẽ nhận được thông báo:
Được phép lập chỉ mục: Không: Phát hiện thấy “noindex” trong thẻ meta ‘robots’
Nếu bạn vẫn cố chấp bấm gửi lập chỉ mục, hoặc vô tình bấm gửi lập chỉ mục. Thì url trên sẽ bị list vào danh sách lỗi bị loại trừ bởi thẻ noindex. Trường hợp khi submit link SEO bạn thấy dòng thông báo trên, thì tốt nhất bạn không nên gửi. Thay vào đó hãy kiểm tra lại link SEO, gỡ noindex rồi submit sau.
2. Trang đã được lập chỉ mục, sau đó chuyển trạng thái sang noindex
Vào năm 2023, tôi có cung cấp dịch vụ SEO tổng thể cho một công ty làm về dịch vụ thiết bị vệ sinh. Tuy là website dịch vụ, nhưng khi thiết kế website đơn vị này đã cài plugin woocommerce để hiển thị các mặt hàng đã nhập thay vì sử dụng mục dự án đã thực hiện như các đối thủ cùng ngành.
Tuy nhiên qua tư vấn, khách hàng vẫn không đồng ý bỏ mục này để thay bằng dự án đã thực hiện. Vì vậy, tôi đã tiến hành set noindex cho toàn bộ mục này. Điều này làm phát sinh trạng thái lỗi bị loại trừ bởi thẻ noindex hàng loạt đối với các danh mục, sản phẩm. Việc set noindex này giúp tiết kiệm ngân sách crawl cho Bot Google và không làm phá vỡ cấu trúc của website mà team đã nghiên cứu từ trước.
3. Trang noindex được liệt kê trong sitemaps:
Một số trang nên để noindex như thẻ tag bài viết, tag sản phẩm,…. vì các thẻ này làm ảnh hưởng trực tiếp đến thứ hạng từ khóa khi SEO.
Tuy nhiên khi set noindex, bạn lại quên loại trừ các thẻ này ra khỏi sitemap. Điều này làm cho Bot các công cụ tìm kiếm liên tục tìm thấy và thu thập dữ liệu các url này. Dẫn đến lỗi trang bị loại trừ bởi thẻ noindex.
Ngoài lỗi bị loại trừ bởi thẻ noindex, trong Google Search Console còn một số lỗi như không tìm thấy (404), trang có lệnh chuyển hướng hay trang thay thế có thẻ chính tắc thích hợp bạn cũng nên tìm cách khắc phục hợp lý.
Cách khắc phục lỗi bị loại trừ bởi thẻ noindex:
SEO Web Đà Nẵng sẽ giúp bạn khắc phục lỗi trên ngay sau đây.
1. Quản trị website vô tình set noindex cho trang SEO
Như đã trình bày ở trên, nếu trang SEO của bạn được liệt kê trong lỗi này. Rất có thể bạn đã đặt thẻ noindex cho bài viết của mình. Để kiểm tra xem bài viết có thẻ noindex không, bạn có thể thao tác theo các bước dưới đây:
Bước 1: Xóa bộ nhớ cache của website nếu bạn sử dụng plugin cache, tối ưu tốc độ
Bước 2: Bấm Ctrl + Shift + U để kiểm tra nguồn trang
Bước 3: Bấm Ctrl + F để tìm kiếm, gõ cụm từ “noindex” và bấm tìm kiếm.
Trường hợp không tìm thấy thẻ noindex, bạn có thể submit lại url và chờ đợi kết quả. Trường hợp bạn tìm thấy thẻ noindex trong bạn phải tiến hành gỡ thẻ này trước khi gửi url cho trong GSC.
Để gỡ noindex cho một bài viết bất kỳ, bạn có thể theo hướng dẫn dưới đây. Lưu ý, hướng dẫn này SEO Web Đà Nẵng sử dụng plugin Rank Math SEO để thao tác. Với các plugin khác, bạn có thể làm tương tự.
Bước 1: Đảm bảo rằng bạn đã cài và kích hoạt plugin Rank Math SEO
Bước 2: Mở bài viết cần chỉnh sửa, bấm vào biểu tượng Rank Math SEO
Bước 3: Chuyển sang tab Advanced, tại mục ROBOTS META click chọn Index.
Bước 4: Lưu lại, xóa cache và kiểm tra xem thẻ noindex đã được loại bỏ chưa
Bước 5: Submit lại url SEO trên Google Search Console
2. Xóa trang noindex khỏi sitemaps
Để loại bỏ các nội dung noindex trên website ra khỏi sitemap, bạn có thể theo dõi và làm theo các hướng dẫn từ SEO Web Đà Nẵng dưới đây.
Đảm bảo rằng website bạn đã cài đặt plugin Rank Math SEO
- Truy cập trang quản trị website -> Chọn Rank Math
- Click chọn Sitemap Setting -> Chọn mục muốn loại trừ khỏi Sitemap
- Gạt nút Include in sitemap sang trạng thái Off
- Lưu lại và kiểm tra sitemap
Lưu ý khi xử lý lỗi bị loại trừ bởi thẻ noindex
Việc xóa url bằng công cụ xóa Url của Google Search Console không giải quyết hoàn toàn lỗi này. Vì vậy bạn không nên sử dụng công cụ xóa url tạm thời của Google để xử lý lỗi.
Tại sao nên xử lý lỗi bị loại trừ bởi noindex?
Lỗi bị loại trừ bởi noindex sẽ không phải là vấn đề khi bạn chủ động thêm thẻ noindex cho nội dung của mình. Tuy nhiên, nếu do một trong những nguyên nhân vừa nêu ra ở trên gây ra lỗi này thì bạn phải tìm cách khắc phục bởi vì:
- Ảnh hưởng đến khả năng index của link SEO. Nếu link SEO bị set noindex thì không thể được lập chỉ mục và xếp hạng bởi Google.
- Phá vỡ cấu trúc website: Lỗi này không được xử lý sẽ gây phá vỡ cấu trúc website, ngăn dòng chảy sức mạnh (link juice) bởi vì link juice không truyền qua được url có chứa thẻ noindex.
- Tốn ngân sách crawl của Google: Google sẽ mất nhiều thời gian để thu thập dữ liệu các url này, tuy nhiên điều này lại không giúp ích gì cho website.
Vậy là tôi đã hướng dẫn bạn xử lý lỗi bị loại trừ bởi thẻ noindex trong Google Search Console. Nếu bạn gặp trường hợp này và không thể xử lý, đừng ngần ngại để lại bình luận bên dưới.
