Chỉ đường cho Google: sơ đồ trang và tệp cho phép

Chuyện thường gặp

Bài này cần anh chị đã có tên miền (địa chỉ web) và chỗ chứa web.

Anh chị đăng bài mới. Một tuần sau, tìm trên Google vẫn không thấy. Anh chị nghĩ bài dở. Có khi Google chưa biết bài đó có tồn tại.

Vì sao: Google cần được chỉ đường

Google có phần mềm tự chạy, gọi là robot, bám đường dẫn từ trang này sang trang khác. Trang mới, ít nơi dẫn về, thì robot có thể rất lâu mới ghé.

Nên mình chỉ đường bằng hai tệp (file chữ nhỏ):

• Sơ đồ trang (sitemap.xml): danh sách các trang anh chị muốn Google biết.
• Tệp cho phép (robots.txt): báo robot chỗ nào được vào, chỗ nào đừng vào.

Cách làm

Bước 1. Đếm số trang Google đang biết. Gõ dòng sau lên Google, thay bằng tên miền của anh chị:

site:tenmiencuaanhchi.com

Đừng chừa dấu cách sau site:. Số này chỉ ước chừng, có khi bị ẩn sau nút Công cụ. Không thấy thì lướt đếm vài trang kết quả, hoặc sau Bước 5, xem mục Trang.

Bước 2. Viết tệp cho phép. Mở Notepad (Windows) hoặc TextEdit (Mac), gõ:

User-agent: *
Allow: /

Sitemap: https://tenmiencuaanhchi.com/sitemap.xml

Allow: / là cho robot vào hết. Muốn chặn thư mục quản trị thì thêm Disallow: /quanly/. Lưu tên robots.txt, chọn kiểu tệp "All files", kẻo Notepad thêm đuôi thành robots.txt.txt. TextEdit trên Mac hay lưu thành .rtf: chọn Định dạng > Tạo văn bản thuần tuý trước khi lưu. WordPress: đổi tên tệp trong dòng Sitemap cho khớp Bước 3, rồi để plugin tự lo robots.txt.

Bước 3. Tạo sơ đồ trang. WordPress (phần mềm làm web): mở thử /sitemap_index.xml hoặc /wp-sitemap.xml, cái nào hiện chữ thì gửi cái đó. Chưa có thì cài tiện ích SEO (phần mềm giúp trang dễ được Google tìm thấy). Trang tự dựng bằng HTML thì nhờ trợ lý AI, dán lệnh này:

Tôi có trang web tĩnh, không biết lập trình.
Tên miền: [ví dụ: https://sanxegoviet.com]
Các trang, mỗi dòng một địa chỉ: [ví dụ: /gioi-thieu.html]
Viết tệp sitemap.xml đúng chuẩn, nói rõ đặt vào thư mục nào.
Viết để tôi chép vào Notepad.

Bước 4. Tải hai tệp (WordPress: bỏ qua sitemap) lên thư mục gốc. Thư mục gốc thường là public_html. Tên miền thêm sau thì thư mục gốc là thư mục đã chọn lúc thêm tên miền. Vào quản lý tệp của hosting (nơi thuê để web chạy), mở nó, tải lên.

Rồi gõ tenmiencuaanhchi.com/robots.txt và /sitemap.xml vào trình duyệt. Thấy chữ hiện ra là đúng. Lỗi 404 (không tìm thấy) là đặt sai chỗ.

Bước 5. Báo cho Google. Mở Google Search Console, đăng nhập. Bấm "Thêm thuộc tính", chọn "Tiền tố URL", dán địa chỉ trang.

Chọn xác minh bằng "Thẻ HTML". Dán dòng đó vào giữa chữ <head> và </head> trong index.html, lưu, tải lại lên hosting rồi bấm xác minh. Dễ hơn: chọn "Tệp HTML", tải tệp Google đưa vào public_html, bấm xác minh. WordPress: dùng cách Tệp HTML, hoặc dán qua plugin SEO.

Rồi mở mục "Sơ đồ trang web", gõ sitemap.xml (WordPress thì gõ tên tệp vừa thấy hiện chữ), bấm gửi. Có bài mới thì vào "Kiểm tra URL", dán địa chỉ bài, bấm "Yêu cầu lập chỉ mục".

Mỗi tháng mở mục "Trang" trong Search Console. Nó liệt kê trang chưa lập chỉ mục kèm lý do. Đọc lý do, sửa từng cái.

⏱ Việc 10 phút

Làm ngay trong 10 phút

Chỉ soi trang, làm trên máy tính.

1. 2 phút: gõ site: và tên miền lên Google, ghi số trang hiện ra.

2. 3 phút: gõ tenmien.com/robots.txt, xem có dòng Disallow: / không.

3. 2 phút: gõ tenmien.com/sitemap.xml, xem có hiện chữ không.

4. 3 phút: ghi ba kết quả (lỗi 404 cũng là một kết quả) vào ghi chú.

Tôi làm rồi

Ba chỗ hay sai

• Chặn nhầm cả trang. Disallow: / nghĩa là cấm vào hết. Disallow: /wp-admin/ thì bình thường.
• Sơ đồ trang để cũ. Trang tự dựng thì thêm bài nào, ghi thêm một dòng bài đó.
• Tưởng khai báo là đứng đầu kết quả. Khai báo chỉ giúp Google biết bài có tồn tại. Bài đứng ở đâu còn tuỳ nội dung, và cần nhiều tháng.