Logo Ondigitals No BackgroundLogo Ondigitals No BackgroundLogo Ondigitals No BackgroundLogo Ondigitals No Background
  • TRANG CHỦ
  • DỊCH VỤ
    • SEO
    • GOOGLE ADS
    • FACEBOOK ADS
    • THIẾT KẾ WEBSITE
    • THIẾT KẾ APP
    • CONTENT MARKETING
    • VIDEO QUẢNG CÁO
    • KOL MARKETING
    • THIẾT KẾ ĐỒ HỌA
    • QUẢNG CÁO OOH
    • QUẢNG CÁO TVC
    • TELEMARKETING
    • EMAIL MARKETING
    • EVENT MARKETING
  • TIN TỨC
  • KIẾN THỨC
    • SEO
    • MARKETING
    • SOCIAL MEDIA
  • DỰ ÁN
  • ENGLISHENGLISH
  • 中文(简体)中文(简体)
  • 한국어한국어
  • 日本語日本語
  • Liên Hệ
  • contact@ondigitals.com
26/06/2023
On Digitals

Hướng dẫn cách tạo file robots.txt cho Wordpress đơn giản nhất


Thế nào là code web chuẩn SEO?
 

Bạn muốn tối ưu website WordPress của mình trên công cụ tìm kiếm? Bạn cần biết đến file robots.txt và cách tạo nó. On Digitals sẽ hướng dẫn bạn tạo file robots.txt cho WordPress một cách đơn giản nhất qua bài viết này. Hãy cùng đọc và áp dụng ngay để tối ưu SEO cho website của bạn!

 
 
Mục Lục Hiện
1 File robots.txt là gì? Tại sao nên dùng file robots.txt?
2 File robots.txt nằm ở đâu trong WordPress?
3 File robots.txt trong WordPress cần thêm quy tắc gì?
4 Các quy tắc cơ bản của Robots Exclusion Standard
5 Làm thế nào để tạo file robots.txt trên WordPress?
5.1 Sử dụng Yoast SEO
5.2 Qua bộ plugin All in One SEO Pack
5.3 Tạo, upload file robots.txt WordPress qua FTP
6 Cách kiểm tra xem file WordPress robots.txt
7 Lời kết

File robots.txt là gì? Tại sao nên dùng file robots.txt?

File robots.txt là một file văn bản đơn giản nằm trên máy chủ web của bạn, nó được sử dụng để cung cấp thông tin cho các máy tìm kiếm về cách mà các trang web của bạn nên được truy cập và xử lý. File robots.txt cho phép bạn kiểm soát các trình thu thập dữ liệu trên trang web của bạn, giúp ngăn chặn các trang bị lặp lại, giảm tải cho máy chủ và tăng tốc độ tải trang web.



file robots.txt là gì
File robots.txt và vai trò của với website

Việc sử dụng file robots.txt rất quan trọng đối với các trang web với nội dung động, nội dung phức tạp hoặc các trang web chứa các tài nguyên như hình ảnh, tệp media, video,… nó giúp ngăn chặn các trình thu thập dữ liệu truy cập và tải các tài nguyên không cần thiết, từ đó giảm tải cho máy chủ và cải thiện hiệu suất trang web của bạn.

Nếu bạn không sử dụng file robots.txt, các trình thu thập dữ liệu như Googlebot hoặc Bingbot sẽ truy cập và xử lý tất cả các trang và tài nguyên trên trang web của bạn. Điều này có thể làm tăng tải cho máy chủ và kéo dài thời gian tải trang web của bạn.


File robots.txt nằm ở đâu trong WordPress?

Trong WordPress, file robots.txt có thể được tạo và sửa đổi thông qua trình quản lý tệp hoặc trình chỉnh sửa mã nguồn. Thường thì, file robots.txt được đặt tại thư mục gốc của website. Để kiểm tra xem file robots.txt của website có tồn tại hay không, bạn chỉ cần thêm /robots.txt vào sau đường dẫn gốc của website và truy cập vào đó. Ví dụ, nếu đường dẫn gốc của website của bạn là www.example.com, bạn có thể kiểm tra file robots.txt bằng cách truy cập vào www.example.com/robots.txt.


File robots.txt trong WordPress cần thêm quy tắc gì?

Trong WordPress, tùy vào nhu cầu sử dụng, bạn có thể thêm một số quy tắc cho file robots.txt để tối ưu hóa việc thu thập và index trang web của mình. Dưới đây là một số quy tắc cơ bản mà bạn có thể áp dụng:



file robots.txt trong wordpress
Quy tắc của file robots.txt trong WordPress

  1. Tất cả các trang được cho phép:

User-agent: *

Disallow:

  1. Tất cả các trang bị chặn:

User-agent: *

Disallow: /

  1. Chỉ cho phép truy cập một số thư mục:

User–agent: *

Disallow: /wp-admin/

Disallow: /wp-includes/

  1. Chỉ cho phép truy cập trang chủ và một số trang cần thiết khác:

User-agent: *

Disallow: /wp-admin/

Disallow: /wp-includes/

Allow: /$

Allow: /contact-us.html

Ngoài ra, bạn cũng có thể sử dụng các quy tắc phức tạp hơn để kiểm soát truy cập của bot đến trang web của mình. Tuy nhiên, cần lưu ý rằng file robots.txt chỉ là một hướng dẫn và không thể ngăn chặn các bot hoặc hacker truy cập trái phép vào trang web của bạn.


Các quy tắc cơ bản của Robots Exclusion Standard

Robots Exclusion Standard (RES) là một giao thức được sử dụng để hướng dẫn các trình thu thập dữ liệu như máy tìm kiếm truy cập trang web. File robots.txt là tệp được sử dụng để chỉ định các chỉ thị cho các trình thu thập dữ liệu. Dưới đây là một số quy tắc cơ bản mà bạn có thể thêm vào file robots.txt trong WordPress:

  1. User-agent: đây là chỉ thị được sử dụng để xác định trình thu thập dữ liệu nào được phép truy cập trang web. Bạn có thể sử dụng nó để chỉ định một số trình thu thập dữ liệu cụ thể mà bạn muốn cho phép hoặc từ chối truy cập.
  2. Disallow: đây là chỉ thị được sử dụng để chỉ định các trang mà các trình thu thập dữ liệu không được phép truy cập. Bạn có thể sử dụng nó để ẩn các trang không cần thiết khỏi các trình thu thập dữ liệu.
  3. Allow: đây là chỉ thị được sử dụng để chỉ định các trang mà các trình thu thập dữ liệu được phép truy cập. Bạn có thể sử dụng nó để cho phép các trang được truy cập mà không bị ảnh hưởng bởi các chỉ thị Disallow.
  4. Sitemap: đây là chỉ thị được sử dụng để chỉ định vị trí của tệp sitemap trên trang web của bạn. Các trình thu thập dữ liệu có thể sử dụng tệp sitemap để tìm thấy tất cả các trang có trên trang web của bạn.
  5. Crawl-delay: đây là chỉ thị được sử dụng để chỉ định thời gian giữa các lần truy cập của các trình thu thập dữ liệu trên trang web của bạn. Bạn có thể sử dụng nó để kiểm soát tốc độ truy cập của các trình thu thập dữ liệu và tránh tình trạng quá tải trang web của bạn.



cách thêm file robots.txt
Quy tắc cơ bản để thêm file robots.txt

Những quy tắc trên đây là những quy tắc cơ bản và quan trọng nhất bạn nên biết khi tạo file robots.txt trong WordPress. Tuy nhiên, bạn có thể thêm nhiều quy tắc khác để tối ưu hóa trang web của bạn cho các trình thu thập dữ liệu.


Làm thế nào để tạo file robots.txt trên WordPress?

Để tạo file robots.txt trên WordPress, có thể sử dụng một số cách sau:


Sử dụng Yoast SEO

Bước 1: Đăng nhập vào tài khoản quản trị WordPress.

Bước 2: Chọn menu “SEO” > “Tools” > “File Editor”.

Bước 3: Nhấn “Create robots.txt file”.

Bước 4: Tùy chỉnh nội dung file robots.txt theo nhu cầu.

Bước 5: Nhấn “Save Changes to Robots.txt” để lưu thay đổi.


Qua bộ plugin All in One SEO Pack

Bước 1: Đăng nhập vào tài khoản quản trị WordPress.

Bước 2: Chọn menu “All in One SEO” > “Feature Manager”.

Bước 3: Bật chức năng “Robots.txt Generator”.

Bước 4: Nhấn “Edit Robots.txt” để tạo và chỉnh sửa file robots.txt.

Bước 5: Lưu thay đổi bằng cách nhấn “Save Changes”.


Tạo, upload file robots.txt WordPress qua FTP

Bước 1: Tạo một file mới trên máy tính có tên là “robots.txt”.

Bước 2: Thêm nội dung muốn cho vào file.

Bước 3: Sử dụng một chương trình FTP để kết nối tới hosting của WordPress.

Bước 4: Upload file “robots.txt” lên thư mục gốc của website.

Bước 5: Kiểm tra bằng cách truy cập đường dẫn domain.com/robots.txt để xác nhận file đã được tạo thành công.


Cách kiểm tra xem file WordPress robots.txt

Để kiểm tra xem file robots.txt của WordPress đã được tạo và được đặt đúng vị trí hay chưa, bạn có thể làm theo các bước sau:



cách kiểm tra file robots.txt
Kiểm tra file robots.txt sau khi tạo

  1. Truy cập vào trang web của bạn.
  2. Thêm “/robots.txt” vào sau địa chỉ URL của trang web của bạn, ví dụ: https://example.com/robots.txt
  3. Nếu trang hiển thị nội dung của file robots.txt, điều đó có nghĩa là file đã được tạo và được đặt đúng vị trí.
  4. Nếu không thấy nội dung của file robots.txt, có thể file chưa được tạo hoặc được đặt sai vị trí.

Bạn cũng có thể sử dụng các công cụ trực tuyến để kiểm tra file robots.txt của trang web của mình, chẳng hạn như trang web của Google.


Lời kết

Viết file robots.txt đúng cách là một phần quan trọng trong việc tối ưu hóa SEO cho website của bạn. Việc sử dụng các công cụ để kiểm tra và tối ưu file robots.txt sẽ giúp cho website của bạn được đánh giá cao hơn trong việc tìm kiếm trên các công cụ tìm kiếm. On Digitals hi vọng với hướng dẫn trên, bạn đã có thể tạo và kiểm tra file robots.txt cho website WordPress của mình một cách đơn giản và dễ dàng.

Để cập nhật các bài viết mới liên quan đến SEO website, hãy truy cập vào website On Digitals. Nếu các bạn có nhu cầu sử dụng dịch vụ SEO cho website doanh nghiệp, hãy liên hệ với chúng tôi để biết thêm thông tin chi tiết.

1111
Share
14

Related posts

google hummingbird là gì
13/07/2023

Google Hummingbird là gì? Thuật toán đã thay đổi công cụ tìm kiếm như thế nào


Read more
11/07/2023

Pagination là gì? Và cách triển khai nó trên trang web của bạn


Read more
27/06/2023

Tìm hiểu các plugin cần cho WordPress hữu ích hiện nay


Read more

Comments are closed.

Dịch vụ


SEO
Google Ads
Facebook Ads
Thiết Kế Website
Thiết Kế App
Content Marketing
Video Quảng Cáo
KOL Marketing
Thiết Kế Đồ Họa
Quảng Cáo OOH
Quảng Cáo TVC
Telemarketing
Email Marketing
Event Marketing

Tham khảo


Dự án
Tin tức
Liên hệ
Chính sách bảo mật
Site Map
Landing Page

Logo Ondigitals No Background
  • Địa chỉ: Tầng 7, 75 Hồ Hảo Hớn, Phường Cô Giang, Quận 1, Thành Phố Hồ Chí Minh
  • Hotline: 0906648177
  • Giờ làm việc: Thứ 2 - Thứ 6
© 2023 On Digitals Company Limited. All right reserved. DMCA.com Protection Status
  • No translations available for this page
  • contact@ondigitals.com