• About
  • Privacy Policy
  • Donate
  • Service PIN Adsense
  • Advertising: sinhmmo.net@gmail.com
Sinh MMO
  • KNOWLEDGE MMO
    • Website Traffic
    • Blogging Tips
  • INVEST
    • AI Marketing
    • INSURANCE HYIP
    • LONG-TERM PROJECT
    • TOP INVEST
    • LATEST SCAMS
    • Leader Bonus
    • Top Investors Bonus
    • INSURANCE
    • REFBACK(RCB)
  • FREE MONEY
    • Google Adsense
    • Auto Make Money
    • Project FREE
    • Airdrop
    • CPM – Traffic Cash
    • Game NFT
  • PI NETWORK
    • Guide to KYC Pi Network
  • SHARE
    • Theme Wordpress
    • Plugin Wordpress
    • SEO Wordpress
    • Tips Wordpress
  • CONTACT US
No Result
View All Result
Sinh MMO
  • KNOWLEDGE MMO
    • Website Traffic
    • Blogging Tips
  • INVEST
    • AI Marketing
    • INSURANCE HYIP
    • LONG-TERM PROJECT
    • TOP INVEST
    • LATEST SCAMS
    • Leader Bonus
    • Top Investors Bonus
    • INSURANCE
    • REFBACK(RCB)
  • FREE MONEY
    • Google Adsense
    • Auto Make Money
    • Project FREE
    • Airdrop
    • CPM – Traffic Cash
    • Game NFT
  • PI NETWORK
    • Guide to KYC Pi Network
  • SHARE
    • Theme Wordpress
    • Plugin Wordpress
    • SEO Wordpress
    • Tips Wordpress
  • CONTACT US
No Result
View All Result
Sinh MMO
No Result
View All Result

Mẫu file robots.txt chuẩn dành cho website WordPress

Sinh MMO Team by Sinh MMO Team
21/09/2021
in Chia Sẽ, SEO Wordpress
406 17
0
Share on FacebookShare on Twitter
Views: 2

Mẫu file robots.txt chuẩn dành cho website WordPress, có thể áp dụng cho tất cả các website.

Nếu các bạn chưa biết thì robots.txt là một trong những file có vai trò rất quan trọng đối với việc SEO website. Nó không những quy định cách thức các công cụ tìm kiếm có thể thu thập và lập chỉ mục trên website mà còn có thể ảnh hưởng tới khả năng hiển thị của website (tính thân thiện với thiết bị di động) khi Google Bots truy xuất dữ liệu. Do đó, có một file robots.txt chuẩn là bước đầu tiên mà các bạn cần làm khi tối ưu website cho các công cụ tìm kiếm.

Mục lục ẩn
1 File robots.txt là gì?
2 Các quy tắc cơ bản của Robots Exclusion Standard
3 Cách tạo file robots.txt trong WordPress
4 File robots.txt chuẩn cho website WordPress

You might also like

Sinhmmo.net 7 Kỹ Thuật & Chiến Lược SEO Hiệu Quả Nhất Vẫn Hoạt động Vào Năm 2022

7 kỹ thuật & chiến lược SEO hiệu quả nhất vẫn hoạt động vào năm 2022

25/05/2022
Sinhmmo.net 7 Phương Pháp để Tăng Tốc Trang Web WordPress Nhanh Chóng Tối ưu Hóa Tốc độ WordPress

7 phương pháp để tăng tốc trang web WordPress nhanh chóng | Tối ưu hóa tốc độ WordPress

24/04/2022

File robots.txt là gì?

Robots Exclusion Standard được phát triển từ năm 1994, nhằm giúp các webmaster có thể “tư vấn” cho các công cụ tìm kiếm cách thu thập thông tin từ website của họ. Nó hoạt động theo cách tương tự như các robot meta tag. Điểm khác biệt chính giữa chúng là các file robots.txt sẽ ngăn cản việc công cụ tìm kiếm truy cập vào một trang hoặc thư mục, trong khi các robot meta tag chỉ kiểm soát việc lúc nào thì trang hoặc thư mục đó được lập chỉ mục (index).

Đặt một file robots.txt trong thư mục gốc của tên miền cho phép bạn ngăn chặn công cụ tìm kiếm lập chỉ mục các tập tin và thư mục nhạy cảm. Ví dụ, bạn có thể ngăn chặn một công cụ tìm kiếm thu thập dữ liệu từ thư mục hình ảnh của bạn hoặc lập chỉ mục một tập tin PDF nằm trong một thư mục bí mật.

Các công cụ tìm kiếm lớn sẽ thực hiện theo các quy tắc mà bạn thiết lập. Tuy nhiên, không phải lúc nào các quy tắc mà bạn xác định trong tập tin robots.txt cũng được thi hành. Trình thu thập dữ liệu của các phần mềm độc hại và các công cụ tìm kiếm nhỏ có thể không tuân thủ các quy tắc và index bất cứ điều gì họ muốn. Rất may, các công cụ tìm kiếm lớn hoạt động theo các tiêu chuẩn này, bao gồm cả Google, Bing, Yandex, Ask và Baidu.

Các bạn có thể tham khảo thêm tài liệu về file robots.txt do chính Google cung cấp tại đây.

Các quy tắc cơ bản của Robots Exclusion Standard

Không mất quá nhiều thời gian để có được một sự hiểu biết đầy đủ về Robots Exclusion Standard. Chỉ có một vài quy tắc mà bạn cần phải tìm hiểu. Những quy tắc này thường được gọi là “chỉ thị”.

Ba chỉ thị chính của Robots Exclusion Standard là:

  • User-agent: xác định các công cụ tìm kiếm mà quy tắc được áp dụng.
  • Disallow: ngăn cản các công cụ tìm kiếm thu thập thông tin và lập chỉ mục.
  • Allow: cho phép các công cụ tìm kiếm thu thập thông tin và lập chỉ mục.

Dấu hoa thị (*) có thể được sử dụng như một ký tự đại diện cho tất cả các công cụ tìm kiếm. Ví dụ, bạn có thể thêm dòng sau vào file robots.txt để ngăn chặn các công cụ tìm kiếm thu thập thông tin trên toàn bộ website của bạn.

User-agent: *
Disallow: /

Các chỉ thị trên là hữu ích nếu bạn đang phát triển một website mới và không muốn các công cụ tìm kiếm lập chỉ mục khi nó chưa được hoàn thiện.

Một số website sử dụng chỉ thị Disallow mà không có dấu gạch chéo (/) để biểu thị một trang web có thể được thu thập dữ liệu. Điều này cho phép các công cụ tìm kiếm có đầy đủ quyền truy cập vào toàn bộ website của bạn.

User-agent: *
Disallow:

Để ngăn chặn việc thu thập dữ liệu với các thư mục hoặc đường dẫn cụ thể, bạn chỉ cần thêm đường dẫn hoặc tên thư mục vào sau chữ Disallow . Trong ví dụ dưới đây, tôi đã quy định các công cụ tìm kiếm không được phép thu thập thông tin của thư mục /images/ và toàn bộ các tập tin cũng như thư mục con chứa trong nó:

User-agent: *
Disallow: /images/

Điều này có được là do robots.txt sử dụng đường dẫn tương đối, không sử dụng đường dẫn tuyệt đối. Các dấu gạch chéo (/) thay thế cho thư mục gốc của tên miền và do đó áp dụng quy tắc cho toàn bộ website của bạn. Đường dẫn là trường hợp nhạy cảm, vì vậy hãy chắc chắn sử dụng đúng trường hợp khi xác định các tập tin, các trang và thư mục.

Cách tạo file robots.txt trong WordPress

Tạo file robots.txt bằng phương pháp thủ công

Một tập tin robots.txt có thể được tạo ra trong vài giây. Tất cả những gì bạn phải làm là mở một trình soạn thảo văn bản (NotePad hoặc NotePad++) và lưu một tập tin trống với tên “robots.txt”.

Sau khi thêm một số quy tắc vào tập tin, hãy lưu nó lại và upload lên thư mục gốc của tên miền, tức là tại địa chỉ https://yourwebsite.com/robots.txt. Hãy đảm bảo bạn đã upload tập tin robots.txt vào thư mục gốc của tên miền, ngay cả khi WordPress được cài đặt trong một thư mục con.

File robots.txt chuẩn cho website WordPress

Đây là một trong những mẫu file robots.txt chuẩn nhất, tối ưu nhất, được nhiều blogger WordPress nổi tiếng tin dùng. Bạn cũng có thể sử dụng nó cho website WordPress của mình. Tuy nhiên, hãy nhớ tùy biến nó cho phù hợp với từng hoàn cảnh cụ thể.

User-agent: *
Disallow: /wp-admin/
Disallow: /readme.html
Disallow: /license.txt
Disallow: /?s=*
Allow: /wp-admin/admin-ajax.php
Allow: /wp-admin/images/*
Sitemap: https://sinhmmo.net/sitemap_index.xml

Lưu ý:

  • Thay https://sinhmmo.net/sitemap_index.xml bằng đường link đến XML sitemap của bạn.
  • Không nên chặn Google và các công cụ tìm kiếm khác thu thập dữ liệu trong các thư mục /wp-content/themes/ và /wp-content/plugins/. Điều đó sẽ cản trở việc Google có một cái nhìn chính xác nhất về giao diện website của bạn. Ngoài ra, nó cũng có thể gây ra lỗi website không thân thiện với thiết bị di động.

Bạn đang sử dụng mẫu file robots.txt nào cho website WordPress của mình? Theo bạn, mẫu file robots.txt đó có thực sự tối ưu hay không? Hãy chia sẻ nó với chúng tôi thông qua khung bình luận bên dưới.

Nếu bạn thích bài viết này, hãy theo dõi blog của tôi để thường xuyên cập nhật những bài viết hay nhất, mới nhất nhé. Cảm ơn rất nhiều.

Sinh MMO Team

Sinh MMO Team

SINH MMO | sinhmmo.net | Blog MMO - Kiếm Tiền Online | Sinh MMO là blog chia sẻ kiến thức, kĩ năng kiếm tiền online (MMO) & Digital Marketing: Affiliate Marketing, Google Adsense, Youtube, WordPress, SEO,... Cách để bạn có thể kiếm tiền, tạo thu nhập thụ động từ Internet

Related Stories

Sinhmmo.net 7 Kỹ Thuật & Chiến Lược SEO Hiệu Quả Nhất Vẫn Hoạt động Vào Năm 2022

7 kỹ thuật & chiến lược SEO hiệu quả nhất vẫn hoạt động vào năm 2022

by Sinh MMO Team
25/05/2022
0

Mỗi ngày, hơn 4 tỷ lượt tìm kiếm được thực hiện bởi những người trên Google. Dữ liệu phân tích nói...

Sinhmmo.net 7 Phương Pháp để Tăng Tốc Trang Web WordPress Nhanh Chóng Tối ưu Hóa Tốc độ WordPress

7 phương pháp để tăng tốc trang web WordPress nhanh chóng | Tối ưu hóa tốc độ WordPress

by Sinh MMO Team
24/04/2022
0

Các WordPress được sử dụng bởi nhiều nhà phát triển web trên toàn thế giới để cung cấp thông tin...

Sinhmmo.net Cách Làm đẹp Liên Kết Trên WordPress Với Thirsty Affiliates Che Dấu Link Tiếp Thị Liên Kết

Cách làm đẹp liên kết trên WordPress với Thirsty Affiliates (che dấu link tiếp thị liên kết)

by Sinh MMO Team
21/04/2022
0

Nếu mình đoán không lầm, hiện tại bạn đang chạy các chương trình tiếp thị liên kết trên Blog WordPress...

Sinhmmo.net 5 Lý Do Hàng đầu Khiến Trang Web Của Bạn Không Nhận được Lưu Lượng Truy Cập Và Xếp Hạng

5 lý do hàng đầu khiến trang web của bạn không nhận được lưu lượng truy cập và xếp hạng

by Sinh MMO Team
21/04/2022
0

Nhận được lượng truy cập lớn vào trang web và blog của bạn luôn là niềm mơ ước của mọi...

0 0 votes
Article Rating
Subscribe
Login
Notify of
guest
guest
0 Comments
Inline Feedbacks
View all comments
  • Trending
  • Comments
  • Latest
Hướng dẫn KYC từng bước theo cách mới hiện tại của Pi Nework

Cập nhật hướng dẫn KYC Pi Network mới nhất – thành công 100%

12/05/2022
Sinhmmo.net Make Money Free With 5billionsales

Review 5BillionSales hợp pháp hay lừa đảo? Cách đăng ký và kiếm tiền

19/04/2022
Sinhmmo.net Qc Header

Hướng dẫn kiếm tiền miễn phí từ App giải trí trong tầm tay

15/04/2022
Sinhmmo.net Treo Máy Kiếm Tiền Với Earnapp

Treo máy kiếm tiền tự động với Earnapp

01/05/2022
Sinhmmo.net Why Adsense Alternatives Are Good To Try

10 Reasons Why Switch To AdSense Alternatives?

22/06/2022
Sinhmmo.net Evadav Home

7+ Ad Networks with Instant Approvals: 2022

17/06/2022
Sinhmmo.net Top 12 Startup Business Tips For Success 2022

Top 12 Startup Business Tips for Success 2022

17/06/2022
Sinhmmo.net Top Tool Tăng Views Youtube Free

Top 11 Tool tăng view Youtube miễn phí hiệu quả nhất

14/06/2022

Recommended

Người Việt săn lùng tiền điện tử Pi Network vì sao?

25/02/2021

Pi Network muốn quyên góp tiền, bạn nghĩ gì?

22/02/2021

Popular Story

  • Hướng dẫn KYC từng bước theo cách mới hiện tại của Pi Nework

    Cập nhật hướng dẫn KYC Pi Network mới nhất – thành công 100%

    809 shares
    Share 324 Tweet 202
  • Review 5BillionSales hợp pháp hay lừa đảo? Cách đăng ký và kiếm tiền

    640 shares
    Share 256 Tweet 160
  • Kiếm tiền uy tín ổn định hằng ngày với App Tokenrobot

    629 shares
    Share 252 Tweet 157
  • Hướng dẫn kiếm tiền miễn phí từ App giải trí trong tầm tay

    612 shares
    Share 245 Tweet 153
  • Kiếm tiền khủng với Game NFT Mario Infinity

    604 shares
    Share 242 Tweet 151

About US

Sinh MMO

Sinh MMO là blog chia sẻ kiến thức, kĩ năng kiếm tiền online (MMO) & Digital Marketing: Affiliate Marketing, Google Adsense, Youtube, WordPress, SEO,... Cách để bạn có thể kiếm tiền, tạo thu nhập thụ động từ Internet.

Recent News

Sinhmmo.net Why Adsense Alternatives Are Good To Try

10 Reasons Why Switch To AdSense Alternatives?

22/06/2022
Sinhmmo.net Evadav Home

7+ Ad Networks with Instant Approvals: 2022

17/06/2022
Sinhmmo.net Top 12 Startup Business Tips For Success 2022

Top 12 Startup Business Tips for Success 2022

17/06/2022

Recent Comments

  • Sinh MMO Team Administrator: “Mang này có CPC nhé, kết hợp với Adsense được nha, nhưng đừng để quảng cáo adults nhé” Jun 17, 10:22
  • huynhdan70Guest: “Có thanh toán đâu” May 29, 15:56
  • EdwarddupGuest: “неплохой сайт https://charuni.ru/ot-tsellyulita/” May 25, 09:46
  • Nguyen ThangGuest: “thangnguyen2022 Số tiền: 1158$ Ngày đầu tư: 22/05/2022 Ví PM: U33073604 Địa chỉ TRC20: TZ2BPLahhhkqEoHfh6NJfFGKy6a3HFu4Ja” May 24, 17:14
  • About
  • Privacy Policy
  • Donate
  • Service PIN Adsense
  • Advertising: sinhmmo.net@gmail.com

© 2021 Sinh MMO – Make Money Online & Sinh MMO Sinh MMO.

No Result
View All Result
  • KNOWLEDGE MMO
    • Website Traffic
    • Blogging Tips
  • INVEST
    • AI Marketing
    • INSURANCE HYIP
    • LONG-TERM PROJECT
    • TOP INVEST
    • LATEST SCAMS
    • Leader Bonus
    • Top Investors Bonus
    • INSURANCE
    • REFBACK(RCB)
  • FREE MONEY
    • Google Adsense
    • Auto Make Money
    • Project FREE
    • Airdrop
    • CPM – Traffic Cash
    • Game NFT
  • PI NETWORK
    • Guide to KYC Pi Network
  • SHARE
    • Theme Wordpress
    • Plugin Wordpress
    • SEO Wordpress
    • Tips Wordpress
  • CONTACT US

© 2021 Sinh MMO – Make Money Online & Sinh MMO Sinh MMO.

Welcome Back!

Login to your account below

Forgotten Password? Sign Up

Create New Account!

Fill the forms below to register

All fields are required. Log In

Retrieve your password

Please enter your username or email address to reset your password.

Log In
wpDiscuz
Are you sure want to unlock this post?
Unlock left : 0
Are you sure want to cancel subscription?
We use cookies to ensure that we give you the best experience on our website. If you continue to use this site we will assume that you are happy with it.Ok