首页 > 代码库 > 网站robots.txt & sitemap.xml

网站robots.txt & sitemap.xml

1. 如何查看网站的robots.txt

   网址/robots.txt, 比如小米  https://www.mi.com/robots.txt

 

 

 

 

技术分享

 技术分享

 技术分享

 

sitemap.xml

技术分享

 

网站robots.txt & sitemap.xml