你现在的位置:首页 > PHP网站建设知识库 > ZenCart > 正文

zencart的robots.txt范例

zencart的robots.txt范例如下:

User-agent: * 

Allow: / 
 
User-agent: Googlebot 
 
Disallow: /download/ 
 
Disallow: /editors/ 
 
Disallow: /admin/ 
 
Disallow: /extras/ 
 
Disallow: /images/ 
 
Disallow: /cache/ 
 
Disallow: /includes/ 
 
Disallow: /blog/wp-admin/ 
 
Allow: /blog/ 
 
Allow: / 
 
Sitemap: http://www.***.com/sitemapproducts.xml 
 
Sitemap: http://www.***.com/sitemapcategories.xml